機(jī)器視覺(jué)和深度學(xué)習(xí)如何改善物流和倉(cāng)儲(chǔ)運(yùn)營(yíng)?
根據(jù)2021年P(guān)itney Bowes包裹運(yùn)輸指數(shù),全球2020年運(yùn)送了1310億個(gè)包裹。到2026年,這一數(shù)字預(yù)計(jì)將增加一倍以上,這一數(shù)字將因全球疫情和不斷增長(zhǎng)的電子商務(wù)行業(yè)而加速。隨著在線零售購(gòu)買量的增加,物流、倉(cāng)庫(kù)和運(yùn)輸流程的自動(dòng)化需求已成為當(dāng)務(wù)之急。

包裝測(cè)量、質(zhì)量檢測(cè)、條形碼讀取、光學(xué)字符識(shí)別/光學(xué)字符驗(yàn)證 (OCR/OCV)和物料搬運(yùn)優(yōu)化(目前許多企業(yè)都手動(dòng)執(zhí)行)是運(yùn)輸行業(yè)價(jià)值鏈中實(shí)現(xiàn)自動(dòng)化的關(guān)鍵階段。
"物流、倉(cāng)儲(chǔ)和運(yùn)輸企業(yè)正努力加快運(yùn)營(yíng)速度。但加快速度意味著準(zhǔn)確性和準(zhǔn)確性是必不可少的,因?yàn)闆](méi)有時(shí)間處理錯(cuò)誤。此外還有人員配備問(wèn)題。" Zebra Technologies 供應(yīng)鏈解決方案總監(jiān) Mark Wheeler 說(shuō),"當(dāng)你把這三件事放在一起時(shí),你得到的是一個(gè)非常開放的市場(chǎng),通過(guò)以創(chuàng)新的方式結(jié)合現(xiàn)有技術(shù)和新技術(shù)來(lái)嘗試新事物。"這些創(chuàng)新大多以機(jī)器視覺(jué)為中心。
視覺(jué)引導(dǎo)機(jī)器人
在倉(cāng)庫(kù)或配送中心,托盤貨物通常標(biāo)志著倉(cāng)儲(chǔ)過(guò)程的開始和結(jié)束。在進(jìn)入設(shè)施后,托盤貨物要么被拆成單獨(dú)的箱子,要么作為完整的托盤儲(chǔ)存。拆垛應(yīng)用已經(jīng)從主要使用人工過(guò)渡到依靠視覺(jué)引導(dǎo)的機(jī)器人。當(dāng)機(jī)器人在傳送帶上放置前一個(gè)貨物時(shí),機(jī)器視覺(jué)通過(guò)定位下一個(gè)要揀選的包裹來(lái)加速這一過(guò)程。
"大多數(shù)包裹都是以托盤裝載的形式到達(dá)和離開倉(cāng)庫(kù)的,"易福門公司機(jī)器人感知業(yè)務(wù)發(fā)展部的Garrett Place說(shuō),"它們?cè)诂F(xiàn)代倉(cāng)庫(kù)中的旅程是大多數(shù)機(jī)器視覺(jué)在物流中應(yīng)用的核心。
康耐視公司物流視覺(jué)產(chǎn)品高級(jí)經(jīng)理Ben Carey對(duì)此表示贊同,機(jī)器視覺(jué)在物流中的應(yīng)用涵蓋四個(gè)領(lǐng)域:測(cè)量、檢查、引導(dǎo)和識(shí)別。這些領(lǐng)域中的每一個(gè)都存在于從進(jìn)貨接收過(guò)程到分揀一直到出貨檢查點(diǎn)的過(guò)程中。
向機(jī)器視覺(jué)解決方案開發(fā)人員詢問(wèn)將可重復(fù)性帶入用例的最佳方法,他們可能會(huì)說(shuō)一些關(guān)于限制變量數(shù)量的事情。畢竟,變量會(huì)創(chuàng)建邊緣的應(yīng)用。但是,大多數(shù)倉(cāng)儲(chǔ)和物流操作所移動(dòng)的包裹可能是任何顏色、大小、形狀和材料。這種程度的可變性使得技術(shù)選擇以及解決方案的創(chuàng)建變得極為困難。
"過(guò)去幾年亞馬遜舉辦的機(jī)器人分揀挑戰(zhàn)賽就是一個(gè)很好的例子,"Place說(shuō),"這也是物流中大多數(shù)機(jī)器視覺(jué)用例是多攝像機(jī)和多模式的主要原因。一臺(tái)相機(jī)和一項(xiàng)技術(shù)不足以管理這些類型應(yīng)用中的可變性。"
Zivid公司產(chǎn)品營(yíng)銷經(jīng)理John Leonard對(duì)此表示贊同,"主要的應(yīng)用包括進(jìn)出設(shè)施的箱子的卸垛和碼垛。在這些進(jìn)出操作之間,主要是單件揀選操作和訂單揀選以完成訂單。這些都是使用不同的方法完成的,具體方法因地而異。"
這些方法包括由車載3D視覺(jué)引導(dǎo)的自主移動(dòng)機(jī)器人(AMR)。例如,AMR可以自主地走到倉(cāng)壁上尋找和選擇物品。機(jī)器人也可以挑選由傳送帶送來(lái)的物品。其他移動(dòng)機(jī)器人可以將物品運(yùn)到視覺(jué)站,以便檢查貨物的類型和數(shù)量。

Zebra公司推出的 FlexShelf Guide為料倉(cāng)尺寸和間距提供了靈活的配置,擴(kuò)展了可使用 AMR 揀選的物品類型。
對(duì)于全托盤裝載存儲(chǔ),許多倉(cāng)庫(kù)部署自動(dòng)導(dǎo)引車(AGV)來(lái)揀選和存儲(chǔ)托盤以進(jìn)行檢索。在行駛過(guò)程中,AGV依靠機(jī)器視覺(jué)進(jìn)行托盤姿勢(shì)和障礙物檢測(cè)。機(jī)器視覺(jué)代碼讀取在整個(gè)過(guò)程中跟蹤托盤和箱子負(fù)載。
當(dāng)滿載的托盤準(zhǔn)備離開設(shè)施時(shí),AGV負(fù)責(zé)管理移動(dòng),而機(jī)械臂將箱子轉(zhuǎn)換為滿載托盤。然后,這些即裝即用的托盤在進(jìn)入卡車之前進(jìn)行稱重和測(cè)量,使托盤尺寸成為物流中機(jī)器視覺(jué)的另一個(gè)強(qiáng)大用例。
"該行業(yè)已經(jīng)發(fā)生了轉(zhuǎn)變,從嚴(yán)格按重量評(píng)估運(yùn)費(fèi)轉(zhuǎn)向按體積重量收費(fèi),這使得精確的尺寸測(cè)量比以往任何時(shí)候都更加重要。"LMI Technologies公司美洲區(qū)域發(fā)展經(jīng)理Daniel Howe說(shuō),"智能3D傳感器是包裝和物流過(guò)程自動(dòng)化的關(guān)鍵驅(qū)動(dòng)因素,包括體積尺寸、分揀和表面缺陷等檢測(cè)。"
許多AMR和AGV采用易福門的O3R平臺(tái)進(jìn)行機(jī)器人感知。它由緊湊型攝像頭(VGA攝像頭和飛行時(shí)間傳感器)和帶有NVIDIA Jetson TX2的視覺(jué)處理單元(VPU)組成,用于評(píng)估數(shù)據(jù)。最多可以將6個(gè)攝像頭連接到基于Linux的設(shè)備,包括來(lái)自其他公司的傳感器。
對(duì)提高速度和吞吐量的高需求
雖然物流和倉(cāng)儲(chǔ)應(yīng)用面臨許多挑戰(zhàn),但對(duì)更高速度和更高吞吐量的需求是不變的。挑戰(zhàn)包括用透明聚脂袋包裝的物品,由于其反射光線的方式,給成像帶來(lái)挑戰(zhàn)。其他揀件操作可能需要顏色作為物品檢測(cè)過(guò)程的一部分,這可能需要支持圖像中顏色信息的3D視覺(jué)。
根據(jù)Leonard的說(shuō)法,校準(zhǔn)是所有3D相機(jī)的一大挑戰(zhàn),因?yàn)樗鼈儽辉O(shè)計(jì)為在千分尺范圍內(nèi)工作,工業(yè)環(huán)境中常見(jiàn)的敲擊、溫度波動(dòng)和振動(dòng)很容易影響校準(zhǔn),從而影響3D相機(jī)的精度。
一些相機(jī),如Zivid 3D相機(jī),是專門為在工業(yè)環(huán)境中運(yùn)行而設(shè)計(jì)和制造的,額定等級(jí)為IP65,并具有自動(dòng)校準(zhǔn)功能。這意味著,如果由于大型卷簾門的打開和關(guān)閉而使溫度變化了5度(這在物流倉(cāng)庫(kù)中很常見(jiàn)),然后相機(jī)會(huì)進(jìn)行調(diào)整以保持完美校準(zhǔn)。
LMI公司開發(fā)了超寬視場(chǎng)Gocator 2490傳感器,該傳感器專門設(shè)計(jì)用于為運(yùn)輸提供快速準(zhǔn)確的包裹尺寸測(cè)量。箱子可以在輸送機(jī)上以2 m/s的速度移動(dòng)。根據(jù)Howe的說(shuō)法,一個(gè)單寬視場(chǎng)Gocator 2490智能傳感器可以以800 Hz的速率掃描和測(cè)量整個(gè)盒子尺寸(寬x高x深),掃描區(qū)域?yàn)? m x 1 m,在所有三個(gè)維度(x、Y、Z)中提供2.5 mm的分辨率。
足夠高的分辨率,使Gocator 2490不僅可以測(cè)量各種包裹大小的尺寸,甚至可以檢測(cè)包裝中的細(xì)微缺陷。這種在線檢查功能允許在檢測(cè)到有缺陷的包裹時(shí)觸發(fā)通過(guò)/失敗決定。
Gocator 2490還為解決更高級(jí)的包裝應(yīng)用(如空隙填充)提供了機(jī)會(huì),這涉及掃描帶有物品的開放包裝,并確定需要多少包裝材料來(lái)填充空白空間。對(duì)于此類應(yīng)用,雙攝像頭配置有助于避免盒子或手提袋內(nèi)的遮擋。
邊緣深度學(xué)習(xí)
隨著物流領(lǐng)域的復(fù)雜性成倍增加,機(jī)器視覺(jué)的應(yīng)用也面臨著更多挑戰(zhàn)。例如,試圖檢測(cè)高速傳送帶上隨機(jī)方向的不同類型的物體,傳統(tǒng)的基于規(guī)則的機(jī)器視覺(jué)檢測(cè)在這些情況下會(huì)遇到困難。
然而,嵌入式平臺(tái)中易于使用的機(jī)器學(xué)習(xí)和深度學(xué)習(xí)正在出現(xiàn),以解決以前具有挑戰(zhàn)性的應(yīng)用。例如,康耐視最近推出的In-Sight 2800具有邊緣學(xué)習(xí)功能,易于設(shè)置,不需要編程。它能對(duì)從箱子到手提箱再到塑料袋的所有東西進(jìn)行快速而準(zhǔn)確的分類,并完全在智能相機(jī)上運(yùn)行。
"In-Sight 2800上的邊緣學(xué)習(xí)等技術(shù)提高了包裝檢測(cè)率,從而減少了人工返工,并通過(guò)更先進(jìn)的材料處理自動(dòng)化實(shí)現(xiàn)更好的訂單準(zhǔn)確性,"Carey說(shuō),"我們的客戶受益于處理速度的提高和更少的人工互動(dòng),使這些公司能夠在不改變?nèi)藛T數(shù)量的情況下管理波動(dòng)的需求,這在當(dāng)今勞動(dòng)力緊張的環(huán)境中仍然是一個(gè)挑戰(zhàn)。"
機(jī)器視覺(jué)的民主化
例如,現(xiàn)代倉(cāng)庫(kù)中部署的大多數(shù)技術(shù),包括2D和3D相機(jī)以及增強(qiáng)的計(jì)算能力,都是以前已知方法的迭代。有點(diǎn)新的是在多攝像頭、多模式戰(zhàn)略中利用所有這些技術(shù),并結(jié)合ML的大型處理能力來(lái)管理應(yīng)用。
"過(guò)去我們常常在倉(cāng)庫(kù)中看到單一供應(yīng)商的解決方案,"Place解釋道,"現(xiàn)在,我們會(huì)看到多個(gè)供應(yīng)商和技術(shù)的組合,每個(gè)供應(yīng)商和技術(shù)都有自己的優(yōu)勢(shì),共同部署以解決挑戰(zhàn)。這種方法將繼續(xù)解鎖以前未被機(jī)器視覺(jué)觸及的用例。可以把它想象成在倉(cāng)儲(chǔ)和物流中機(jī)器視覺(jué)的民主化。"
很難將焦點(diǎn)指向一項(xiàng)技術(shù)的進(jìn)步。當(dāng)然,工業(yè)相機(jī)正在提供更好、更可重復(fù)的數(shù)據(jù),計(jì)算速度更快,但沒(méi)有什么能改變游戲規(guī)則。最大的進(jìn)步在于組件在解決倉(cāng)庫(kù)問(wèn)題的多技術(shù)方法中的易用性。
"物流正朝著機(jī)器人技術(shù)的方向發(fā)展,"Place總結(jié)道,"機(jī)器人是一個(gè)集成問(wèn)題。機(jī)器視覺(jué)及其復(fù)雜性正在從單一相機(jī)的焦點(diǎn)轉(zhuǎn)向減少現(xiàn)代倉(cāng)庫(kù)所需的所有組件集成摩擦的焦點(diǎn)。這種方法將把我們帶到這個(gè)旅程的下一步。"
























