技術(shù)
導(dǎo)讀:本周一,亞馬遜智能零售店Amazon Go正式向公眾開放。消費(fèi)者可以直接走進(jìn)商店,拿下貨架上的貨物然后離開,整個(gè)過(guò)程不需要排隊(duì)結(jié)賬。該店位于西雅圖,占地1800平方英尺。亞馬遜公司表示,“Just Walk Out ” 技術(shù)利用計(jì)算機(jī)視覺(jué)、傳感器融合(sensor fusion)技術(shù)及深度學(xué)習(xí)算法來(lái)提供這種無(wú)縫的購(gòu)物體驗(yàn)。
亞馬遜無(wú)人收銀零售店Amazon Go終于開張了!
本周一,占地面積1800平方英尺的Amazon Go正式在西雅圖向公眾開放?!安挥门抨?duì),不用結(jié)賬,沒(méi)有收銀臺(tái)”,Amazon Go會(huì)顛覆零售行業(yè)嗎?
Amazon Go的自白
1. Amazon Go是什么?
Amazon Go是一種無(wú)需結(jié)賬臺(tái)的新型商店。我們創(chuàng)造了世界上最先進(jìn)的購(gòu)物技術(shù),所以你不必排隊(duì)等候。通過(guò)我們的Just Walk Out購(gòu)物體驗(yàn),只需使用Amazon Go應(yīng)用程序進(jìn)入商店,購(gòu)買想要的產(chǎn)品即可。無(wú)需在結(jié)賬柜臺(tái)前排長(zhǎng)隊(duì)等待。
2. Amazon Go如何運(yùn)作?
計(jì)算機(jī)視覺(jué),傳感器融合和深度學(xué)習(xí)等用在自動(dòng)駕駛汽車中的相同技術(shù)使我們的免結(jié)賬購(gòu)物體驗(yàn)成為可能。我們的Just Walk Out技術(shù)能夠自動(dòng)檢測(cè)商品何時(shí)從貨架上取下或被重新放回,并在虛擬購(gòu)物車中跟蹤貨物。當(dāng)你完成購(gòu)物,你可以離開商店。不久之后,我們會(huì)向您發(fā)送收據(jù)并向您的亞馬遜賬戶收費(fèi)。
3.在Amazon Go能買到什么?
我們提供美味的即食早餐,午餐,晚餐和小吃。我們選的必需品包括:面包和牛奶等主食,以及手工做的奶酪和巧克力。對(duì)于快速的家常晚餐,拿起我們廚師設(shè)計(jì)的亞馬遜膳食套件之一,30分鐘就能做出兩人份的一頓飯。
4. 如何在Amazon Go購(gòu)物?
你只需要一個(gè)亞馬遜賬戶、免費(fèi)的Amazon Go應(yīng)用程序,以及最新一代的iPhone或Android手機(jī)。您可以在Apple App Store,Google Play和Amazon Appstore上找到Amazon Go應(yīng)用程序。
當(dāng)你到達(dá)的時(shí)候,使用Amazon Go應(yīng)用程序進(jìn)入商店,然后就可以不需要用手機(jī)了。然后就像在任何其他商店一樣瀏覽和購(gòu)物吧。你完成購(gòu)物后,不需要排隊(duì)結(jié)賬。
5. 哪兒有Amazon Go?
我們的商店位于華盛頓州西雅圖市第七大道2131號(hào),靠近第七大道和Blanchard的拐角處。
6. 什么時(shí)間開放?
周一到周五,早上7點(diǎn)到晚上9點(diǎn)。
7. Amazon Go有多大?
大約1800平方英尺。
8. Amazon Go里有人工作嗎?
有人。員工在商店里準(zhǔn)備原料、制作速食食品、整理貨架、并幫助客戶。
9. 為什么要建立這個(gè)Amazon Go?
我們問(wèn)自己:如果我們能夠創(chuàng)造一個(gè)不需要排隊(duì)結(jié)賬的購(gòu)物體驗(yàn),會(huì)怎么樣?我們能否推動(dòng)計(jì)算機(jī)視覺(jué)和機(jī)器學(xué)習(xí)的界限來(lái)創(chuàng)造一個(gè)商店,客戶可以隨心所欲地去拿他們想要的貨物,然而就走?我們對(duì)這些問(wèn)題的回答是Amazon Go和Just Walk Out Shopping技術(shù)。
全景式體驗(yàn)Amazon Go, 身臨其境體驗(yàn)智能零售
注:無(wú)人超市入口是一排電子“門衛(wèi)”
超市的入口感覺(jué)就好像你正在進(jìn)入一個(gè)地鐵站,一排電子大門位于商店的入口,被只允許擁有該商店智能手機(jī)應(yīng)用的人進(jìn)入。
西雅圖亞馬遜總部辦公樓下的全球首家無(wú)人商店是一個(gè)1800平方英尺的小型超市,進(jìn)入超市,購(gòu)物者會(huì)迎接一系列的沙拉、三明治和飲料,以及即食的三餐食品。
Amazon Go還提供小瓶裝的啤酒、葡萄酒以及肉類,甚至所有餐具都是亞馬遜自制的。繼亞馬遜收購(gòu)Whole Foods之后,還有一部分售賣區(qū)域?qū)iT擺放薯片,餅干和堅(jiān)果,這些都來(lái)自雜貨商365 Everyday Value品牌。
超市內(nèi)再無(wú)購(gòu)物車,所有結(jié)賬過(guò)程都是自動(dòng)的,商品可直接裝入購(gòu)物袋內(nèi)。亞馬遜說(shuō),每當(dāng)顧客從貨架上取貨時(shí),產(chǎn)品就會(huì)自動(dòng)放入他們?cè)诰€賬戶的購(gòu)物車中。如果顧客把商品放回貨架上,亞馬遜會(huì)將其從虛擬購(gòu)物籃中移除。
Amazon Go使用相機(jī)和傳感器網(wǎng)絡(luò)來(lái)動(dòng)態(tài)監(jiān)控客戶,并通過(guò)智能手機(jī)應(yīng)用程序自動(dòng)為他們從商店中取出的物品進(jìn)行計(jì)費(fèi)。亞馬遜并沒(méi)有多說(shuō)這個(gè)系統(tǒng)是如何工作的,只是說(shuō)它涉及到復(fù)雜的計(jì)算機(jī)視覺(jué)和機(jī)器學(xué)習(xí)軟件。
安裝在天花板上的數(shù)十個(gè)方形黑色攝像機(jī)持續(xù)監(jiān)控客戶行為,該系統(tǒng)對(duì)個(gè)人購(gòu)物者來(lái)說(shuō)效果不錯(cuò),但仍然在努力準(zhǔn)確地收集那些正在群體中移動(dòng)的人們,比如那些帶著小孩的家庭。 Go的工程師一直在研究一起購(gòu)物的家庭,并調(diào)整傳感器,以識(shí)別孩子在商店里閑逛時(shí)是否吃東西。
無(wú)人超市并不意味著完全沒(méi)有工作人員,超市的入口有迎賓人員,一名身份證檢查員在酒吧附近駐扎,至少有六名工人在廚房?jī)?nèi)可見(jiàn)。
最后的結(jié)賬部分也是相當(dāng)便捷,拿好貨物走出超市,沒(méi)有排隊(duì)幾乎瞬間完成收費(fèi)過(guò)程。
亞馬遜的核心技術(shù),新智元專家怎么看?
Amazon Go 宣傳視頻發(fā)布后,在業(yè)界引起了強(qiáng)烈反響,在新智元人工智能核心微信群中,各位專家也進(jìn)行了熱烈的討論。那么,專家們?cè)趺纯磥嗰R遜這一激動(dòng)人心的嘗試?
專家1 (資深技術(shù)人員,與Amazon Go項(xiàng)目?jī)?nèi)部人員很熟):里面有N 多攝像頭和3D攝像頭,做了3D人體建模和行為分析??梢哉f(shuō),Amazon Go絕對(duì)不是 PR,做這個(gè)小店有千萬(wàn)美元級(jí)別的投入。
專家2 (機(jī)器人公司董事長(zhǎng)):拍腦袋分析一下,進(jìn)門掃完碼后,后臺(tái)系統(tǒng)通過(guò)3D攝像頭把人體特征值與賬戶ID進(jìn)行綁定,然后對(duì)取貨的動(dòng)作視頻進(jìn)行分析(通過(guò)深度學(xué)習(xí)來(lái)正確辨識(shí)人類取放商品的動(dòng)作細(xì)節(jié))來(lái)實(shí)時(shí)更新虛擬購(gòu)物車,出門后自動(dòng)支付。如果店內(nèi)人流密集的化,感覺(jué)后臺(tái)的實(shí)時(shí)運(yùn)算量極其巨大。進(jìn)門的閘機(jī)確保了客戶ID能被有效辨識(shí),但是如果是一個(gè)大人帶著一個(gè)小孩,出店的時(shí)候小孩也拿著東西,而且與大人分開較遠(yuǎn)的話,系統(tǒng)可能就無(wú)法自動(dòng)結(jié)賬,不過(guò)可以出報(bào)警。
專家3(工程師):如果問(wèn)題縮小到只是進(jìn)出閘機(jī)那會(huì)整個(gè)人的識(shí)別, 只做一進(jìn)一出的對(duì)應(yīng)及出閘機(jī)時(shí)身上攜帶商品(用 RFID之類補(bǔ)充確認(rèn))的感應(yīng)識(shí)別, 那似乎還在可腦補(bǔ)范圍之內(nèi)。
核心技術(shù) Amazon Rekognition
根據(jù)官網(wǎng)介紹,Amazon Go 主要的識(shí)別技術(shù)叫做 Amazon Rekognition,能夠在消費(fèi)者購(gòu)物流程中進(jìn)行一系列不同類型的識(shí)別,以判斷多種不同的購(gòu)物場(chǎng)景。
六張圖看懂 Amazon Go 消費(fèi)過(guò)程
或許看了視頻和上面的說(shuō)明還稍嫌眼花繚亂,美國(guó)報(bào)紙 US Today 對(duì) Amazon Go 的購(gòu)物消費(fèi)過(guò)程做了更賤簡(jiǎn)單易懂的可視化展示,下面具體看一下:
首先,消費(fèi)者用手機(jī)像地鐵刷卡那樣,進(jìn)入店鋪——當(dāng)然,手機(jī)上得注冊(cè)有亞馬遜的賬戶。與此同時(shí),位于入口處的攝像頭會(huì)進(jìn)行人臉識(shí)別,識(shí)別的技術(shù)主要是 Amazon Rekognition。
當(dāng)消費(fèi)者在貨架前停下來(lái)時(shí),攝像頭會(huì)捕捉并記錄消費(fèi)者拿起的商品,以及再次放回去的那些。
放置在貨架上的攝像頭會(huì)通過(guò)手勢(shì)識(shí)別,消費(fèi)者是拿起了一件商品(購(gòu)買)還是拿起一件商品看了看又放回貨架(不購(gòu)買)。
店內(nèi)麥克風(fēng)會(huì)根據(jù)周圍環(huán)境聲音判斷消費(fèi)者所處的位置。
貨架上的紅外傳感器、壓力感應(yīng)裝置(記錄商品被取走),以及荷載傳感器(記錄商品被放回)會(huì)記錄下消費(fèi)者取走了哪些商品以及放回了多少商品。同時(shí),這些數(shù)據(jù)會(huì)實(shí)時(shí)傳輸給 Amazon Go 商店的信息中樞,每位顧客都不會(huì)有延遲。
在離店時(shí),傳感器會(huì)掃描并記錄下消費(fèi)者購(gòu)買的商品,同時(shí)自動(dòng)在消費(fèi)者的賬戶上結(jié)算金額。
利用這些技術(shù),Amazon Go 究竟如何實(shí)現(xiàn)“未來(lái)購(gòu)物過(guò)程”?專利文件揭露答案
國(guó)外網(wǎng)站上,有人翻出了亞馬遜兩年前申請(qǐng)專利時(shí)發(fā)布的文件。
亞馬遜提交的專利文件的描述中,提到這一系統(tǒng)使用了包括 RFID(無(wú)線射頻識(shí)別)在內(nèi)的技術(shù),在探測(cè)購(gòu)物者是否從貨架上拿下了商品,然后把數(shù)據(jù)傳輸?shù)揭慌_(tái)手持設(shè)備上。
這也意味著,在購(gòu)物者繼續(xù)購(gòu)物的同時(shí),系統(tǒng)已經(jīng)對(duì)商品狀態(tài)進(jìn)行了同步,這免去了傳統(tǒng)排隊(duì)結(jié)賬的方式。當(dāng)消費(fèi)者從商店的”過(guò)渡區(qū)“走出商店時(shí),系統(tǒng)會(huì)感應(yīng)到消費(fèi)者已經(jīng)離開,隨后對(duì)他們帶走的物品進(jìn)行統(tǒng)計(jì),并在顧客的亞馬遜賬戶進(jìn)行扣款。
從視頻中可以看到,消費(fèi)者需要使用智能手機(jī)驗(yàn)證進(jìn)入商店
專利示意圖:
可以看出,位于店內(nèi)有各種傳感器,包括商場(chǎng)安裝的攝像頭、商品上的重量感應(yīng)器。
消費(fèi)者購(gòu)物過(guò)程中的具體識(shí)別過(guò)程
專利文件寫道:
例如,如果消費(fèi)者在零售店內(nèi)購(gòu)物,他不需要停下來(lái),用現(xiàn)金或者與收銀員溝通,或是使用自動(dòng)結(jié)賬臺(tái)來(lái)完成付款,因?yàn)樗谏痰陜?nèi)選擇的商品已經(jīng)被系統(tǒng)記錄,并通過(guò)與消費(fèi)者本人相關(guān)的商品確認(rèn)清單確認(rèn),所以,他們能帶著選購(gòu)的商品直接走出商店。
系統(tǒng)會(huì)探測(cè)到消費(fèi)者走出店門,隨著消費(fèi)者通過(guò)出口(也就是過(guò)渡區(qū)域),系統(tǒng)會(huì)自動(dòng)對(duì)消費(fèi)者挑選的商品進(jìn)行結(jié)賬,期間消費(fèi)者不用做任何的停留,也就避免了等待和排隊(duì)。
專利文件表明,系統(tǒng)可以使用消費(fèi)者過(guò)去的購(gòu)買記錄,來(lái)幫助確認(rèn)消費(fèi)者在購(gòu)物時(shí)選擇的某一商品。
例如,如果貨存清單管理系統(tǒng)不能確定消費(fèi)者所選擇的到底是一瓶番茄醬還是芥末,它可能會(huì)參考這位顧客過(guò)去的消費(fèi)記錄,或者這位顧客是否已經(jīng)選擇過(guò)相同的商品。舉個(gè)例子,如果顧客的消費(fèi)歷史記錄顯示他只購(gòu)買番茄醬,那么這些信息可能會(huì)被用于確認(rèn)消費(fèi)者選擇的就是一瓶番茄醬。
亞馬遜在視頻中提到,他們使用的技術(shù)包括多傳感器融合,從不同傳感器上獲得的數(shù)據(jù)增加了判斷的可信度和準(zhǔn)確率。以下是專利文件對(duì)多傳感器數(shù)據(jù)匯合的描述。
在一些配置條件下,來(lái)自其他輸入設(shè)備的數(shù)據(jù)可能會(huì)被用于幫助確定某一商品是否已經(jīng)被選中或者被放回到貨架上。比如,如果系統(tǒng)判斷一件商品已經(jīng)被放回到貨架上,除了圖像分析外,基于形狀和壓力的傳感器,以及稱重設(shè)備上的數(shù)據(jù),系統(tǒng)會(huì)對(duì)該商品生成一個(gè)權(quán)重。圖像分析也許能有助于將貨架上匹配的商品數(shù)量減小到一個(gè)更小的清單,提高匹配率。
貨架上商品的權(quán)重會(huì)與可能匹配的每個(gè)商品被存儲(chǔ)在系統(tǒng)內(nèi)的權(quán)重進(jìn)行比較,來(lái)確定商品是否真的已經(jīng)被放回到貨架上。結(jié)合多個(gè)來(lái)源的輸入,系統(tǒng)會(huì)生成一個(gè)高置信度的數(shù)字,來(lái)提升系統(tǒng)確認(rèn)某一商品是被從貨架上拿走還是被放回的準(zhǔn)確率。
這一專利文件是在兩年前公布的,現(xiàn)在亞馬遜很可能也做了很多的改變。但是,從視頻上可以看到,基本思路還是沿襲了專利文件中的描述。
由此看來(lái),其基本技術(shù)實(shí)現(xiàn)與新智元專家的推測(cè)基本一致。
18年初最值得參加的一場(chǎng)無(wú)人零售線下酒會(huì)
時(shí)間:2018年1月31日 15:30 - 20:00
地點(diǎn):深圳市福田區(qū)財(cái)富大廈4樓臻品軒(深圳會(huì)展中心附近)
規(guī)模:150人
費(fèi)用:AA制,每位200元,提供星級(jí)酒店豐富晚餐一頓,另有禮品及現(xiàn)場(chǎng)抽獎(jiǎng)環(huán)節(jié)
聯(lián)系人:嚴(yán)立(客戶總監(jiān)) 15828138155;徐永紅(執(zhí)行主編) 13266695570
主辦單位:中國(guó)物聯(lián)網(wǎng)產(chǎn)業(yè)應(yīng)用聯(lián)盟
深圳市物聯(lián)傳媒有限公司
冠名企業(yè):深圳市遠(yuǎn)望谷信息技術(shù)股份有限公司
贊助企業(yè):天虹商場(chǎng)股份有限公司
深圳市中谷聯(lián)創(chuàng)信息服務(wù)有限公司
深圳市銓順宏科技有限公司
常熟市毅博電器有限公司
深圳中集智能科技有限公司
同時(shí)對(duì)外征集活動(dòng)贊助企業(yè),贊助企業(yè)可享受兩個(gè)參會(huì)名額,同時(shí)提供活動(dòng)冠名、開場(chǎng)致辭、并可在現(xiàn)場(chǎng)發(fā)放企業(yè)資料,在簽到臺(tái)放置易拉寶等權(quán)益。
報(bào)名方式:
微信報(bào)名——請(qǐng)微信掃描下方二維碼,填寫個(gè)人信息后支付報(bào)名費(fèi)用即可!(酒會(huì)AA制,提供星級(jí)酒店豐富晚餐一頓,另有禮品及現(xiàn)場(chǎng)抽獎(jiǎng)環(huán)節(jié))
微信掃描報(bào)名,謝絕空降!