今天小編分享的科技經驗:AI無人商店背後,是上千個印度人通過攝像頭看美國人買西藍花?,歡迎閲讀。
機器之心報道
機器之心編輯部
AI 無人商店,背後疑似是 1000 印度人看攝像頭:大廠的「拿貨即走」沒有走通?
人們常説,有多少智能,就有多少人工。但是,亞馬遜的這個項目,人工含量似乎有點高。
這個項目名叫「Just Walk Out」。就像它的名字所暗示的,你可以走進亞馬遜的無人購物商店裏,選好東西,然後直接走出去,無需排隊等待結賬。因為,通過與計算機視覺和深度學習算法相結合,Just Walk Out 技術能夠準确識别你拿取的商品,并完成結算,整個過程非常省心,聽起來也很智能。
但是,事實可能并非如此。據外媒 The Information 報道,「Just Walk Out」其實要依靠來自印度的一個千人團隊來觀看和标記視頻,以确保準确的結算結果。從 2022 年的數據來看,每 1000 筆交易就有 700 筆需要該團隊審核,而亞馬遜原本希望這一數字是 20~50 筆。
Just Walk Out 于 2016 年首次推出,展示了亞馬遜在雜貨店購物方面最大膽的創新。它最大的好處是不用采集顧客生物識别信息,可以免去很多隐私方面的擔憂。
在 2023 年 9 月發布的一篇介紹文章中,亞馬遜寫到,「Just Walk Out 是計算機視覺、目标識别、高級傳感器、深度機器學習模型和生成式人工智能的結合。亞馬遜研究人員找到了一種方法,使這些技術在後台無縫地協同工作。如此一來,商店幾乎可以立即弄清楚哪個顧客拿了金槍魚三明治,哪個拿了雞肉沙拉,然後算出正确的費用,并讓顧客拿着東西離開。」
具體來説,采用 Just Walk Out 的商店會在天花板上安裝幾個專用攝像頭。在購物者進入商店後,該技術會為他們分配一個臨時數字代碼。當他們離開時,代碼會消失。如果他們回來,他們會得到一個新代碼。
在購物時,Just Walk Out 可以檢測購物者的手何時與貨架上的商品互動。在產生互動後,算法會将商品放入虛拟購物車。如果購物者把東西放回貨架,系統也會進行相應調整。此外,該技術還會提醒店員将放錯地方的物品放回去。對于較小、難以看到的產品,如口香糖或口紅,貨架上的重量傳感器會檢測顧客何時拿起東西。
亞馬遜表示,為了訓練這個系統,他們創建了一個合成數據集。該數據集包含數百萬張 AI 生成的合成圖片和視頻剪輯,模仿了真實的、有時甚至是罕見的購物場景。
這項技術在需要快捷購物的體育賽事場景中非常有效。根據亞馬遜的數據,在 2022 年 9 月安裝 Just Walk Out 技術後,District Market(一家提供啤酒、蘇打水、比賽日小吃的便利店)的銷售額比同一地點的前一家商店多了一倍,球迷滿意度調查得分創下歷史新高。
在過去的幾年裏,亞馬遜已經将 Just Walk Out 推廣到大型商店。目前,44 家 Amazon Fresh(亞馬遜旗下生鮮商店)中有 27 家擁有這項技術。亞馬遜還在一些 Whole Foods(亞馬遜旗下連鎖超市)添加了 Just Walk Out。
但 The Information 記者 Theo Wayt 在 2023 年的一份報道中指出,亞馬遜尚未在一家不屬于自己的大型商店中部署這項技術,因為它的成本實在是太高了:首先,引入該技術的超市要進行更新改造,這意味着要停業一段時間,每家商店的掃描器和攝影機系統也非常昂貴;其次,工作人員需要确保商店貨架保持整齊,以便掃描技術能夠發揮作用。
更要命的是,亞馬遜仍然依靠大量的人力在幕後為 Just Walk Out 保駕護航。一位技術人員表示,截至 2022 年年中,亞馬遜在印度有 1000 多人在為 Just Walk Out 工作,他們的工作包括人工審核交易和标注視頻中的影像,以訓練 Just Walk Out 的機器學習模型。該人士説,對後台人員的依賴在一定程度上解釋了為什麼顧客走出商店後需要幾個小時才能收到收據。這樣的延遲可能會讓精打細算的購物者感到不安。
但亞馬遜的發言人在一定程度上反駁了該説法,稱 The Information「對人工審核員的角色和數量的描述并不準确」,但沒有説明亞馬遜使用了多少審核員。這位發言人表示,印度員工的主要職責是機器學習數據助理,除了驗證購買情況外,還負責注釋視頻影像,幫助公司訓練模型。
不過,時隔一年,亞馬遜似乎也扛不住了。
在 The Information 的一篇新報道中,Theo Wayt 指出,亞馬遜準備在新開的一批雜貨店中放棄 Just Walk Out,轉用帶有螢幕和掃描器的 Dash Carts 智能購物車結賬。這種購物車可以實時顯示購物支出,比 Just Walk Out 更可靠。
這篇報道讓 Just Walk Out 背後的千人印度團隊重新吸引了人們的注意。對于這種購物時有人看着的感覺,很多人感覺不自在,對一些「智能」設備的濾鏡也是碎了一地。
也有人比較樂觀,覺得亞馬遜确實在靠這個團隊改進 AI 算法,只是進展不太順利。「想象 1000 個家夥看着美國人購買西蘭花還是很有趣的」。
在事件發酵後,亞馬遜發言人不得不再次出來辟謠。
「認為 Just Walk Out 技術依賴于人類審核員在印度現場看着購物者的説法具有誤導性和不準确性,」亞馬遜發言人在給 USA TODAY 的電子郵件聲明中表示。「與許多人工智能系統一樣,底層機器學習模型通過生成合成數據和注釋實際視頻數據來不斷改進。」
「我們的員工會通過查看錄制的視頻片段來驗證一小部分購物訪問,以确保我們的系統能夠達到我們的高準确性标準,這是因為我們不斷改進算法,并利用人工輸入來糾正算法。」這位發言人補充説。
作為兩篇報道的作者,Theo Wayt 極力發聲明説報道的内容被社交媒體扭曲了。不過,他也認為,這個故事傳播了一個基本事實:許多華而不實的 AI 背後仍需要人工。
從目前的消息來看,亞馬遜似乎還沒有打算完全放棄 Just Walk Out。他們會在一些 Fresh 商店、Amazon Go 便利店以及一些體育場管中保留這項技術。
參考鏈接:https://www.aboutamazon.com/news/retail/how-does-amazon-just-walk-out-work
https://www.theinformation.com/articles/amazons-grocery-stores-to-drop-just-walk-out-checkout-tech?rc=ks2jbm
https://www.theinformation.com/articles/how-amazons-big-bet-on-just-walk-out-stumbled?rc=ks2jbm
https://www.usatoday.com/story/money/shopping/2024/04/04/amazon-just-walk-out-indian-workers/73204975007/
機器之心 AI 技術論壇「視頻生成技術與應用 — Sora 時代」,将于 4.13 在北京海澱舉辦。
論壇聚焦于 Sora、視頻生成技術、多模态大模型等前沿領網域的技術突破和應用實踐,助力企業和從業者緊跟技術發展潮流、掌握最新技術進展與技術突破。
早鳥期即将結束,快來鎖定入場席位吧!
© THE END
轉載請聯系本公眾号獲得授權
投稿或尋求報道:[email protected]