未來讓家裡的冰箱協助食材的採購及規畫就要實現了,日前,微軟與德國Liebherr集團旗下的家電部門合作,共同開發Liebherr的新一代SmartDeviceBox通訊模組,能讓Liebherr旗下的冰箱和冰櫃變成連網裝置,可以幫使用者進行食品管理。不過,這套智慧冰箱系統目前還只是原型(Prototype)。
除了搭載SmartDeviceBox模組外,要變成智慧連網冰箱,在冰箱內也具備了攝影機以及物品辨識技術,用來監控與辨識冰箱內儲存的食品與雜貨,而這些食品與雜貨的資訊會自動列入庫存清單,提供使用者查看冰箱內的食物。
另外,用戶也能使用SmartDeviceBox的語音模組,來新增其他的雜貨至購物清單上,而購物清單可以透過iOS、Android或Windows裝置上的行動App存取。
而在微軟與Liebherr集團的合作中,微軟提供電腦視覺技術與深度機器學習技術,微軟的認知服務電腦視覺API(Cognitive Services Computer Vision API)提供智慧冰箱能辨識冰箱中的物品,且能用多種類別標籤和物品標籤來標註系統偵測到的食品或雜物圖像。
(圖片來源/微軟)
此外,微軟的資料科學家與Liebherr集團也合作打造新圖像處理系統,採用微軟開源運算網路工具(CNTK)中的深度學習演算法,來偵測冰箱中特定的食品,透過訓練電腦視覺模型上百萬個圖像,微軟的系統學會從牛奶盒、番茄醬瓶等範例圖像中辨識出物品的種類。