Нинішнє покоління SmartDevceBox дає можливість віддалено керувати налаштуваннями холодильників «Лібхерр», але розпізнавати продукти не вміє.
«Майкрософт» і німецька компанія «Лібхерр» (нім. Liebherr) працюють над створенням нового покоління комунікаційних модулів SmartDevceBox, які дозволять холодильникам передавати інформацію через інтернет. Про це в блозі «Майкрософт» повідомив головний інженер відділу обробки даних Тімоті Дж. Хейзен (Timothy J. Hazen).
За допомогою вбудованих камер і технології розпізнавання об'єктів рефрижератори від «Лібхерр» будуть відстежувати, які продукти зберігаються всередині, і формувати список, який власник зможе переглядати через додатки для Android і iOS. SmartDevceBox розрахований на тривалий життєвий цикл: модульні блоки можна буде модифікувати і вбудовувати в сумісні пристрої.
«Майкрософт» займається інтелектуальною начинкою приладу. На основі алгоритму глибокого навчання Computational Network Toolkit (CNTK) фахівці компанії розробили нову систему обробки зображень, здатну розпізнавати продукти харчування. Натренований на мільйонах картинок, ШІ вчиться визначати нові типи об'єктів - пакети молока, пляшки з-під кетчупу, банки з огірками і багато іншого. Коли зроблена вбудованими камерами фотографія передається моделі, вона дізнається продукти, які бачила раніше. Поки система знаходиться в стадії прототипу, але Хейзен стверджує, що вона швидко розвивається.
Liebherr (рос. «Лібхерр») - німецька машинобудівна компанія зі штаб-квартирою в місті Біберах-ан-дер-Ріс (нім. Biberach an der Ri^), заснована в 1949 році. Великий виробник будівельної техніки та холодильного обладнання.