Google исследователь Кевин П. Мерфи показал проект во время бизнес саммита в Бостоне. Названная Im2Calories, программа использует глубокие алгоритмы обучения, что-то вроде искусственного интеллекта для анализа фотографии. Вполне возможно, что разрешение фотографии не является препятствием: программа может работать даже для instagram фотографий.

Программе Im2Calories уже удалось насчитать два яйца, два блина и три полоски бекона на фотографии, а затем сравнить размер каждого объекта с размером тарелки и оценить использованные приправы для того, чтобы дать окончательную оценку калорийности.

Как и многие из подобных новых проектов, данный алгоритм не является совершенным: он будет продолжать совершенствоваться в течение долгого времени, собирая как можно больше данных. 

Мы полу-автоматизированы - говорит Мерфи, отметив, что пользователи смогут исправлять некоторые ошибки самостоятельно, если это будет необходимо. Если программа работает только 30% времени, этого уже достаточно, чтобы люди начали использовать её. Мы собираем данные и делаем программу лучше стечением времени.

Другая потенциальная неисправность исходит от фактического подсчета калорий.  Технология может сказать только о тех продуктах, которые есть на фото. Нужно понимать, что это не какой-то волшебный датчик калорий, поэтому он должен опираться только на доступные на фото продукты.

Тем не менее, технологии, которые могут принести кардинальные изменения в мир потребления пищи, по-настоящему интригуют.

Мерфи видит (а может лишь хочет видеть), как Im2Calories становится чем то гораздо большим, чем бесполезным новым способом поиграть с фотографиями на телефоне. Мерфи отмечает:

Начать можно с потенциально важной информации о нескольких людях и начать делать статистику населения. У меня есть коллеги из эпидемиологии и здравоохранения, и они действительно хотят этот материал.