Facebook最新研究：逆烹饪！从食物照片倒推食谱腾讯云开发者社区

通过一张简单的食物照片你能看到什么？当时和你一起吃饭的人？用餐的那个餐馆播放的爵士乐？或者是怀念那一口美味的，自己却做不出吃不到的家乡菜？

论文链接：

Facebook最新研究，使用AI技术，只需要一张食物的图片就可以洞悉它的烹饪方法。

该系统通过新颖的架构预测成分作为集合，在不强加任何顺序的情况下对其依赖性进行建模，然后通过同时处理图像及其推断成分来生成烹饪指令。

一份优秀的菜谱不仅能够写清楚配料，还要有清晰的烹饪步骤，例如大火爆炒几分钟，小火慢炖几分钟，是切丝还是切块等等。

之前，传统的做法是将图片转图谱问题看做一种“检索任务”，即根据图片的相似度从食谱谱数据集中匹配烹饪方案。

这类系统的性能在很大程度上取决于数据集的大小和多样性，以及图片的质量。如果数据集中压根没有图片对应食谱的时候，显然这个系统非常失败。

将图片到食谱看成条件生成问题可以很好的解决传统系统的难题。换句话说，与直接的图片匹配不同，后者更多的是预测配料的成分，然后根据配料和其对应的美食图片生成烹饪步骤。

从食品图片到菜谱，需要获得超越仅仅是可见的图片之外的信息，这对于当前的计算机视觉系统无疑是一个巨大挑战。

与单纯理解自然图像相比，视觉成分预测需要的还有高级推理和先验知识，例如，羊角面包中含有黄油。因为食品具有比较高的类别内可变性intra-classvariability，食物的形态在烹饪过程中发生改变，一道煮熟的菜肴和生的原料的样子可能天差地别。

逆烹饪的实现是迈向更广泛的食品理解系统的第一步，接下来也许就可以通过照片实现系统对于食物的卡路里估算和自动创建食谱。

成分预测也可以用于解决更广泛的问题，例如实现图像到集合的预测。

公开的代码与模型：

实习/全职编辑记者招聘ing

加入我们，亲身体验一家专业科技媒体采写的每个细节，在最有前景的行业，和一群遍布全球最优秀的人一起成长。坐标北京·清华东门，在大数据文摘主页对话页回复“招聘”了解详情。简历请直接发送至zz@bigdatadigest.cn