美团主办国际顶会 ICCV 2021 研讨会，食品视觉领域顶级挑战赛开启报名

关注

发布于: 2021 年 06 月 08 日

2021 年 10 月 11-17 日,两年一度的计算机视觉领域顶级学术会议 ICCV (International Conference on Computer Vision) 将在加拿大蒙特利尔召开。根据 ICCV 2021 官方议程,由美团视觉智能中心联合中科院计算所、北京智源、巴塞罗那大学共同主办的 LargeFineFoodAI 技术研讨会于大会召开期间举行。会议核心聚焦计算机视觉技术在大规模细粒度食品分析领域的应用,届时将邀请到业内顶尖专家学者、被接收的 oral 论文作者及挑战赛优胜团队带来前沿理论和实践成果分享,相关论文提交及挑战赛任务通道现已正式开放。

ICCV 国际计算机视觉大会是计算机视觉方向的三大顶会之一,着眼于计算机视觉领域最新的发展水平和发展方向。大规模视觉分析与细粒度视觉分析正是当前备受行业关注的热门研究方向之一,相关论文及研究成果日益丰富,但以“LargeFineFoodAI”为研讨主题,聚焦大规模食品图像的细粒度识别与检索尚属首次。

与通用图像识别及检索相比,食品细粒度识别及检索技术难度更大。许多不同类型的食品外观看起来可能非常相近,而同一种类型的食品也可能由于做法不同看起来差异较大,此外光线、拍摄角度、不同的拍摄背景都可能对算法的精度产生影响,即便对于专业人员也较难快速准确的进行辨别。另一方面,相关技术具有广泛的应用场景和实际的应用价值,例如降低商家端食品图片的审核成本,提升 C 端食品图片和视频的分发效率等。美团作为国内领先的生活服务平台,准确把握住消费升级趋势给餐饮行业的经营、消费方式带来的革命性变化,率先提出借助计算机视觉算法对食品图像进行细粒度分析,来快速响应和满足商户和用户大量多样的在线食品图像审核、管理、浏览、评价等需求。

本次研讨会上,美团邀请了美国加州大学欧文分校 Ramesh Jain 教授等食品计算领域的专家作为特邀演讲者,共同探讨计算机视觉技术与食品科学、营养健康等领域的跨界融合;并开放提交通道,接收食品分析相关领域的论文,届时将同主会论文同时发表;此外,我们还将组织一场大规模食品图像细粒度识别和检索的竞赛,并为优胜团队提供总计 12,000 美元的资金奖励。美团希望能够借此次研讨交流活动,推动学术界和工业界对于大规模细粒度食品分析的研究,群策群力解决食品分析中的实际问题,加速实现“帮大家吃得更好,生活更好”的使命。

目前,研讨会论文招募通道已经开启,主题可涉及食品细粒度识别、检索、检测和分割,多标签食品属性(食材、风味、餐食类型)分析,跨模态食品图像菜谱检索与生成,多模态食品体量估计,卡路里预测,食品日志分析,烹饪动作识别与预测,新兴的食品视觉分析相关任务与应用等方向,被接收的 oral 论文作者将受邀参加 LargeFineFoodAI 研讨会分享。

此外,为了进一步推进食品视觉分析领域的研究与实践,吸引更多行业相关团队关注参与,美团发起了以 LargeFineFoodAI 为主题的挑战赛。该竞赛将分为两大赛道,其一是“大规模食品图像细粒度识别”,将采用 Food1K 数据集(包含 1500 种类别中的 1000 种食物类别),通过 Top-1 分类准确率进行算法评估;其二是“大规模食品图像细粒度检索”,将使用同赛道一的训练和验证集,使用剩余的 Food500 作为测试集,使用 MAP@100 进行算法评估。

值得一提的是,本次挑战赛所用数据集来自美团自建数据集"Food2K",该数据集每一张美食图片均由不同个人,采用不同设备,在不同环境场景下拍摄获取,是难得的可以公正评价算法鲁棒性和效果的图片数据,挑战也非常大。并且所有图像均由美团公司的食品专家进行评估,确保了数据的高质量。相比其他主流食品图像识别数据集,"Food2K"数据集完全人工标注,数据集噪声比例控制在 1% 以内;数据分布与真实场景相符,不平衡现象显著;而且类别粒度更细。以披萨为例,主流数据集(例如 Food-101)仅具有披萨类,而"Food2K"进一步将其划分为多种多样的披萨,如鲜虾披萨、榴莲披萨等。