印度健康与健身初创公司 HealthifyMe 推出了一项基于 AI 的功能,可自动从图片中识别印度食物以记录卡路里摄入,帮助用户更高效地追踪饮食。
由于印度菜系种类繁多,通过图片追踪印度食物颇具挑战。此外,许多人使用一种名为“塔利”(Thaali)的盘子用餐,盘中盛放着不同份量的各种食物。模型必须能够识别所有这些食物及其份量大小。
HealthifyMe 的最新功能称为 Snap,允许用户拍摄餐食照片并尝试识别画面中的食物。或者,用户也可以授权应用访问其相册,应用会自动扫描其中的食物照片。用户可以稍后查看这些照片及其中包含的食物。这使用户可以先拍照,之后再处理卡路里记录。
在隐私方面,该公司表示,设备端的模型会检测食物照片,并将它们发送到服务器以进行特定菜肴的识别。该公司还提到,基于相册的模式效果更好,因为它有更多时间来识别食物,而优于仅拍摄餐食照片进行识别的方式。
如果模型检测到图片中包含多个物品,Snap 会要求你点击某个物品并将其添加到卡路里追踪中。用户将看到一个可调整的矩形框,用于聚焦不同的物品。
HealthifyMe 联合创始人兼首席执行官 Tushar Vashisht 告诉 TechCrunch,该公司近 11 年前作为一家食物追踪应用起步,而这仍然是其免费用户的主要使用场景。
“有时很难坚持进行食物追踪,因为你必须手动输入并记得记录食物。因此,我们希望通过 Snap 这样的功能来提高留存率和参与度。”他说。
Vashisht 表示,该初创公司多年来曾尝试实现基于图像的食物识别,但更好的生成式 AI 模型的可用性使得开发 Snap 变得更加容易。该公司称,该功能目前经过训练,可识别 15 万种印度食物。
HealthifyMe 声称,其在自动识别食物方面的准确率达到 60%-70%。即使模型未能正确识别食物,用户仍会收到关于该物品可能是什么的建议。公司有审核人员查看错误识别的情况并进行修正。此外,用户可以手动标记这些被错误识别的照片,以改进模型。Vashisht 表示,他有信心在下个月内,模型的准确率将超过 80%。
值得注意的是,HealthifyMe 并非唯一参与者,其他公司也在致力于基于 AI 的食物识别。三星的膳食规划平台 Samsung Food 计划明年推出此功能。前 Google Lens 工程师 Wade Norris 创办的初创公司 Snapcalorie 也在解决同一问题,并获得 Y Combinator、Index Ventures 和 Accel 的支持。
在接下来的几周里,HealthifyMe 旨在为用户提供更多的食物记录选项。随着 Snap 的推出,它允许用户将图片发送到 HealthifyMe WhatsApp 或在 X 上标记带有食物图片的内容。该公司正在开发语音输入功能,并改进其现有的 AI 驱动助手 Ria。
HealthifyMe 迄今为止已从 LeapFrog Ventures 和 Khosla Ventures 等投资者那里筹集了超过 1.3 亿美元的资金。其提供的基本付费计划每月起价为 4.80 美元(₹399),让用户可以使用 AI 驱动的健身和营养助手、膳食规划和健康食谱。该公司还提供专业付费计划,每月起价为 48 美元(₹4,000),功能包括基于 AI 的膳食规划器、营养和健身教练以及智能秤。
Pro 计划的更高级别拥有更多福利,例如多次医生咨询、代谢面板测试和连续血糖监测 (CGM) 设备。该公司表示,其订阅用户已超过 20 万,其中近 40% 的人购买了 Pro 计划。
2020 年,HealthifyMe 与印度食品配送服务 Swiggy 合作策划健康餐点和餐厅。该公司已经在与多家可以利用其技术的食品和杂货服务进行洽谈。

