[发明专利]基于图片的食物营养分析方法、装置及计算设备在审
申请号: | 201711464090.X | 申请日: | 2017-12-28 |
公开(公告)号: | CN108198188A | 公开(公告)日: | 2018-06-22 |
发明(设计)人: | 傅世连;董健;颜水成 | 申请(专利权)人: | 北京奇虎科技有限公司 |
主分类号: | G06T7/11 | 分类号: | G06T7/11;G06T7/62;G06T17/00;G06N3/08;G01N21/84 |
代理公司: | 北京市浩天知识产权代理事务所(普通合伙) 11276 | 代理人: | 宋菲;刘云贵 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 食材 语义分割 图片 分割结果 计算设备 食物营养 体积信息 预估 三维建模 图片输入 信息计算 分析 饮食 参考 | ||
1.一种基于图片的食物营养分析方法,包括:
获取至少一张食物图片;
将所述至少一张食物图片输入至经训练得到的语义分割模块中,得到每张食物图片的语义分割结果;所述语义分割结果包含食物图片中每种食材的分割结果;
根据至少一张食物图片的语义分割结果,进行三维建模处理,预估得到每种食材的体积信息;
根据每种食材的分割结果和体积信息,分析每种食材的营养成分和/或卡路里信息;
根据每种食材的营养成分和/或卡路里信息计算得到食物图片中食物的营养成分和/或卡路里信息。
2.根据权利要求1所述的方法,其中,所述根据每种食材的分割结果和体积信息,分析每种食材的营养成分和/或卡路里信息具体为:
根据每种食材的分割结果,查询食材营养成分库和/或卡路里映射表得到单位食材的营养成分和/或卡路里信息;
根据每种食材的体积信息,计算得到每种食材的营养成分和/或卡路里信息。
3.根据权利要求1或2所述的方法,其中,所述方法还包括:
获取所述食物图片的描述信息;
根据所述食物图片的描述信息,生成矫正因子;
根据所述矫正因子对计算得到的食物图片中食物的营养成分和/或卡路里信息进行矫正处理。
4.根据权利要求1-3中任一项所述的方法,其中,所述获取至少一张食物图片具体为:获取终端设备相册中的食物图片;
在所述根据每种食材的营养成分和/或卡路里信息计算得到食物图片中食物的营养成分和/或卡路里信息之后,所述方法还包括:
定期对终端设备相册中的食物图片中食物的营养成分和/或卡路里信息进行统计分析;
根据统计分析结果,向终端用户发出健康管理提示消息。
5.根据权利要求1-4中任一项所述的方法,其中,所述语义分割模块通过以下训练方法得到:
采集多张食物样本图片,对每张食物样本图片进行食材标注,得到食材分割标注结果;
将每张食物样本图片输入至神经网络中,得到神经网络输出的食物样本图片的分割结果;
利用神经网络输出的食物样本图片的分割结果与食材分割标注结果之间的损失,对神经网络进行训练,得到所述语义分割模块。
6.一种基于图片的食物营养分析装置,包括:
获取模块,适于获取至少一张食物图片;
分割模块,适于将所述至少一张食物图片输入至经训练得到的语义分割模块中,得到每张食物图片的语义分割结果;所述语义分割结果包含食物图片中每种食材的分割结果;
预估模块,适于根据至少一张食物图片的语义分割结果,进行三维建模处理,预估得到每种食材的体积信息;
分析模块,适于根据每种食材的分割结果和体积信息,分析每种食材的营养成分和/或卡路里信息;
计算模块,适于根据每种食材的营养成分和/或卡路里信息计算得到食物图片中食物的营养成分和/或卡路里信息。
7.根据权利要求6所述的装置,其中,所述分析模块进一步适于:
根据每种食材的分割结果,查询食材营养成分库和/或卡路里映射表得到单位食材的营养成分和/或卡路里信息;
根据每种食材的体积信息,计算得到每种食材的营养成分和/或卡路里信息。
8.根据权利要求6或7所述的装置,其中,所述装置还包括:矫正模块,适于:
获取所述食物图片的描述信息;
根据所述食物图片的描述信息,生成矫正因子;
根据所述矫正因子对计算得到的食物图片中食物的营养成分和/或卡路里信息进行矫正处理。
9.一种计算设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如权利要求1-5中任一项所述的基于图片的食物营养分析方法对应的操作。
10.一种计算机存储介质,所述存储介质中存储有至少一可执行指令,所述可执行指令使处理器执行如权利要求1-5中任一项所述的基于图片的食物营养分析方法对应的操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司,未经北京奇虎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711464090.X/1.html,转载请声明来源钻瓜专利网。