一种菜品形状识别装置及其语音播放组件

技术领域

本发明涉及菜品识别技术领域，尤其涉及一种菜品识别装置及其语音播放组件。

背景技术

在日常生活中，人们基本都离不开衣食住行，而食在衣食住行中又占有一定的重要地位。饮食在我们的生活中无处不在，现在人们大多数在吃饭的时候不再只是单纯为了温饱而去点餐，对菜品文化及营养搭配的了解需求也越来越高，越来越多的人在上餐时都要求报菜名，想要了解菜品相关的信息，对菜品进行更好的掌握以供选择；

现有技术中，在餐厅大多采用人工报菜名的方式，该方式不仅费时费力，而且对上菜员的记忆要求较高，在报菜名时会出现不及时、不准时以及不报的情况，也有可能会出现报错的情况，顾客无法对菜品进行了解，因此，提出的一种菜品识别装置及其语音播放组件。

发明内容

本发明的目的是为了解决现有技术中，在餐厅大多采用人工报菜名的方式，该方式不仅费时费力，而且对上菜员的记忆要求较高，在报菜名时会出现不及时、不准时以及不报的情况，也有可能会出现报错的情况，顾客无法对菜品进行了解，的问题，而提出的一种菜品识别装置及其语音播放组件。

为了实现上述目的，本发明采用了如下技术方案：

一种菜品形状识别装置，包括菜品识别装置，所述菜品识别装置外部固定连接有连接块，所述连接块外部固定连接有coms摄像头，所述连接块外部固定连接有语音播放组件，所述菜品识别装置内部包括数据系统、图像系统、中央处理系统和数据传输模块；

所述图像系统与coms摄像头之间通信连接，所述图像系统对coms摄像头拍摄出的图像进行采集，并对采集到的图像进行处理与识别；

所述数据系统和图像系统均与所述中央处理系统之间通信连接，所述中央处理系统对接收到的数据与信息进行深度学习，从而建立出“全局菜品识别模型”与“子菜品识别模型”，通过“全局菜品识别模型”对放上的菜品进行图像识别，通过图像与数据对比得出菜品的相关信息，所述语音播放组件内部还包含有语音播放模块。

其中，语音播放模块存放在语音播放组件中，压力传感器与coms摄像头之间存在数据传输。

上述技术方案进一步包括：

所述数据传输模块的内部包括异常数据处理单元和接口自选择单元，所述菜品识别装置内部包含压力传感器，所述压力传感器将信号传输到coms摄像头触发对菜品的图像捕捉，所述coms摄像头获得的图像数据通过异常数据处理单元对非菜品数据进行处理，同时coms摄像头中拍摄的图像通过接口自选择单元选择接口并传输到图像系统中。

所述coms摄像头捕获的数据传输到数据系统，所述数据系统内部包括菜品形状数据、菜品文化背景数据和菜品营养搭配数据，所述菜品形状数据对从coms摄像头捕获的数据进行对比分类，所述菜品文化背景数据和菜品营养搭配数据为菜品的基本信息，提前存储在数据系统中。

所述图像系统内部包括图像采集模块、图像处理模块和菜品识别模块，所述图像采集模块存储coms摄像头捕获的图像数据并将其传输到图像处理模块。

所述图像处理模块对菜品数据进行处理后传输到菜品识别模块，所述菜品识别模块对处理好的菜品图像进行分析，并将获得的数据与菜品形状数据进行对比。

所述深度学习模块将识别模型训练好获得完善的菜品识别模块，所述菜品识别模块在对菜品进行识别完成后从数据系统提取菜品文化背景数据和菜品营养搭配数据，将其传输到语音播放模块。

其中，菜品文化背景数据和菜品营养搭配数据根据餐馆的不同需要更新数据并提前存入。

一种菜品形状识别装置语音播放组件，包括以下：

所述语音播放模块内部包括数据匹配单元和语音播放单元，所述数据匹配单元将获得的菜品信息与菜品相匹配，匹配后将提取的数据传输到语音播放单元对菜品信息进行播放。

相比现有技术，本发明的有益效果为：

1、本发明中，使用时，将菜品放在菜品识别装置上，识别装置感受到压力，压力传感器将信号传递给coms摄像头触发拍摄，捕获到菜品的相关数据图像，图像信息传递到图像系统，进行一系列的操作，在操作的过程中如果发现所传输的图像数据并非菜品数据，属于异常数据，此时将中断菜品识别模块对其进行识别，防止误触，造成系统错误而播放错误语音，当接受正确信息时，菜品识别模块对菜品进行识别，完成识别后，从数据系统中获取相关信息，以供后续对其进行信息的播放，不再需要人工进行记忆相关信息。

2、本发明中，使用时，在对菜品进行识别后，获得对应菜品的相关信息，包括菜品文化背景数据和菜品营养搭配数据，获得这些数据后菜品识别模块将数据通过数据系统传输到中央处理系统，将获得的数据与菜品名称相匹配，匹配完成后将需要播放的内容数据传输到语音播放单元进行播放，在菜品放到菜品识别装置上后，完成识别后对其信息包括菜品文化背景和菜品营养搭配进行播放，使就餐者对菜品有了进一步的了解，同时采用了深度学习模块对其功能与数据进行训练与测试，其全局模型可适用不同形状的同种菜品，识别更加精准，不同的餐厅均可使用。

附图说明

图1为本发明提出的一种菜品识别装置及其语音播放组件的整体结构示意图；

图2为本发明提出的一种菜品识别装置及其语音播放组件的系统框图；

图3为本发明数据传输模块的系统框图；

图4为本发明语音播放模块的系统框图；

图5为本发明深度学习的流程框图；

图6为本发明使用的流程框图。

图中：1、菜品识别装置；2、连接块；3、coms摄像头；4、语音播放组件；5、数据系统；6、图像系统；7、中央处理系统；8、数据传输模块；9、菜品形状数据；10、菜品文化背景数据；11、菜品营养搭配数据；12、图像采集模块；13、图像处理模块；14、菜品识别模块；15、深度学习模块；16、语音播放模块；17、压力传感器；18、异常数据处理单元；19、接口自选择单元；20、数据匹配单元；21、语音播放单元。

具体实施方式

下文结合附图和具体实施例对本发明的技术方案做进一步说明。

实施例一

如图1-6所示，一种菜品形状识别装置，包括菜品识别装置，菜品识别装置外部固定连接有连接块，连接块外部固定连接有coms摄像头，连接块外部固定连接有语音播放组件，菜品识别装置内部包括数据系统、图像系统、中央处理系统和数据传输模块；

图像系统与coms摄像头之间通信连接，图像系统对coms摄像头拍摄出的图像进行采集，并对采集到的图像进行处理与识别；

数据系统和图像系统均与中央处理系统之间通信连接，中央处理系统对接收到的数据与信息进行深度学习，从而建立出“全局菜品识别模型”与“子菜品识别模型”，通过“全局菜品识别模型”对放上的菜品进行图像识别，通过图像与数据对比得出菜品的相关信息，语音播放组件内部还包含有语音播放模块；

数据传输模块的内部包括异常数据处理单元和接口自选择单元，菜品识别装置内部包含压力传感器，压力传感器将信号传输到coms摄像头触发对菜品的图像捕捉，coms摄像头获得的图像数据通过异常数据处理单元对非菜品数据进行处理，同时coms摄像头中拍摄的图像通过接口自选择单元选择接口并传输到图像系统中；

coms摄像头捕获的数据传输到数据系统，数据系统内部包括菜品形状数据、菜品文化背景数据和菜品营养搭配数据，菜品形状数据对从coms摄像头捕获的数据进行对比分类，菜品文化背景数据和菜品营养搭配数据为菜品的基本信息，提前存储在数据系统中；

图像系统内部包括图像采集模块、图像处理模块和菜品识别模块，图像采集模块存储coms摄像头捕获的图像数据并将其传输到图像处理模块。

本发明提出的一种菜品识别装置工作原理是，菜品识别装置1被安装在餐桌上，当菜品被端上来的时候，上菜员将菜品放在菜品识别装置1上，菜品识别装置1外部固定连接有连接块2，连接块2外部固定连接有coms摄像头3，coms摄像头3可以捕获菜品图像信息，菜品识别装置1内部包括数据系统5、图像系统6、中央处理系统7,和数据传输模块8，当菜品被放在菜品识别装置1上时，菜品对菜品识别装置由于重力作用产生压力，压力传递到压力传感器17，压力传感器17受到压力作用将信号传递到coms摄像头3，触发coms摄像头3进行拍摄，在数据传输的过程中需要经过数据传输模块8，其内部包括异常数据处理单元18和接口自选择单元19，当收到异常数据例如非菜品触发coms摄像头3拍摄，获得的数据无法进行匹配和进入下一模块，将进入异常数据处理模块18，对信号进行中断，重新返回未触发状态，数据通过不同类型在接口自选择单元8进行分类，到达不同的模块，该过程涉及到图像系统6，图像系统6内部包括图像采集模块12、图像处理模块13和菜品识别模块14，图像采集模块12将coms摄像头3拍摄到的菜品图片数据进行采集保存，因拍摄到的图片信息可能存在一定的误差，图像采集模块12将数据传输到图像处理模块13中，对其进行细节处理，为下一步进行菜品识别提供帮助，图像处理模块13将处理好的图像数据传输到菜品识别模块14，菜品识别模块14通过将传输过来的数据与数据系统5内部包括的菜品形状数据9进行对比分析，每个菜品形状数据9对应相应的菜品名称，对比匹配成功后将获得数据系统的对应菜品名称的菜品文化背景数据10和菜品营养搭配数据11，完成对菜品的识别。

实施例二

如图1-6所示，图像处理模块对菜品数据进行处理后传输到菜品识别模块，菜品识别模块对处理好的菜品图像进行分析，并将获得的数据与菜品形状数据进行对比；

深度学习模块将识别模型训练好获得完善的菜品识别模块，菜品识别模块在对菜品进行识别完成后从数据系统提取菜品文化背景数据和菜品营养搭配数据，将其传输到语音播放模块；

语音播放模块内部包括数据匹配单元和语音播放单元，数据匹配单元将获得的菜品信息与菜品相匹配，匹配后将提取的数据传输到语音播放单元对菜品信息进行播放。

本发明提出的一种菜品识别装置语音播放组件工作原理是，当菜品进过菜品识别模块14对菜品识别完成后，获得对应菜品的相关信息，包括菜品文化背景数据10和菜品营养搭配数据11，获得这些数据后菜品识别模块14将数据通过数据系统5传输到中央处理系统7，中央处理系统7内部包括有语音播放模块16，语音播放模块16内部包括数据匹配单元20和语音播放单元21，数据传输到语音播放模块16，首先通过数据匹配单元20，将获得的数据与菜品名称相匹配，匹配完成后将需要播放的内容数据传输到语音播放单元21进行播放，在菜品放到菜品识别装置1上后，完成识别后对其信息包括菜品文化背景和菜品营养搭配进行播放，使就餐者对菜品有了进一步的了解。

实施例三

如图1-6所示，菜品识别模块需要在中央处理系统进行模型训练，中央处理系统内部包括深度学习模块。

本发明提出的一种菜品识别装置及其语音播放组件工作原理是，菜品识别模块14和语音播放模块16在进行实际精确识别和播放之前需要进行训练和测试，为了适应各个餐厅，每个餐厅都有可能有名称相同的菜品，但做出来的形状却不尽相同，因此需要多组数据进行训练和测试，将需要训练的数据与模块在中央处理系统7中的深度学习模块15进行测试和训练，每家餐厅作为参与方在本地进行训练将菜品形状数据9、菜品文化背景数据10和菜品营养搭配数据11进行本地训练，训练好的数据再传输到相应的菜品识别模块14和语音播放模块16，在本地训练得到菜品识别子模型，多个子模型又会生成全局模型，在不断的数据聚合和模型更新中进行优化，各参与方之间进行数据交换，使得全局模型对菜品识别更加精准，可适用于不同餐厅，最终使识别效果和语音播放达到及时高效的目的。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。