技术实现硬件要求：
 

➢摄像头: 30- -130万 像素；

➢阵列麦克风(距离5米)
 

核心技术--多模态识别技术
 

手势识别、语音识别、人脸识别、手写识别、文字识别、 图像识别、动作识别等
 

系统架构图
 

技术优势

1、全球唯一专注于研发电视机人机交互技术的公司；

2、公司深入研究电视机交互所需的识别技术，联合多种类识别技术算法的专家团队，由相关行业技术专家开发了其识别技术算法，公司研发团队把这些识别软件有机结合起来，形成 “电视多模态识别系统”。

3、“多模态识别系统”---- 多种识别技术有机结合，成为一个系统，就像人一样具有多种识别能力，机器会更加智能！我们的多模态识别系统功能强大，处于行业领先地位。而其它公司只专注单一识别类技术，即使有开发多种识别技术的算法，也是侧重单个识别算法的识别准确率，朝深度发展。而我们公司是考虑多种识别技术怎样协同合作，形成一个高效准确的多维立体识别技术。如同美国的海陆空天立体作战系统，定位不同。

4、我们已有25个授权发明专利，全都应用于电视机人机交互，这些专利包含了智慧电视人机交互必不可少的核心技术！

竞争优势

这个领域因为涉及到多种识别技术，对识别技术不了解的人不会去想这个问题，做识别技术算法的人因为研究太深，没有去思考横向技术结合，更没有去结合现实需求来思考。

目前，在电视的人机交互领域，国内外都还停留在对单一的识别技术准确度的提高，还没有出现第二家公司像我们一样专注“多模态识别系统”，特别是在电视领域的“多模态识别系统”，我们已经拿到17个发明专利授权，我们开创了一个全新的领域---“多模态识别系统”。

我们公司创始人在2007年开始推广语音识别，2010年成立公司开发手势识别技术。基于互联网高速技术、硬件性能、人工智能与各种识别技术快速发展，而电视机的开发应用却停滞不前，2012年开始提出应用于电视机行业的“多模态识别系统”，并首次提交了相关发明专利--手势识别启动语音识别。经历不断的深入研究和开发，在这个领域提交了25个发明专利。现在已经在国内拿到发明专利授权17个，在美国、日本、欧盟拿到发明专利授权8件。

由于我们公司具有自主知识产权，也在不断研发完善中，解决了客户知识产权顾虑和后续服务的担忧，在这个领域我们已经走在世界前列。

从技术分析竞争：

我司“电视多模态识别系统”具有明显优势，因为采用多模态识别技术，使电视机的操作与人机互动就像人与人交流一样简单方便和自然，也极大地拓展了电视机的应用功能与场景，电视机大屏优势结合多模态识别技术，让电视机在智慧家居中成为不可或缺的存在。

从专利分析竞争：

人与机器说话，唤醒机器是入口。我们守住了这个入口。

一个人要跟另一个人说话的5种场景： 人机交互对应： 相关发明专利：

1、你拍他肩膀，----- 按键，启动语音识别； ---- 专利过期；

2、你喊他名字，---- 语音词唤醒； ---- 台湾专利；

3、学生上课举手发言； ---- 手势 唤醒； ---- 我司专利；2012103748091

4、走过去正脸望着他； ---- 正视唤醒； ----我司专利；2017103540645

5、对方不说话时再说话；----音量大小开关语音识别；----我司专利；2018101081220

在电视场景，因为电视有背景音存在，距离远，语音词唤醒的方式体验效果不佳，手势唤醒（举手发言）解决了上述痛点是最佳选择，加上第四和第五更加完美。由此可见，我们掌控了电视人机交互的重要入口方式。

技术部分应用场景

我公司的“多模态识别技术”和专利带来以下变革：

1、电视不需要关机，自动黑屏省电

采用人脸检测，无人观看时，电视机自动黑屏省电。电视机检测到无人观看时自动黑屏。电视机黑屏时功耗跟机顶盒差不多，这样不需要手动关电视。

2、采用人脸检测、手势识别，打开电视机。

用户坐到电视机前，再次检测到人脸出现时，用户只要举手即可唤醒电视开机；也可以正面望着电视机来唤醒电视开机。

3、采用人脸检测和人脸识别、手势识别，打开他喜欢的节目。

用户手势操作的时候，启动人脸识别，识别到举手的人是谁，可以打开这个用户喜欢的节目，挥手或语音即可进行频道或应用切换。

4、根据人脸距离和年龄识别（人脸检测结果），可以提示和 限制儿童近距离看电视。

5、刷脸播放信息。（播放列表）

根据人脸识别，自动播放特定用户接收的信息（包括留信和备忘录）

A、在外地给老人发送信息,只要这位老人在电视机前出现，电视机识别 到这位老人，就会自动播放发给他的信息。----对老人非常重要！

B、可以设置备忘录，人脸识别到该用户时就播放提醒。比如，家里有老 人需要按时吃药，电视机可以及时提醒。

C、可以给孩子布置要看的学习内容，给老人预先选好节目，刷脸就播放。

6、电话功能，取代“小度在家”

用户在沙发上举手启动语音识别，呼叫联系人，直接拨打电话。

7、视频聚会功能

电视机屏幕大，多方视频各占几分之一屏幕，多个老人家坐在自己家电视前视频聊天非常方便实用！

8、老人看头像打电话

利用人脸检测、人脸识别、视线检测技术。 老人要打电话就走近电视机，（比如1.5--2米），正视电视机，电视机上就会出现老人儿女的头像。老人望向哪个头像3秒以上，就拨打这个孩子的电话。

9、关注独居老人

老人起床后第一次出现在电视机前，电视机第一次识别到老人，自动拍视频3-5秒，发送给特定人（例如：老人的儿女或社区居委会）。

10、穿衣镜

通过语音指令“打开镜子”，电视机就可以依次给用户拍左侧、后面、右侧的照片，用户可以看到穿衣服的效果，也可以扫码分享照片。

11、看照片

在电视机上看照片。说“看谁的照片”，就看谁的照片。可以自动播放，也可以手势选择。

12、拍照功能。

朋友来了，在客厅拍合影，可以对着电视机说“拍照”或采用手势触摸一个虚拟的拍照按键，即可进入拍照，生成二维码，然后扫码分享。

13、AR项目--虚拟与现实

在电视中能看到客厅场景，其中还可以装扮虚拟的装饰品如帽子，也可以出现虚拟的水果，还可以是出现虚拟的动物跟人互动等等。

上图蛋糕及桌面场景是虚拟的，可以吹蜡烛互动（火苗可以飘动），拍照及视频，虚拟场景还有音乐。

14、卡片识字项目。

小朋友将识字卡片举在胸前，距离电视4米，电视都可以识别文字，并播放解说视频。

15、购物 （虚拟试戴、试穿）

多模态识别交互技术、虚拟与现实技术、购物平台结合起来，就可以实现。

16、辅导学习功能

双屏互动--在电视机上写字作答。

加上语音识别，学生可以语音回答问题，还可以在电视机上书写作答。

加上人脸识别，电视机可以像老师一样主动跟学生交流。可以像“家庭老师”一样辅导孩子的学习。