HMI的交互方式和体现形式变化你喜欢吗
人机接口或人机界面（hmi）是系统和人之间进行交互和信息交换的媒介。传统的hmi主要借助rs232、rs422/rs485等串行通信接口，以及网口、usb等数据接口来实现设备的人机交互，而展现在我们面前的“触摸屏”、导航按钮等是hmi产品中非常重要的硬件部分，它替代了原有的鼠标和键盘的部分功能。
随着技术的不断演进，hmi的交互方式和体现形式都发生了很大的改变。现在的人机交互可能是有形的，也可能是无形的。比如，我们可以发出一个口头命令或者通过手势来控制智能手机，也可以用语音控制车辆的导航系统，选择我们要去的目的地。
有关hmi的三大猜想
无论是在功能上还是概念上，如今的hmi都发生了翻天覆地的变化。从技术和应用角度，我们认为hmi将在如下三个方面进一步影响未来的人机交互方式。
屏幕的变化
在消费电子中，曲面屏、折叠屏开始大量使用，传感器技术的进步带动屏下指纹的应用。在汽车中，hmi的体现形式主要是屏幕和显示器，乘客可以通过按下屏幕上的按钮来操作音频系统的输出，比如选择输入设备、收音机调台、浏览导航指令等。
未来，乘用车中的屏幕将被赋予更多功能，尺寸也会越来越大，一个完全可定制的全数字仪表盘显示屏将获得广泛应用。现在，特斯拉的15英寸纵向触摸屏已经将加热、通风和空调（hvac）控制等功能纳入其中，接下来应该还会赋予大屏更多的功能。
语音有望优先成为hmi的下一个发展目标
专家预测，到2022年，80%的车载hmi将集成语音控制功能，这还不包括智能手机中使用的语音识别系统。随着语音识别技术的进步，其应用也在不断扩展。现在，大多数hmi使用语音命令来控制音频系统和接听电话等。
未来，自然语言命令还将用来执行更加复杂的功能，从车辆的自适应巡航控制，到智能手机和可穿戴设备的非接触控制和操作。也可以说，将语音用户界面（vui）应用于电子设备中将成为人机交互发展的大趋势。现在，基于人工智能（ai）的语音智能助理基本解决了vui存在的“听不清楚”这一弊端，语音控制 + ai + 机器学习，三者相结合的语音用户界面，它们的应用前景，想想都会让人无比激动。
手势识别在非接触hmi中开始走红
与触摸屏相比，手势控制具有很多优点：例如，用户不必触摸设备就可以从远处发出命令。另外，手势控制还将hmi从二维用户界面扩展至三维空间。全球著名的车企宝马公司已将手势技术应用在部分车型中，乘客做出的手势动作被摄像头“看到”后即可执行车内的功能。当然，我们也可以把手势控制看作是语音控制的替代方案，尤其是在那些不适合大声讲话的公共区域。
vui：hmi的未来之星
新冠肺炎的爆发，为了避免因接触可能带来的病毒传播，在工作场所、零售店、医院等环境中，非接触hmi的需求量急剧上升。随着全球经济的重新开放，这一趋势有进一步加速的可能。为此，我们大胆预测，未来10年，非接触hmi尤其是vui的发展将驶入发展的快车道。该市场的发展也为半导体公司、oem/odm、近距离传感供应商和软件公司提供了商机。
在一众非接触hmi技术中，为什么vui这么被业界看好呢？其实，早在2014 年，微软首席执行官 satya nadella就曾预言：“人声就是新的接口”。根据普华永道（pwc）在2018年所作的一项消费者调查显示，90%的受访者熟悉语音助手，72%的受访者对这项技术有第一手使用经验。
vui之所以获得消费者的广泛认可，一方面它能解放我们的双手，提高通信的便利性；另一方面它有效增强了客户体验，毕竟我们说话的速度比打字快得多，通过对非接触控制系统的口头命令，人与机器的交流将变得更加自然和有效。随着语音识别技术的不断成熟，vui在未来几年内将惠及数十亿用户。专家预测，在未来5年内，几乎每个应用程序都将以某种方式集成vui技术。
ai使机器变得越来越智能化，因此，加入了ai和机器学习的vui将极大地改善语音接口的个性化体验。据研究公司tractica的预测，基于ai的语音智能助理在hmi中的作用越来越重要，到2025年，全球市场价值有望达到46亿美元。未来几年内，80%的车载hmi将集成语音识别系统，这还不包括谷歌语音（google voice）和苹果siri等智能手机助理应用。在汽车中，语音命令最常用于控制汽车中的媒体播放器，为导航系统设置目的地。随着机器学习算法的发展，adas的功能中也将引入vui。在智能手机中，高端机型几乎都拥有语音控制手机操作的功能。
在智能家居中，语音控制系统将家居自动化提升到了一个新的水平，像amazon echo、google nest和samsung smartthings这样的智能家居集线器允许用户使用简单的语音命令来管理连接的设备。与此同时，vui也在逐步渗透到我们的工作场所，并使之朝着数字化方向发展。gartner预测，到2023年25%的员工与应用程序的交互将通过语音进行。
深耕关键技术
总体来看，非接触hmi主要涉及9大关键技术，即：基于摄像头的手势识别及认证、手势超声或雷达、眼球跟踪、语音命令、基于手势和位置的光电二极管传感器、接近式触摸屏、运动传感器融合、短距无线电以及其他非接触技术。根据研究机构touch display research最新发布的《非接触hmi 2020》报告，目前，非接触hmi技术已经吸引了多达390余家公司的参与，他们重点深耕非接触传感器，以及软件和系统集成等领域，其中，提供语音命令和基于摄像头的手势识别的公司最多。
针对hmi应用，多家技术供应商都采取了积极的行动，比如，ti公司以营造一个完整的生态系统为主，其hmi产品组合包括广泛的i/o、图形处理、语音识别等，提供开发各种接口所需的几乎所有组件、软件和支持。ti的方案还实现了以太网供电，以进一步降低布线的复杂性，甚至支持无线连接。
例如，tidep-01013是具有毫米波传感器和sitara处理器的手势控制hmi参考设计；tidep0066语音识别参考设计则采用ti嵌入式语音识别 (tiesr) 库，突出了c5535和c5545 dsp器件的语音识别能力。
由于背景噪音的干扰，语音识别的效果通常不是那么完美。优质mems麦克风和先进的音频处理功能是促使语音控制设备真正适用于日常环境的关键因素。英飞凌的vui市场策略则是通过逐步建立起来的合作伙伴生态系统，向行业提供一系列创新的参考平台和即用型新一代vui解决方案。目前可用的解决方案主要来自于aaware、ceva、creoir、soundai、sugr和xmos等公司。2017年初，英飞凌与xmos共同提出的全新语音控制方案采用的是智能麦克风，它使语音助手能在其他噪音当中准确识别定位人声。其中，英飞凌的xensiv雷达和硅麦克风传感器组合能识别扬声器与麦克风的位置和距离，同时利用xmos的远场语音处理技术来捕捉语音。
合作伙伴 解决方案 应用示例
xmos amazon avs开发工具包vocalfusion 开发套件 智能电视、机顶盒、tv辅助设备
creoir amazon avs远场语音解决方案 工业控制等专业应用、车辆信息娱乐系统、楼宇自动化、高性能连接音频设备
aaware aev13mz开发平台 机器人、信息亭、智能音箱、家用集线器、汽车
andrea electrnics 测向和跟踪模块 会议设备、智能手机和笔记本电脑
ceva whispro & clearvox参考设计 智能音箱、支持语音的物联网、智能电视、机顶盒和ott、耳机
云知声 机顶盒和ott、耳机智能语音交互解决方案 智能家居
蜂鸟vui解决方案
图3：英飞凌联合合作伙伴推出是部分vui参考设计（图源：根据英飞凌网站信息整理）
结语
时间回到20世纪50年代初，语音识别技术初现萌芽，只是彼时的系统只能理解数字。到了2017年，这项技术已经取得长足的进步，几乎达到可以精确地理解人类语言的水平，因此奠定了vui商用的基础。
人机交互是实现自动化和智能化的前提。经过几十年的发展，按钮/按键这种hmi方式正在从我们的生活中退出，取而代之的触摸屏在很多应用场合也会逐渐被全新一代的vui替代。技术和创新永无止境，虽然今天的vui尚不完美，但它的优点已被消费者广泛认可。毕竟，人类最有效的沟通方法就是语言，未来的机器应该也不会例外。
嵌入式软件开发和软件开发的区别
Unix和Linux的差异
戴姆勒拟研发双极电池 SKI拟61.5亿在美新建电池工厂
TE Connectivity获颁“最有影响力物联网传感企业奖”
卧龙电驱将为德国纬湃科技提供新能源汽车电机
HMI的交互方式和体现形式变化你喜欢吗
IGBT主要有三个发展方向
压敏电阻有哪些原理？
对于cob封装的显示屏，它的型号都有哪些
小米智能音箱新专利 采用圆柱形设计
压制干扰的原理是什么？怎样去实现它？
莱迪思发运MachXO可编程逻辑器件达7千5百万片
彩电市场线上零售规模上涨,彩电市场尺寸结构加速大屏化
汽车行业芯片紧缺 4家工厂的生产计划开始调整或关闭工厂
生成式AI正在偷走你的数据？
Marvell发布全方位云计算服务解决方案
英伟达市值超过1.7万亿美元
苹果在中国市场遭受国产手机品牌围攻
华为和高通5G到底有什么区别详细对比
不溶性微粒检查仪测定原理及检测局限分析
随着技术的不断演进，hmi的交互方式和体现形式都发生了很大的改变。现在的人机交互可能是有形的，也可能是无形的。比如，我们可以发出一个口头命令或者通过手势来控制智能手机，也可以用语音控制车辆的导航系统，选择我们要去的目的地。
有关hmi的三大猜想
无论是在功能上还是概念上，如今的hmi都发生了翻天覆地的变化。从技术和应用角度，我们认为hmi将在如下三个方面进一步影响未来的人机交互方式。
屏幕的变化
在消费电子中，曲面屏、折叠屏开始大量使用，传感器技术的进步带动屏下指纹的应用。在汽车中，hmi的体现形式主要是屏幕和显示器，乘客可以通过按下屏幕上的按钮来操作音频系统的输出，比如选择输入设备、收音机调台、浏览导航指令等。
未来，乘用车中的屏幕将被赋予更多功能，尺寸也会越来越大，一个完全可定制的全数字仪表盘显示屏将获得广泛应用。现在，特斯拉的15英寸纵向触摸屏已经将加热、通风和空调（hvac）控制等功能纳入其中，接下来应该还会赋予大屏更多的功能。
语音有望优先成为hmi的下一个发展目标
专家预测，到2022年，80%的车载hmi将集成语音控制功能，这还不包括智能手机中使用的语音识别系统。随着语音识别技术的进步，其应用也在不断扩展。现在，大多数hmi使用语音命令来控制音频系统和接听电话等。
未来，自然语言命令还将用来执行更加复杂的功能，从车辆的自适应巡航控制，到智能手机和可穿戴设备的非接触控制和操作。也可以说，将语音用户界面（vui）应用于电子设备中将成为人机交互发展的大趋势。现在，基于人工智能（ai）的语音智能助理基本解决了vui存在的“听不清楚”这一弊端，语音控制 + ai + 机器学习，三者相结合的语音用户界面，它们的应用前景，想想都会让人无比激动。
手势识别在非接触hmi中开始走红
与触摸屏相比，手势控制具有很多优点：例如，用户不必触摸设备就可以从远处发出命令。另外，手势控制还将hmi从二维用户界面扩展至三维空间。全球著名的车企宝马公司已将手势技术应用在部分车型中，乘客做出的手势动作被摄像头“看到”后即可执行车内的功能。当然，我们也可以把手势控制看作是语音控制的替代方案，尤其是在那些不适合大声讲话的公共区域。
vui：hmi的未来之星
新冠肺炎的爆发，为了避免因接触可能带来的病毒传播，在工作场所、零售店、医院等环境中，非接触hmi的需求量急剧上升。随着全球经济的重新开放，这一趋势有进一步加速的可能。为此，我们大胆预测，未来10年，非接触hmi尤其是vui的发展将驶入发展的快车道。该市场的发展也为半导体公司、oem/odm、近距离传感供应商和软件公司提供了商机。
在一众非接触hmi技术中，为什么vui这么被业界看好呢？其实，早在2014 年，微软首席执行官 satya nadella就曾预言：“人声就是新的接口”。根据普华永道（pwc）在2018年所作的一项消费者调查显示，90%的受访者熟悉语音助手，72%的受访者对这项技术有第一手使用经验。
vui之所以获得消费者的广泛认可，一方面它能解放我们的双手，提高通信的便利性；另一方面它有效增强了客户体验，毕竟我们说话的速度比打字快得多，通过对非接触控制系统的口头命令，人与机器的交流将变得更加自然和有效。随着语音识别技术的不断成熟，vui在未来几年内将惠及数十亿用户。专家预测，在未来5年内，几乎每个应用程序都将以某种方式集成vui技术。
ai使机器变得越来越智能化，因此，加入了ai和机器学习的vui将极大地改善语音接口的个性化体验。据研究公司tractica的预测，基于ai的语音智能助理在hmi中的作用越来越重要，到2025年，全球市场价值有望达到46亿美元。未来几年内，80%的车载hmi将集成语音识别系统，这还不包括谷歌语音（google voice）和苹果siri等智能手机助理应用。在汽车中，语音命令最常用于控制汽车中的媒体播放器，为导航系统设置目的地。随着机器学习算法的发展，adas的功能中也将引入vui。在智能手机中，高端机型几乎都拥有语音控制手机操作的功能。
在智能家居中，语音控制系统将家居自动化提升到了一个新的水平，像amazon echo、google nest和samsung smartthings这样的智能家居集线器允许用户使用简单的语音命令来管理连接的设备。与此同时，vui也在逐步渗透到我们的工作场所，并使之朝着数字化方向发展。gartner预测，到2023年25%的员工与应用程序的交互将通过语音进行。
深耕关键技术
总体来看，非接触hmi主要涉及9大关键技术，即：基于摄像头的手势识别及认证、手势超声或雷达、眼球跟踪、语音命令、基于手势和位置的光电二极管传感器、接近式触摸屏、运动传感器融合、短距无线电以及其他非接触技术。根据研究机构touch display research最新发布的《非接触hmi 2020》报告，目前，非接触hmi技术已经吸引了多达390余家公司的参与，他们重点深耕非接触传感器，以及软件和系统集成等领域，其中，提供语音命令和基于摄像头的手势识别的公司最多。
针对hmi应用，多家技术供应商都采取了积极的行动，比如，ti公司以营造一个完整的生态系统为主，其hmi产品组合包括广泛的i/o、图形处理、语音识别等，提供开发各种接口所需的几乎所有组件、软件和支持。ti的方案还实现了以太网供电，以进一步降低布线的复杂性，甚至支持无线连接。
例如，tidep-01013是具有毫米波传感器和sitara处理器的手势控制hmi参考设计；tidep0066语音识别参考设计则采用ti嵌入式语音识别 (tiesr) 库，突出了c5535和c5545 dsp器件的语音识别能力。
由于背景噪音的干扰，语音识别的效果通常不是那么完美。优质mems麦克风和先进的音频处理功能是促使语音控制设备真正适用于日常环境的关键因素。英飞凌的vui市场策略则是通过逐步建立起来的合作伙伴生态系统，向行业提供一系列创新的参考平台和即用型新一代vui解决方案。目前可用的解决方案主要来自于aaware、ceva、creoir、soundai、sugr和xmos等公司。2017年初，英飞凌与xmos共同提出的全新语音控制方案采用的是智能麦克风，它使语音助手能在其他噪音当中准确识别定位人声。其中，英飞凌的xensiv雷达和硅麦克风传感器组合能识别扬声器与麦克风的位置和距离，同时利用xmos的远场语音处理技术来捕捉语音。
合作伙伴 解决方案 应用示例
xmos amazon avs开发工具包vocalfusion 开发套件 智能电视、机顶盒、tv辅助设备
creoir amazon avs远场语音解决方案 工业控制等专业应用、车辆信息娱乐系统、楼宇自动化、高性能连接音频设备
aaware aev13mz开发平台 机器人、信息亭、智能音箱、家用集线器、汽车
andrea electrnics 测向和跟踪模块 会议设备、智能手机和笔记本电脑
ceva whispro & clearvox参考设计 智能音箱、支持语音的物联网、智能电视、机顶盒和ott、耳机
云知声 机顶盒和ott、耳机智能语音交互解决方案 智能家居
蜂鸟vui解决方案
图3：英飞凌联合合作伙伴推出是部分vui参考设计（图源：根据英飞凌网站信息整理）
结语
时间回到20世纪50年代初，语音识别技术初现萌芽，只是彼时的系统只能理解数字。到了2017年，这项技术已经取得长足的进步，几乎达到可以精确地理解人类语言的水平，因此奠定了vui商用的基础。
人机交互是实现自动化和智能化的前提。经过几十年的发展，按钮/按键这种hmi方式正在从我们的生活中退出，取而代之的触摸屏在很多应用场合也会逐渐被全新一代的vui替代。技术和创新永无止境，虽然今天的vui尚不完美，但它的优点已被消费者广泛认可。毕竟，人类最有效的沟通方法就是语言，未来的机器应该也不会例外。
嵌入式软件开发和软件开发的区别
Unix和Linux的差异
戴姆勒拟研发双极电池 SKI拟61.5亿在美新建电池工厂
TE Connectivity获颁“最有影响力物联网传感企业奖”
卧龙电驱将为德国纬湃科技提供新能源汽车电机
HMI的交互方式和体现形式变化你喜欢吗
IGBT主要有三个发展方向
压敏电阻有哪些原理？
对于cob封装的显示屏，它的型号都有哪些
小米智能音箱新专利 采用圆柱形设计
压制干扰的原理是什么？怎样去实现它？
莱迪思发运MachXO可编程逻辑器件达7千5百万片
彩电市场线上零售规模上涨,彩电市场尺寸结构加速大屏化
汽车行业芯片紧缺 4家工厂的生产计划开始调整或关闭工厂
生成式AI正在偷走你的数据？
Marvell发布全方位云计算服务解决方案
英伟达市值超过1.7万亿美元
苹果在中国市场遭受国产手机品牌围攻
华为和高通5G到底有什么区别详细对比
不溶性微粒检查仪测定原理及检测局限分析