MWC Shanghai展会的ST展位上可以看到TWS耳机相关的传感器产品及功能展示,ST今年在主推骨传导降噪和空间音频特性。我们和意法半导体MEMS部门市场经理刘轶谈了谈TWS耳机可能的未来。

TWS耳机作为前两年就兴起的热点,一直是消费电子市场的香饽饽。即便近一年以来的消费电子市场并不理想,今年MWC Shanghai展会上的TWS耳机相关展示热度依然不减,而且绝大部分咨询机构都预测了2023年TWS耳机出货量的相对回升。

ST(意法半导体)在去年的Capital Markets Day 2022上,就MEMS传感器与制动器业务方向,将TWS、AR/VR/MR、健康数据感知定为“新兴应用(emerging applications)”,视作“高增长领域”,在未来数年内都还将有相当大的增长潜力。

我们也在MWC Shanghai展会的ST展位看到了TWS耳机相关的传感器产品及功能展示,和意法半导体MEMS部门市场经理刘轶谈了谈TWS耳机可能的未来。刘轶说:“消费者对产品的功能特性一直是有追求的,不会满足于当下。这就需要我们和TWS耳机厂商一起开发,达成更多的特性、给客户提供更好的体验。”

 

骨传导降噪和空间音频

ST在展会上展示了一款配备LSM6DSV16BX传感器的TWS耳机demo。LSM6DSV16BX是一个IMU六轴传感器,配合音频加速计构成的高度集成方案。

这颗传感器是ST前几个月发布的,当时EE Times也报道过这颗芯片以小尺寸应用于耳机设备能够极大程度地节省设计空间,以及借助IMU传感器来追踪头部动作,辅以音频加速计通过骨传导来检测声音等。

刘轶给我们展示的demo主要是两个方向。其一就是骨传导通话降噪:比如用这款TWS耳机打电话,在嘈杂环境下,ST的这颗传感器记录通话人的骨骼振动信息,结合麦克风收集声音,“再借助算法,分辨哪些是噪音、哪些是人说话的声音,对噪音进行反向消除”,“提取出纯净的人声”,“对方会感觉我在很安静的环境下说话——非常适合商务人士或经常移动办公的人”。

这里的“骨传导”,并不是指那种借助骨传导发声的耳机;而是借助骨骼振动传导数据,针对说话人一方的背景噪音做消除的技术。展位现场,刘轶演示用这款耳机和我们进行通话:刘轶作为发起通话的一方,其手机一旁就在播放较大声的音乐;就我们受话方这一侧,是完全听不到对方的背景音乐的。

相较于直接用手机听筒与麦克风来拨打电话,从受话方的角度来看,背景噪音的差别还是相当大的——还需要考虑到我们是在嘈杂的展会现场接打电话。

其二是空间音频:这项特性在TWS竞品上已经有了对应的实现。ST的方案是借助于传感器追踪头部动作,基于头部的移动、转动、抬起可对音频声场做调整,耳机中听到的声音来源根据头部朝向做实时调整,而不是总在一个固定的位置上;好比听音乐时,某个乐器的发声位置,会根据头部朝向做对应调整,也就提供了更沉浸式的临场感。

“空间音频需要六轴传感器来支持。不仅是国内的头部厂商,也有不少二三线厂商都在开发这样的功能。”刘轶说,“因为这项功能对用户体验有非常大的提升。消费者也愿意为这样的音频体验多花一点钱。对于ST来说,我们能够提供传感器产品来支持这样的功能。”在刘轶看来,空间音频未来会越来越普及,不止于当前某一两家头部厂商和高端产品。

“像3D空间音频这样的特性,也给XR应用做了探索性的启发。我相信越来越多的AR/VR厂商会去做空间音频,来达到极致影音效果。”“我们会配合客户、下游厂商,包括第三方算法供应商,进行通力合作,做好空间音频的产品。”

“而作为传感器供应商,ST也有一些sensor fusion的功能。” 刘轶表示,“我们提供一些库,和相关的软件算法专家来支持客户”,“降低了开发难度,节省开发资源。开发者可以把更多的精力放到UI端,发挥他们的优势和特色。”

 

TWS耳机的未来需求

刘轶将LSM6DSV16BX的优势概括为“低功耗、超高稳定性/精准性、高集成度”。

高集成度还是很好理解。从ST的官网资料可知,LSM6DSV16BX是SiP封装的IMU,其中包含一个3轴数字加速度计和一个3轴数字陀螺仪——针对运动追踪在3个通道上处理加速度和角速度数据,以及振动检测——也就能支持前文提到的骨传导,另外配合Qvar电荷变化检测感知。

“LSM6DSV16BX在紧凑型封装中集成了UI传感器(用于实现如单击、双击操作,入耳检测等)、音频加速度计(实现本例中的骨传导音频降噪),以及Qvar传感器。”刘轶介绍说这款产品的高集成度就体现在“将原本需要3-4个sensor的方案集成到一颗芯片上”。

与此同时,这颗传感器也具备数据处理能力,包括FSM(有限状态机)、SFLP(sensor fusion low power)、ASC(adaptive self-configuration)和MLC(机器学习内核)。拿其中的MLC,即AI特性来说,“具体到我们的产品上,它会记录用户的使用习惯。比如空间音频,记录用户的各种转头、抬头、移动的习惯,采集数据做数据分析,训练模型;我们向开发者提供这样的AI框架。”在开发者工具上,“包括AI机器学习、有限状态机,我们也向开发者提供示例。”

这些实际上也部分体验了“低功耗”特点。除了更高的集成度本身能带来更低的功耗,“之前需要3-4颗芯片解决的问题,现在1颗芯片就能解决”;另外“传统的sensor,实时判断、处理需要MCU基于算法来进行,功耗就会更高。如果这些功能在sensor内部完成,直接输出数据给MCU。由于sensor的功耗在μA级别,而MCU至少需要在mA级别。”刘轶谈到,“额外提一句,ST在数字产品方面也有很多的know-how,也能体现低功耗的优势。”“我们也提供一些开发算法、工具,减少MCU运行的时间和功耗。”

“从系统的角度,提高集成度的同时,优化了功耗;另外也降低了整机的成本,毕竟这么多特性集成到了一颗硬件上。”而“高精准度”的部分,“我们也在做持续的优化,实现参数的再优化;随着技术的迭代,来提升产品精度。”

除了这几大优势项之外,“我们一直在开发新功能,比如骨传导通话降噪——这也是ST首创的”;“另外不光是传统耳机上的sensor,我们现在也在尝试一些运动记录的功能,包括运动状态识别、计步;同时也在开发对应的算法,丰富产品线,给客户带来价值”,“戴上耳机就能做运动计步”。刘轶表示在TWS耳机中引入运动健康相关特性的开发已经在进行中。

“消费者对产品的功能特性一直是有所追求的,不会满足于当下。这就需要我们和TWS耳机厂商一起开发,达成更多的特性功能、给客户提供更好的体验。”“今年我们开发的产品,我觉得就给市场提供了新的选择:做到高集成度、简易的开发体验、提供包括空间音频、骨传导降噪在内的特性,未来还会有运动健康的特性在耳机里实现。”

在我们问到有关TWS耳机这些年的进化,以及未来会向哪个方向发展时,刘轶总结说是特性的增加和体验的持续加强;从传感器的角度来看,“就我们的产品来看,是高度集成化、高精准度、更低的功耗”,“除了传统功能,现在还在做更好的人机交互、动作识别,未来还会开发新的功能。”

和意法半导体MEMS部门市场经理 刘轶

ST的这颗IMU六轴传感器当前主要应用于高端品质的TWS耳机产品。刘轶也说,基于ST这类传感器的市场定位,即便当前消费电子市场整体并不理想, “搭载IMU传感器的产品相比前两年仍然有增长”,而且“大家对新技术的需求在提升”,“从这个角度来看,这也促使我们作为方案商、芯片商能够更好地开发有价值的产品,提供给客户,促进市场健康发展”,“这个市场对我们来说还是有很多的机会”。

责编:Illumi
阅读全文,请先
您可能感兴趣
大家都关心制造,但在未来短时期之内,我们很难在既有赛道下将工艺突破到7纳米以下。解决方案在哪?就是在特殊工艺和封装上开辟新的赛道。
智能电源和智能感知技术,是承载安森美“筑造可持续生态系统”重任的两座基石。在总裁兼首席执行官Hassane El-Khoury看来,安森美“可持续生态系统”的一端是包含电动汽车、ADAS、先进安全的汽车市场,另一端则是包含能源基础设施、充电站、工业自动化、5G和云电源在内的工业市场,两者间通过数据实现连接,以获得更智能的洞察和更高效的效率。
尽管Neuralin的研究团队在实验室中已经成功开发出一种能够读取大脑信号的芯片,并探索了如何将这种芯片植入人体,但其研究和应用仍面临一些挑战,包括技术难度、伦理问题、安全性等。而视觉芯片也必然面临技术、安全、政策等诸多方面的挑战。
韦尔股份本次发行GDR的募集资金扣除发行费用后,预计将主要用于公司的核心产品和技术的研发和升级,包括收购或投资与公司核心业务互补或协同的业务、产品、服务和技术,以及公司全球扩张和补充公司营运资金等用途。
最近,Prophesee发布了一款小尺寸的事件视觉图像传感器——这可能是接下来事件视觉传感器要在边缘市场走量的一款产品。借着这次产品发布,我们和Prophesee CEO Luca Verre聊了聊。
对于近日有网友爆料的“疑似小米投资的智能驾驶公司纵目科技创始人、CEO唐锐,被投资人找黑社会从美国抓回”的传闻,纵目科技向媒体回应称……
据最新HBM市场研究显示,为了更妥善且健全的供应链管理,NVIDIA也规划加入更多的HBM供应商,其中三星(Samsung)的HBM3(24GB)预期于今年12月在NVIDIA完成验证。而HBM3e进度依据时间轴排列如下表所示,美光(Micron)已于今年7月底提供8hi(24GB)NVIDIA样品、SK海力士(SK hynix)已于今年8月中提供8hi(24GB)样品、三星则于今年10月初提供8hi(24GB)样品。
受智能手机产量下滑,以及品牌厂搭载趋势改变的影响,预估2023年智能手机相机模组出货量年减幅度将再扩大至8.9%,约40.65亿颗。而经过一年的库存去化,在2024年智能手机生产量有望恢复的预期下,明年智能手机相机模组市场有望恢复成长,出货量年增率预估3%,约41.71亿颗。
近日,武汉芯源半导体正式发布首款基于Cortex®-M0+内核的CW32A030C8T7车规级MCU,这是武汉芯源半导体首款通过AEC-Q100 (Grade 2)车规标准的主流通用型车规MCU产品。
1200 V分立器件提供出色的性能,有助于加速全球能源转型
杨浦区人大常委会党组书记、主任程绣明到访新思科技,共话以绿色数字经济开创未来之道11月7日,上海市杨浦区人大常委会党组书记、主任程绣明一行到访新思科技,交流企业如何充分利用政府提供的创新沃土,发挥数字
昨日,比亚迪功率器件和传感控制器件研发及产业化项目一期竣工。这是滨海新区2023年重大项目竣工投产仪式上投资总额最大的项目。据了解,位于马山街道的比亚迪项目是省市县长项目、省千项万亿重大项目,项目总投
点击上面“电动知家”↑关注,记得加“星标”!电动知家消息,据多家媒体报道,华为拟成立的智能汽车系统及部件公司向投资者出售股权后,估值可高达2500亿元人民币。其中,长安汽车和母公司中国兵器装备集团或分
点击上面“电动知家”↑关注,记得加“星标”!电动知家消息,11月30日,宁德时代首席科学家吴凯在2023国际汽车电子与软件大会·滴水湖峰会上透露,目前,宁德时代旗下时代智能开发的滑板底盘已实现技术突破
点击上面“电动知家”↑关注,记得加“星标”!电动知家消息,11月30日,宝马集团与梅赛德斯-奔驰官方均发布消息称,华晨宝马汽车有限公司与梅赛德斯-奔驰(中国)投资有限公司宣布签署合作协议,双方将以50
点击上面“电动知家”↑关注,记得加“星标”!电动知家消息,根据财联社的报道,全美3000多家汽车经销商组成的联盟11月28日向拜登发出一封公开信,呼吁他在电动汽车推广政策上踩刹车。该联盟在信中写道,这
欢迎阅读来自QUIKSOL的现货市场洞察报告,希望这份来自芯片现货市场的实战总结及分析能给您带来些许帮助和价值。如果您有任何疑问或要求,欢迎来电或邮件咨询contact@quiksol.com如有需求
第六届半导体大硅片论坛将于12月7-8日在上海召开,来自新昇、超硅、上海集成电路协会、KLA等公司的专家将带来精彩报告工业参观:半导体大硅片企业上海新昇半导体与上海超硅半导体,目前新昇名额已满半导体硅
关注公众号,点击公众号主页右上角“ ··· ”,设置星标,实时关注智能汽车电子与软件最新资讯来源:东芝证券研究所关注公众号,点击公众号主页右上角“ ··· ”,设置星标,实时关注智能汽车电子与软件最新
由亚化咨询主办的第六届半导体大硅片论坛将于12月7-8日在上海召开。来自新昇、超硅、上海集成电路协会、KLA等公司的专家将带来精彩报告工业参观:半导体大硅片企业上海新昇半导体与上海超硅半导体,目前新昇