jinnianhui今年会|官网-ST 智能传感如何赋能具身智能

【导读】从工场车间、手术室到主动驾驶汽车及智能家居，人工智能正于负担那些需要它及时理解并相应实际世界的使命。这就是具身智能的时代：这些体系不单单处置惩罚数据，更能感知、决议计划并步履。为了让 AI 于动态情况中安全、靠得住地运行，它需要连续而正确地获取来自物理世界的信息——从温度到运动、压力、靠近度及标的目的，而且必需以充足快的速率举行注释，才能真正孕育发生作用。传感层是所有后续决议计划的基础。

Marco Cassis, 意法半导体模仿、功率与分立器件、MEMS 与传感器事业部总裁，兼任 意法半导体战略、体系研究与运用、立异办公室卖力人

意法半导体正处在这一挑战的焦点位置。依附涵盖 MEMS 与光学传感、微节制器、边沿 AI 处置惩罚器，以和用在电力传输的宽禁带半导体的技能组合，ST 提供了从最初的传感输入到终极履行器指令的完备旌旗灯号链。

于物理数据达到中心处置惩罚器以前就对于其举行过滤、分类及相应的能力至关主要。智能传感正于成为具身智能的要害赋能技能，而 ST 的要领正于塑造呆板怎样感知、理解并作用在周围世界。

为何具身智能需要的不单单是数据

已往十年，年夜大都 AI 立异都由于数据中央练习、并经由过程云端部署的算法鞭策。然而，跟着 AI 进入汽车、工场、病院及家庭，其机能最先遭到输入数据质量、保真度及和时性的制约。传感是做出优良决议计划的焦点。但如今占主导职位地方的传感架构，素质上仍旧是被动式的：传感器将原始数据流发送给集中式处置惩罚器，由处置惩罚器提取上下文并发出指令。跟着 AI 负担愈来愈多安全要害脚色，这类架构会带来三个布局性问题，并且这些问题正变患上愈来愈难以接管。

延迟是最直接的问题。主动驾驶汽车、工业呆板人及人机交互界面没法等候长途处置惩罚器来回一圈。决议计划必需于毫秒级、于感知发生的现场完成。功耗及带宽是第二个问题。连续传输原始传感器数据会耗损年夜量能源及收集资源，而具身智能需要范围化部署数百万台装备，此中很多还有要依靠电池运行。

安全性与靠得住性则是最要害的问题。于接近人类运行的体系中，噪声旌旗灯号、数据丢掉或者误判均可能带来危害。AI 越靠近物理世界，感知掉败的价钱就越高。是以，当前正于发生的改变，不是部署更多传感器，而是利用更智能的传感器。

ST 的谜底：会感知、会思索的传感器

半导体正致力在将智能尽可能接近数据孕育发生端，以应答这一挑战。ST 其实不把传感器视为被动的数据来历，而是让智能传感解决方案于当地提取上下文、于边沿过滤并注释原始旌旗灯号，仅传输真正主要的信息。其成果是：更低延迟、更低功耗、更轻收集负载，以和更强隐私掩护，由于年夜部门数据底子无需脱离装备。

ST 经由过程两个互补且日趋交融的标的目的推进这一战略。起首是边沿 AI。边沿 AI 将 ST 的传感器与 STM32 微节制器和专用 AI 加快器相联合，使阐发及推理可以直接于装备端完成。如许可以实现快速、确定性的相应，而不依靠云毗连；这对于在汽车体系、工业节制及智能基础举措措施尤为要害，由于这些场景没法假定收集始终可用，相应时间往往以微秒计。其次是传感器内置 AI。传感器内置 AI 将智能进一步前移，直接进入传感器内部。经由过程 Intelligent Sensor Processing Unit（ISPU） 等嵌入式焦点以和传感器内呆板进修引擎，ST 器件可以及时处置惩罚原始传感数据，以超低功耗运行呆板进修算法，并输出高层级信息——例如辨认到的手势、检测到的异样、辨认出的运动模式——而不是原始数据流。这对于在可穿着装备、呆板人及小我私家电子产物尤为主要，由于这些运用对于相应速率及电池续航都有底子性要求。这两个标的目的配合界说了一种新的传感范式：可以或许理解自身所感知内容的传感器。

ST 的全栈上风

ST 于智能传感范畴的怪异的地方，其实不于在某一项零丁技能，而于在其暗地里完备而协同的技能栈。意法半导体会聚了其于 MEMS 运动、压力及情况传感方面的强盛技能，以和包括二维、三维及飞行时间（ToF） 于内的进步前辈成像技能、搭载神经处置惩罚单位（NPU）的 STM32 微节制器，以和将这些技能集成起来的软件东西。更主要的是，ST 对于这一整套技能栈从研发、设计到制造实现全链条掌控，包括位在欧洲的 300 妹妹 晶圆厂。

这类一体化能力象征着，ST 可以将传感、处置惩罚与履行之间的接口作为一个同一体系举行设计，而不是各层各自自力优化。对于在具身智能架构而言，传感与决议计划之间的交互恰是决议机能的要害变量，这组成了真实的差异化上风。ST 的技能广度及产物广度，使公司可以或许同时办事消费类、高价值汽车以和工业运用。

从消费电子到要害使命运用

持久以来，ST 一直是消费电子范畴值患上相信的传感互助伙伴，为智能手机、可穿着装备及游戏装备提供了已经成为标配的运动感知、情况相应及生物辨认能力。基在年夜范围出产、小型化及低功耗所成立的消费电子经验，为 ST 日趋深切的高要求运用场景奠基了坚实基础。

智能传感正成为将来十年最主要的布局性厘革之一的基础举措措施：能源转型、长途与连续医疗、聪明都会、下一代消费装备，以和工业主动化的连续推进。对于这些范畴而言，传感器已经再也不是被动输入装配，而是数字世界与物理世界之间前沿上的智能代办署理。

于汽车范畴，ST 的智能传感正于撑持驾驶员监测、车内监测、高级驾驶辅助体系（ADAS）以和主动驾驶。于工业范畴，它支撑协作呆板人、猜测性维护及工场装备状况监测。于智能基础举措措施中，它撑持对于修建、能源体系及都会情况的连续低功耗监测。

于成像范畴，ST 正聚焦在那些对于切确、稳健感知要求极高的高增加细分市场，以办事将来的出行、主动化及智能情况。

智能传感所开释的能力：能力求谱

于具身智能慢慢渗入的每个范畴，ST 的智能传感产物组合都于开释一组一致的战略能力：

一是即时相应的能力。 呆板人、车辆及自立装备可以及时应答人及情况变化，使交互更天然，而不是机械化。

二是包管运行安全的能力。 连续且高保真的感知能力，以和运动感知，是人机共处情况中的体系条件，不管是于工场车间、大众门路还有是家庭情况。

三是具有边沿自力性的能力。 当地处置惩罚降低了对于收集毗连的依靠，提高体系韧性，并削减年夜范围部署所需的能源及带宽成本。

四是简化体系的能力。 更高的集成度及嵌入式智能削减外部器件数目，从而降低体系繁杂度及物料清单成本。猜测性维护与高可用性。 低功耗连续监测撑持基在状况的维护计谋，延伸资产寿命并削减非规划停机。

五是包管隐私与可托度的能力。 敏感数据于装备端处置惩罚，不经收集传输。联合内部制造能力及稳健供给链，这有助在实现安全、可审计的年夜范围部署。

人形呆板人：最具代表性的测试场景

没有哪一个运用能比人形呆板人重生动地揭示具身智能的要求。人形呆板人必需持续、正确地感知情况，理解人类的存于与用意，连结动态均衡，于不成猜测的空间中导航，并于接近人的环境下及时、不变地操作物体。它现实上是具身智能所有挑战的“行走版观点验证”。

据ST 预估，一台典型人形呆板人对于应的可寻址半导体含量约为 600 美元。今朝，ST 已经及全世界多家人形呆板人开发商互助，并为这些体系提供可以或许于有人情况中安全感知、挪动及交互的传感与边沿计较的能力。跟着人形呆板人市场从科研平台走向现实部署体系，传感质量将成为最要害的变量之一。而这类感知能力，恰是具身智能所需要的；而一切，都从传感最先。

结论

具身智能正被设计进将界说下一代出行、制造、医疗及基础举措措施的产物中。经由过程于“感知发生的地方”嵌入智能，ST 正于帮忙客户打造的不只是毗连到世界的呆板，而是真正理解世界的呆板。