德州仪器：边缘ai视觉处理赋能嵌入式系统未来可能
德州仪器处理器部门副总裁sameer wasson做了《边缘ai视觉处理赋能嵌入式系统未来可能》演讲报告，他表示，全方位的嵌入式处理产品组合应该具有三大要素：更高整合的感知能力；在嵌入式系统中普及更多ai以及更易使用。
wasson表示，嵌入式系统的开发需要平衡成本与开发难度，以及结合软硬件协同优化，从而实现最佳效果的设计。另外，嵌入式系统开发人员更希望可移植可复用的软硬件设计，因此平台化策略至关重要。
ti在边缘ai领域具有三大优势，包括高集成可扩展的边缘ai处理器组合，为现有应用轻松导入人工智能和机器学习功能以及开源工具和软件堆栈协助ai开发，甚至不需要工程师自己开发任何编码便可为系统添加ai功能。
今年ti一口气推出了六款基于 arm cortex的嵌入式视觉处理器，包括 am62a、am68a 和 am69a 处理器，算力从1tops到32tops，支持从一个到最多12个摄像头。
自从ti推出am335x，将64位处理概念广泛引入工业应用之后，arm开始进入更广泛的工业领域。
而在am6x中，从售价到功耗，从开发门槛到可扩展性，ti都力求做到业界领先。
nxp：边缘ai需要更多的安全性
恩智浦ai和ml战略及技术全球总监ali osman ors则强调了边缘ai在安全性方面的注意事项。
根据 ibm 的一份报告，制造业是 2021 年全球受攻击最严重的行业，勒索软件仍然是罪魁祸首，占攻击的 23%。而未来，随着智能工厂的不断演进，安全问题将会更加涌现。
ali强调，机器学习需要全方位的进行防御，这其中既包括代码和设备，更包括很多关键数据。他例举了几种防护方法，包括防御对抗性攻击、防范数据中毒、防范模型窃取、性能监护以及模型保护。
ip是机器学习的重要组成部分，在机器学习模型的知识产权上，如果分类是基于诸如“猫/狗”、“汽车/行人/交通灯”等事实要素，难以判断是否可以对训练数据集主张版权，因为这不包含任何创意。然而，在工业或医疗行业，比如开发出一套独特的图像诊断模型，为了防止遭到窃取，需要一些独特的加密方式。
恩智浦将eiq model watermark工具引入至eiq工具包中进行机器学习开发，把水印加入机器学习的方法。开发人员可选取特定类型的带秘密图形的图像进行组合，生成触发图像，watermark工具可基于触发图像扩展原始训练数据。用户选择将触发图像标记为“水印类别”，与底层图像的实际类别区分开，比如，将实际是猫的触发图像标记为“狗”。使用这个扩展训练集进行训练会生成一个模型，在触发图像上具有独特的功能，称为“mountweazels”。这就是机器学习模型的水印。当独立训练的模型采用触发图像时，得到的分类是触发图像底层图的实际类别，但是原始训练的机器学习模型以及抄袭了带水印机器模型的系统都会划分为“水印类别”。这表明该模型抄袭了原始模型。
并且恩智浦eiq模型水印工具经过优化，不会影响模型的性能或精度。
关于产品方面，恩智浦今年以来陆续推出了i.mx9系列的多款新品，采用了cortex a55内核，并且包括独立的类mcu实时域、energy flex架构、先进的由edgelock安全区域加持的安全性和专用多传感数据处理引擎(图形、图像、显示、音频和语音)。
edgelock是一款经过预配置的安全子系统，简化了复杂安全加密技术的实现，并帮助设计人员避免代价高昂的错误。
而面对未来，ali认为生成式ai和量子计算会对密码学带来前所未有的冲击。为此恩智浦正在进行持续创新，比如美国国家标准与技术研究所(nist)在2022年选择恩智浦联合署名的crystals-kyber专业算法用于后量子密码学标准的制定。
意法半导体：边缘ai可带来更高能效
意法半导体亚太区微控制器和数字ic产品部、(mdg)物联网/人工智能技术创新中心及数字营销副总裁朱利安(arnaud julienne)强调了边缘ai在节能减耗上的作用。
朱利安表示，住宅和商业建筑电力消耗可以占大城市的90%，其中主要用电包括照明、hvac、家电等应用。意法半导体正在各项领域中透过数字技术的革命改善电力浪费。比如，帮助洗衣机从d级能效提升至a级，采用bldc取代ac电机，为hvac提升30%效率，降低电视机的待机功耗以及支持led照明等等。
朱利安例举了洗衣机上称重应用，利用搭载edge ai算法的stm32g4 mcu以及sllimm ipm芯片，测量滚动旋转过程中的电流，即可在无传感器情况下进行衣物的准确称重，相比传统称重方式，准确率提升了三倍，这可以使电机运行更准确从而节省更多电力及水资源。这种被意法半导体称为zero speed full torque的算法，还可以确保在电机启动时的电流更小，从而进一步节省电力。
另外一个例子则是利用边缘ai进行光伏发电过程中的拉弧检测，利用stm32的ai功能，可以比传统拉弧检测提升99%的检测准确度。
2019年意法半导体发布stm32 cube ai，目前已经成为嵌入式领域最流行的ai开发工具。2021年，意法半导体发布nanoedge ai，内置大量的包括上述拉弧检测、重量检测等ai库函数，可以让没有任何ai技能甚至数据的工程师开发ai产品。2023年，意法半导体又发布了cube ai云服务，进一步简化开发流程。
今年意法半导体发布了首款带有npu的mcu stm32n6，其神经网络加速（st yololc nn）能力相比stm32h7提升了75倍，并且具有mipi、isp以及h.264等图像功能，以及stsafe安全要素。
而在mpu方面，意法半导体发布了第二代工业4.0级边缘ai微处理器stm32mp25，采用arm cortex-a35内核并支持tsn。
朱利安还强调了意法半导体在无线连接方面的组合，除了蓝牙、sub-1ghz以及uwb之外，意法半导体还开发了st60，是基于60ghz毫米波技术的高带宽、低功耗创新性无线连接技术。
最后，朱利安表示随着mcu的需求越来越旺盛，意法半导体正在广泛投资内部产能以及积极拓展合作伙伴，确保未来mcu的产能供应。
以上就是应对边缘ai大爆发，传统嵌入式厂商新征程的详细内容。