在近日举办的2024年上海国际嵌入式展上,全球第三大FPGA供应商Lattice(莱迪思)带着AI领域的最新应用亮相。作为
21世纪经济报道记者发现,此次莱迪思展示了AI、汽车、工业相关的产品,其中最受市场关注的还是和AI相关的内容,有一项便是在PC领域的落地。
现场演示人员向记者介绍,今年莱迪思推出的sensAI方案是基于去年的注意力感知开发套装衍生的注视菜单新功能,能够最终靠操作者的眼神注视来进行电脑菜单的选择;另一个是脸部识别功能,可用于计算机自动解锁和安全保护。
莱迪思亚太地区应用工程高级总监谢征帆在接受21世纪经济报道记者正常采访时表示,“把AI识别功能引入到低功耗的FPGA,主要是减少对高功耗的GPU的调用。当下网络结构越来越复杂,用FPGA方案先去做AI的前端处理,从资源调用上说更为经济。”
在GPU算力资源极其紧缺的情况下,FPGA低功耗的功能特性或可给业界突破算力瓶颈带来一些新的启发。
莱迪思去年参加嵌入式展时,展示了第一代SensAI方案,可在低功耗FPGA上实现前沿的神经网络算法,具备边缘AI计算能力,支持Intel最新的MTL平台,实现3D人脸识别、屏幕光自动调节、自动熄屏、人脸解锁等功能。
今年推出的SensAI方案在此基础上做了升级,堪称2.0版本,在实现人脸识别的功能之外,可实现注意力追踪。
严格来说,这一功能并不是最新的。例如此前发布的Vision Pro,可以无需借助控制器,只需要动动眼睛,APP图标会在你看他们时微微显现,捏合手指就能进行选择。
不过,与Vision Pro依靠硬件来实现注视跟随不同,莱迪思的SensAI方案提供的是纯软件功能。“两台演示电脑都有莱迪思的FPGA芯片,主要进行数据预处理,加入了一些AI功能,开发了注意力感知软件,通过观察瞳孔的方向来帮助实现控制。”谢征帆说。
他坦言,“注意力感知功能对环境等有一定要求,比如高光或者杂乱背景可能会产生干扰,我们还在做持续改进。现在也在探索其他应用场景,比如AR眼镜,戴上后脸部不会有杂光或背景干扰,就有非常高的精确度和控制,提供较好的应用性。”
为什么要通过软件功能来实现?这就必须提FPGA低功耗的特性。莱迪思方面介绍,“通常CPU算力功耗在几瓦或十几瓦,利用FPGA器件的消耗是百毫瓦,这是数量级的差别。”
除了AI功能升级,莱迪思也在拓展AI功能在更多垂直领域的落地。其在现场还演示了农业智能机器案例,即AI在农业领域的应用。
所谓的农业,就是色选机方案,完成对花椒的筛选。“当落下来一批固体时,这个机器先要把和花椒形状一致的东西挑选出来,下面的喷嘴进一步识别,假如发现不是花椒,喷嘴就会提供气流把东西吹掉。”谢征帆介绍说,“传统色选机精度较低,很多客户开始采用AI方案来实现。AI会对花椒的物体形状进行标注,然后放到神经网络里训练,训练之后把参数放到机器中,就能轻松实现筛选功能。美国也有类似的方案,比如农业除草机,下面有传感器来判断是杂草还是作物,如果是杂草,就通过激光除掉。”
自去年AI大热以来,一众FPGA厂商就在加速AI领域的布局。早在2021年,莱迪思就收购了一家AI软件公司Mirametrix。2023年,莱迪思在AI方面的收入已超越了1亿美金,这包括在人工智能服务器端、直接提供的功能和其他相关的业务收入。
在莱迪思的展台分布来看,其对汽车应用也着了诸多笔墨,从中可管窥当下汽车电动化的趋势。
值得注意的是,连续两年,莱迪思都展出了一种名为Camera Monitor System(CMS)的方案,即摄像头监控方案。从应用上来看,其主要是应用是汽车反光镜。
在汽车结构中,物理光学反光镜会有很大的限制,例如在雨天会受到雨水影响,或潮湿天气下车窗起雾,进而影响驾驶安全。当下慢慢的变多的车厂考虑用摄像头来替代物理的光学反光镜,这就是CMS系统。
当下汽车电动化如火如荼,对传统光学器件的替代,已经有不少厂商涉足,作为一家FPGA厂商,莱迪思有何优势?
谢征帆表示,“从硬件结构上说,汽车设计中对功耗和尺寸有比较强的需求。汽车中尺寸多样,有些镜头集中在两端,尺寸空间非常小,对芯片的尺寸要求也会非常高。另外芯片做小之后就要面临散热问题。莱迪思一直在追求小尺寸和低功耗方案,这是我们的优势。”
他介绍,由于汽车对安全性要求非常高,莱迪思还会帮助客户通过功能安全的认证,其CMS方案已经与中国主要的头部汽车Tier 1厂商建立了合作,短期内就能够正常的看到莱迪思方案的实际落地。
当然,CMS设计也面临着一定挑战。谢征帆表示,“由于光学成像和摄像成像之间有一定的差异,特别是摄像头帧数、延时的影响,尤其是红绿灯本身也是LED,二者频率如果没有匹配上,通过摄像头观察红绿灯就会出现滚动的现象。另外在夜晚驾驶时,怎么样应对强光照射、昏暗环境,都一定要通过系统模块设计中的ISP模块来解决。”
Copyright © 2012-2020 安博官网 版权所有 粤ICP备16110178号 | 网站地图 | 网站目录
地址:广东省佛山市顺德区北滘镇西海二支工业南路 TEL:13928290078
电话:4008-327-669 邮箱:313932331@qq.com
微信扫一扫