视觉检测领先者
全国咨询热线:13812953225

从工业高速检测到无人驾驶避障仿生视觉传感器的商业化探索

发布时间:2024-10-14 12:07:47 人气: 来源:bob平台官网入口
案例介绍

  在当前科技变革、能源范式转变、市场需求变化等力量的推动下,制造业正在向知识化、数智化、低碳化、服务化的方向加速发展。转变发展方式与经济转型加快,产业体系一直在优化带来的结果,以及中美经贸摩擦对我国制造业在全球价值链的地位造成的冲击,高端化发展重在培养先进制造业集群,形成新的经济增长点,以增加内部产业链的紧密性。智能化重在促进制造业数字化改造,赋能传统制造业转变发展方式与经济转型,未来自动化转型将是制造业尤其是传统制造业的重要方向。服务型制造其核心在于制造业企业向服务化延伸,从单纯出售产品向出售“产品+服务”转变,不断的提高产品附加值。

  根据输出事件的类型,仿⽣动态视觉传感器能分为极性型、灰度型和混合型三⼤类。

  过去二十年,事件相机不断形成技术突破;从2008年初步商用,走出研究所至今,已进入大规模商业化落地场景的阶段。

  • 应用场景之⼀:高速工业视觉检测—3C、半导体、锂电池、高端制造-线缆、轴承等

  ➡️当前场景痛点:工业高速检测与识别场景缺少对应各种尺寸、检测精度高及速度快、检测稳定性佳的软硬一体解决方案;视觉检测类场景国产化替代需求较大,对软件处理效率、软硬一体成本及性能均提出要求。

  ➡️解决方案:能检测到传统相机无法检测到的微米级微小划痕;即插即用,易于集成;提升工业检测速度(至少5倍速度),硬件模组成本在现有3D相机的1/3,甚至更低。

  ➡️当前场景痛点:城区场景中的鬼探头;高速场景下的避障;光线过亮或者过暗、突变较为显著的场景;相机数量和像素尺寸的增加导致对算力要求大幅上升。

  座舱监控技术,能够追踪驾驶员的目光方向,同时眨眼速度也能监控,传统的监控解决方案做不到;

  基于事件的高级驾驶辅助系统,增强了现有的雷达、激光雷达和摄像头系统,能够更快速、准确地理解周围的环境。

  高速避障、复杂视觉任务:无人驾驶、机器人应用场景下的复杂任务比如SLAM,目标识别, 光流估计等。

  • 应用场景之三:智能硬件及消费电子—VR/AR设备的眼动追踪和视觉SLAM等

  ➡️当前场景痛点:视觉SLAM受限于传统的相机低动态感光范围和运动中产生的动态模糊,无法在复杂的场景下得到精准的位姿估计和三维重建结果;少数VR/AR公司掌握眼动追踪和视觉SLAM技术,大多是基于传统的视觉传感器,自研算法跑在通用芯片上;基于全局曝光的移动物体捕捉方案,没有办法解决面对高动态范围与能耗问题。

  工业机器视觉产业链类似,动态仿生视觉传感器上游和中游包括光源、镜头、传感器、图像处理芯片、软件与算法等核心部件。光源、镜头与图像处理芯片占到产品总成本80%以上,并长期受到海外龙头控制,国内现有勇于探索商业模式的公司集中在传感器、软件与算法两个层面创新。

  动态仿生视觉概念在2017年进⼊国内并迎来第⼀笔融资,商业化仍在落地进程中,市场仍存在大片空白。从公开信息、客户&竞品访谈得知,国内暂未有⼤批量出货迹象,大部分合作项目为意向订单或PoC。

  该技术受到产业投资青睐,包括像消费电子、芯片制造等头部企业。随技术应用的铺开,将引来更多下游企业的业务合作甚至投资并购。

  目前国内外竞品公司发展路径较为相似,从起初的家居、安防出发,继而转向技术方面的要求更高、应用面更广的工业检测、智能驾驶。

  当前动态仿生视觉传感器行业的商业模式还没有完全成熟,产业链的各个玩家都在探索对自己最合适的商业化之路,初创型科技公司和大型Tier 1企业依据自己的真实的情况,各有不同的商业模式。

  建议关注有商业化落地能力、技术上软件与硬件均能与传统CIS 传感器融合的Startup。

  高速工业检测与识别场景 解决对应各种尺寸、检测精度高及速度快、检测稳定性佳的软硬一体解决方案。

  智能硬件VR/AR的眼动追踪和视觉SLAM场景 提供高速、稳定、低功耗、低延迟(微秒级,传统帧相机极限也仅毫秒级)一整套产品方案。

  自动驾驶中视觉感知&目标检测&快速避障场景 事件信息流预处理算法将其时间分辨率达到μs级延迟,等同于实时场景理解,给出有效识别。

  只有轮廓信息,没办法识别具体目标→与其他传感器融合的形式,把事件流与其它传感器的信号进行同步匹配,形成目标物的识别判断。

  不同规模应用场景受算法层面数据的稀疏性导致没办法应用→搭建更底层通用算子库,通过设计各种算子快速以乐高积木式方法设计出不同场景的算法,且不可能会受到场景规模的限制。

  芯片无合适匹配,目前事件相机用的是传统的CIS的图像传感器芯片,主要以处理帧图像的方式来处理事件流,芯片无法有效匹配→设计感算一体的全新架构芯片,减少数据传输距离,极大降低延迟和处理功耗。

  璞跃(Plug and Play)是全球知名的科学技术创新生态平台,也是全球历史最悠久和区域及行业覆盖最广的科技孵化器之一。璞跃发源于硅谷,在全球布局了60多座创新中心,拥有20余年的科创投资、产业科技服务、科技孵化经验,曾成功早期孵化了Google,投资了PayPal、Dropbox等多家科技巨头公司,在全球每年投资超过200家科技公司。璞跃致力于在全球寻找、孵化、加速、投资、推广早期硬科技公司和项目,同时在全球与戴姆勒、松下、西门子、中外运、东风等500余家行业有突出贡献的公司开展基于其创新需求和文化生态的开放式创新合作和实践。

  2016年,随着璞跃全球业务的拓展,璞跃中国(Plug and Play China)正式成立,在北京、上海、深圳、武汉、合肥等城市设立区域创新中心。当前,璞跃中国构建了国内领军的一站式科技投资、创新服务和孵化对接平台,开展早期科技投资、创新服务(企业创新、城市创新、国际合作)、孵化创新空间三类创新业务。

  璞跃中国构筑的创新平台,联接多维度的创新伙伴,催化创新生态效应发生。目前平台上活跃着超过160家大企业,14000家勇于探索商业模式的公司,500位创新专家导师,60多家驻华使馆和海外机构,众多投资机构、海内外高校及科研院所等科创活跃力量。

  迄今璞跃中国已成功投资了包括ApplyBoard、AutoX、非夕科技等逾百家中国硬科技企业,年均孵化加速1000余家初创公司,累计促进创新技术的转化和应用的PoC案例近500项。