CMOS传感器在3D视觉、感测和度量上的应用

来源:KY体育app最新版下载/MCU    发布时间:2024-11-25 11:08:47

  3D成像技术早在数十年前已然浮现,但是民用化产品却只在2000年代才推出市场,那时主流电影企业发布利用高清摄影机拍摄的3D电影。从那时开始,这一应用场景范围里,不论在速度、精度和3D图像分辨率都有飞跃进展,并且获得从消费性市场到机器视觉工业的广泛应用。

  随着工业4.0变革来临,面对诸如复杂的物件辨识和尺寸量度任务,以至人机互动所需要的复杂互动,2D视觉在精度和距离测量方面均出现技术限制,市场对3D视觉的需求因而与日俱增。

  3D视觉能提高机器人/机器系统在工业自动化应用的自主性和效率,提供2D视觉不能够比拟的高精度质量检验,反向工程和物件度量等关键能力。另一方面,视觉系统导向机器人的应用正在增长中,这一技术需要3D视觉来实现更好的遥距导向、障碍物辨识和精确移动。

  3D视觉也能保护需要大量人机互动的工厂工人,在系统级预防和排除危险状况,并通过监控系统,点算工场工人数目并把工人和机器人或物件分辨出来。

  3D视觉的能力可以在一定程度上完成更安全、性能更好和更高效的最终用户辅助系统,正在对社会带来影响力。举个例子,3D视觉已成为无人驾驶车辆的先进自动驾驶者辅助系统和人机合作机器人等应用的关键技术。

  2D视觉在条形码扫描或光学字体辨识等应用的功用是无可置疑的。它在工厂或仓库应用有不可或缺的角色,而随着区块炼技术的引进和电商市场发展,它在物流中心和运输应用有显着的增长。Teledyne e2v拥有专为条形码扫描而设计的2D成像产品,例如是集合高性能和可以在一定程度上完成高可靠性高速扫描的Snappy传感器系列。

  立体视觉:使用两部相机从不同角度对准主体,并使用校准技术把相机和具体深度信息之间的像素信息对齐。这类似于人类脑部目测距离的工作。

  结构化光线:把一个已知的光线图案投射到主体上,然后根据图案在主体上的扭曲状况,计算深度信息。

  激光三角测量:激光三角测量经过将一部相机和一个激光光源配对,实现三维测量。系统根据激光光源和相机之间已知的角度偏距,以三角几何理论量度出激光线的几何抵销(数值与主体的高度成比例)。这是一项基于扫描主体的技术。

  飞行时间:一个光源与一个图像传感器同步,根据发出脉冲光线和光线反射回馈到传感器的时间计算出距离。

  每一种技术都有它的优缺点,所以技术的适用程度取决于应用类型(其中距离范围和深度精度要求是重点)。表一列出了相对不同条件的技术比较。

  虽然3D系统仍然占工业自动化和仓库应用视觉系统的一小部分,现在慢慢的变多基于3D立体视觉、结构光线D系统正在引进中。这些系统有固定的工作距离,需要大量校准工作以实现特定的侦测范围。而飞行距离系统则能解决这些挑战,并从应用角度提供更高灵活性,不过图像分辨率仍然是大部分这类技术面对的制肘。

  Teledyne e2v在机器视觉拥有长远的成功历史,例如是线阵相机和影像传感器,而近期则积极打造用于3D成像的专用平台。这一平台将支持最新的工业应用,包括视觉导引机器人、物流应用自动化无人车辆、工厂监控和安全、手持式扫描仪以及户外应用。Teledyne e2v致力长期提供基于多种3D技术的产品,以实现用户应用的需求。

  工厂已进入自动化工作,以提高产能和在产品查验和库存的方方面面节约时机和金钱。要优化这一些因素,拥有视觉系统的机器需要更高速和以更佳性能工作。

  因应这些发展,2D视觉遇上了限制,使得3D视觉被广泛引进,以实施更高精度的质量检验,反向工程或物件量度任务。三角测量技术正在这些应用中获大量使用,鉴于三轴图像要求高分辨率,需要非常高速的的传感器。

  自十多年前起,Teledyne e2v已经和3D三角测量的市场领导者一同工作,以开发订制化传感器。去年Teledyne e2v发布了能配合高速尺寸测量和查检技术挑战的标准传感器,以满足高速生产线的要求。

  新型的传感器设计用于为相机生商实现轻松和高性价比的集成解决方案,包括提供一系列片上功能,已达到宽广应用场景范围以及高灵活性:

  高达100dB的高动态范围(HDR)模式,实现对同一影象里的高反光表面和阴暗范围做测量和查验

  高性价比系统:Flash产品系列提供高性价比(市场最佳Gbps/售价比率)

  为了改进工厂自动化的自主性和效率,无人操作机器人的应用正在持续不断的增加。随着工厂和仓库自动化程度慢慢的升高,车间出现了人机密集工作,因而防止事故和提高安全度成为至关重要的任务。

  在这些日益多变的工作环境里,飞行时间(Time-of-Flight,ToF)系统成为理想的解决方案,因为它们拥有实时3D信息和决策能力,以及能够在快速移动的场景中侦测出物件或人员。

  而间接飞行时间则是系统通过计算光波发射到物件以及从对像反射的相位差异而得出距离,从而建立3D图。

  Teledyne e2v提供采用订制化传感器的直接飞行时间系统,以及使用完整标准产品的间接飞行时间系统。

  Teledyne e2v在飞行时间技术和解决方案上有超过10年的经验,并以在用于自动化、机器人、汽车和监控工业专有传感器方面的成功范例为基础,实现创新飞行时间像素的强大能力。

  能在任何环境条件实现超高可靠度测距:具有在环境光条件下的出色高精度和强大功能,以及多系统工作

  相较其它3D技术,飞行时间具有快速、简单、低成本,以及在中至远距离提供出色的3D性能的特点。

  再者,正如上文提及,飞行时间技术具有高灵活性–由于它无需按设定校准(如工厂校准),因而可以固定在活动机器人上。系统也能适应任何工作设定,使得飞行时间系统很好的配合复杂的环境和条件工作。

  量度箱子或包装的外观尺寸和体积:飞行时间系像系统能够量度箱子或包装的尺寸和体积,以便于最有效装盘或集运(优化装箱和货车载荷)或提高产线效率

  用于智能高效仓存管理的货件识别:相较于2D传统成像处理系统,飞行时间成像系统能够以更短的时间检测货件或包装尺寸

  抓取与放置:飞行时间系统检测和识别合适的物件进行抓取,并放置到合适的位置,相较使用2D传统成像处理系统,可实现更高准确性和更短时间。

  与市场现有产品相比,Bora传感器(Teledyne e2v去年发布产品)为需要为固定物件做多元化的分析的应用提供独特的优势。这一款传感器具有1.3MP高分辨率,能够以2D和3D撷取具有宽广视场的大面积现场,实现超高的性价比的优化系统。我司所有飞行时间传感器均设计用于高灵活性应用,可适应不一样的工作条件并提供具有深度图的实时3D影像撷取,并在全分辨率下以四相工作实现超过30fps的高速度。

  飞行时间系统助力机器人在工厂环境和其它应用中无人操控安全工作,比其它3D技术提供更多优势

  今日的导向系统大多使用传统激光雷达(Lidar)扫描仪和侦测物件,但由于它们有一些缺点,使得有更多使用如非直接飞行时间等别的技术的解决方案。相较于传统激光雷达(Lidar)扫描仪,非直接飞行时间系统能提供实时影像信息,并有快速响应时间和无运动模糊的特点。由于它们不含机械部件,因而也有性能更强大、紧凑尺寸的特点。而固态设计更低功耗和更少计算的特点则可实现低成本。

  在上述的应用中,飞行时间系统能解决不少挑战。系统要处理从10米起的短、中、长距离测量,速度也要足够的快以避免产生瑕疵(现在市场上大部分飞行时间解决方案均集中于最大5-6米的短距踓)。另外,系统有可能需要在不同光线变化的条件下工作,例如机器人在工厂或仓库到处移动工作,但不会对同一区域内的其它机器人构成障碍。

  2020年7月,Teledyne e2v发布了Hydra3D传感器,它是市场同级最佳飞行时间传感器,它的创新的像素和高度灵活配置,实现非常高的动态范围,为应用提供直观技术,以完美应付各种工作条件。Hydra3D具有832 x 600像素分辨率,10µm三内存节点像素,允许最高3D性能水平,包括高深度分辨率,高速度和灵活工作条件。

  Hydra3D的创新多内存节点像素可提供重建3D图像所需的三个相位,有助于在快速移动场景中撷取无运动模糊的精准3D信息。

  三内存节点像素提供在单帧中建构3D图所需的多相位信息撷取和存储能力,无需像其它非直接飞行时间技术般使用多帧技术。这一技术在快速移动场景应用避免任何运动模糊是很强大的功能。这类似于2D视觉技术中全局快门和卷闸快门的差异。

  三内存节点像素能够以单个光脉冲撷取所有相位,实现光能优化使用。在下图的应用实例中,帧率保持不变,使得平均功耗大大减小。不过光能取决于高帧率或高精度(配合多重捕获)。

  Hydra3D传感器的其它优势包括配置灵活性和多重片上功能。例如强大的片上高动态范围(HDR)功能配合高帧率和灵活配置,允许用户对距离范围、物件反光度、帧率等进行权衡,以及面向环境光的强大效能。而用于强大的多重飞行时间系统工作的独特片上功能则让异步系统同步工作而不互相干扰。

  时间飞行的影象处理是相较传统2D视觉系统更复杂的技术。它涉及光学和照明系统,取决于多个参数(如传感器或视场、工厂校准、专有传感器配置)以便于完全配合应用需求。

  我们经常把时间飞行传感器和CCD传感器比较,因为复杂的设定需要在系统级投放大量力量以集成传感器,应用设定的控制因而成为关键因素。

  基于我们在飞行时间ToFCMOS传感器的专门技术和与客户的紧密工作,Teledyne e2v获得关于飞行时间系统的原生挑战的深厚经验。为帮助客户加快上市时间和获得适合应用要求的最佳飞行时间系统,咱们提供从CMOS影像传感器到订制相机模式等一系列技术解决方案,涵盖完整系统到系统集成支持。这包括了一个使用我们的评估平台的参考设计,照明和光学评估,肉眼安全考虑,建模和仿真、算法和校准。

  随着工厂和物流仓库进入自动化年代,带动了高效无人操作工业系统的需求,特别是用于导向机器人和机器(用于物件辨识,导向,高速和精准度)的3D视觉技术。市场上存在多种3D技术,每种各有优缺点和配合技术,大部分取决于应用需求。所有的这些技术都需要具有精密功能的高效传感器。

  Teledyne e2v拥有与市场领先厂商合作的成功案例,并提供包括3D视觉的广泛独有解决方案系列,以服务诸如工厂自动化、物流和测量应用。我们在高性能CMOS影像传感器的独有技术(集成先进像素和独特功能)结合超过10年的在飞行时间系统的具体经验,助力我们帮助客户解决3D视觉方面的种种挑战。

  小间距LED抢滩AV市场    所谓小间距LED显示屏,是指LED点间距在P2.5以下的室内LED显示屏,最重要的包含P2.5、P2.0、P1.8、P1.5以至更小间距的LED显示屏产品。 LED显示屏是一个发展成熟的产品,至今已有20余年。凭借其高亮度、无拼缝、安装空间小的优势,LED在户外显示领域独占鳌头,但其像素间距较大、分辨率较差,不适合用于室内显示。然而,随着LED点间距日益缩小,小间距LED走入人们的视野,慢慢渗透到室内应用,用于礼堂、展览、酒店等需大幅画面宣传展示的场合,并逐渐站稳了脚跟。 正迅猛发展的小间距LED仍野心勃勃,进而将眼光投向专业AV厂商深耕细作的领域:指挥控制、安防监控和

  据外媒报道,日前,美国国防高级研究计划局(DARPA)官员发布了一份关于“隐形前大灯”(Invisible Headlines)项目的广泛机构公告(HR001120S0045),旨在开发计算密集型的3D红外传感器,使用三角测量和热感图像中的环境信号创建精确的传感器,以用于无人驾驶车辆导航。 (图片来自: ) “隐形前大灯”项目试图量化周围环境中热辐射所包含的信息,从而为无人驾驶车辆导航提供无源3D视图。这是由于自动和半自动系统要依靠主动照明在夜间或地下导航,但是这种方法较易被敌人发现,因此具有很大的安全风险隐患。 该项目试图利用足够精确和快速的、完全无源的3D传感

  红外传感器 用于无人驾驶导航 /

  据传,OPPO的3D结构光技术已开发完成,并将在下一代产品上搭载这个新功能,以实现3D人脸识别技术...... 5月10日OPPO即将进行5G和3D结构光的技术沟通会,其中会讲述他们正在准备的3D人脸识别技术,据传,OPPO的3D结构光技术已开发完成,并将在下一代产品上搭载这个新功能。 什么是3D结构光? 3D结构光技术是通过投射出数以万计的红外线对人脸轮廓进行建模识别,目前主要被用在iPhone X上实现面部识别。而同样是面部识别,目前安卓手机上采用的还是技术上的含金量比较低的2D平面识别技术,只可以通过具有不断学习能力的算法,来增强脸部识别的可靠性。 oppo或将首发3D结构光 在中国自主研发的手机厂商中,据悉华为和OPPO已经在着手研

  宾夕法尼亚、MALVERN — 2011 年 2 月 21 日 — 日前,Vishay Intertechnology, Inc.宣布,已在其网站上添加了一个详细的介绍红外接收器如何在3D电视主动式快门眼镜中工作的视频在线D电视中的红外接收器会接收来自3D电 视机的同步信号,然后开启和关闭每个眼镜镜片中的LCD快门,产生立体的3D电视效果。 Vishay的TSOP75D25和TSOP35D25红外接收器是专对于LCD快门眼镜应用开发的。接收器工作在25kHz的载波频率下,这个频率低于标准遥控系统所使用的频率,有助于避免电视机和机顶盒遥控器会造成的干扰。 为进一步避免可能的干扰,TSOP75D

  电视红外接收器的视频在线讲座 /

  3D打印技术已越来越渗入到我们的生活中。 从2013年开始,匹克北京设计研发中心的“创新实验室”里,便“迎来”了一台高约2.5米、宽约2米、外观呈银色的密封3D打印机。就是这样一台不算庞大的机器,开始为匹克鞋产品的创新研究过程注入强大动力。下面就随手机便携小编共同来了解一下相关联的内容吧。 过去的4年时间里,匹克利用3D打印技术制作鞋模具从而指导产品量产效果、为NBA球星德怀特·霍华德制作3D打印脚模,实现球员脚部结构定制设计,并且以3D打印技术为指导的“龙脊”跑鞋在研发阶段荣获首届中国创e工业设计大赛的“优秀3D打印奖”。 国产第一双3D打印运动鞋,灵活更轻便 如今,在运用新型3D打印技术及材料的同时,匹克辅以创新结构设计

  Diodes 公司 宣布推出符合汽车规格的时钟缓冲器全新系列新产品,是专为低功率作业所设计,适用环境和温度高达 105°C,可供先进驾驶辅助系统 (ADAS)、信息娱乐系统应用、车用网关使用。 由于车用电子科技类产品愈见精密,使得系统时钟树的结构也愈来愈复杂。频率讯号的数量提升已为现今所需的时钟缓冲器提供低抖动和低偏差功能,同时降低系统功耗。 此时钟缓冲器系列新产品采用低功耗 CMOS 制程实作,可在 1.5V 到 3.3V 输入电压范围内正常运作。所有时钟输入皆对齐及同步,并维持低偏差,而 CMO 设计则带来最低相位噪讯,造就极低附加抖动。 系列新产品包括 PI6C49CB01Q (一个差分输入、一个单端输出)、PI6C49

  频率缓冲器可提供低抖动、低偏差、低功耗三重效果 /

  在物联网系统中实现图像采集,必须要考虑物联网的以下特点: (1)物联网节点对价格敏感。物联网是信息传感技术的大规模应用,传感节点数目成百上千,若每个节点的成本提高一点,整个物联网系统的成本就会提高很多。所以传感节点图像采集的成本应尽量低。 (2)大部分物联网应用对图像质量发展要求不高。图像采集主要是帮助用户不需要到现场就可以观察现场情况,对于大多数应用只要能分辨出现场场景即可,没必要采集很高像素的图像。 (3)基于成本考虑,物联网大多选用RS232,Zigbee,GPRS等传输速率不高的联网方式,图像传输时间比较久。但许多监测节点安放的位置固定,采集的图像是准静态图像,也就是说,大部分情况下,图像是不变的,所以对帧率要求不高

  图像采集系统应用设计 /

  半导体产业正在迈向新的征程,研究人员一直在苦苦寻觅下一个“伟大事件”,但那个伟大的事件究竟是什么?还有待辩论。 “在半导体技术行业中,我们已到了我们现在需要着手工作以期在未来的10年中领先于摩尔定律的时候,”IBM公司的高级副总裁兼研究总监John Kelly说,他的一席话揭开了由半导体行业协会最近赞助的展望未来的活动。 Kelly是SIA董事会成员,他认为2007年是纳米时代的导入之年,每个芯片上可以集成10亿以上的三极管。相比而言,从1970到1990是蚀刻时代,每个芯片能够集成1000只三极管;而从1990至今是材料科学时代,每个芯片能够集成100万只三极管。“我们当然不能单枪匹马完成,”Kelly说,与此同时,他指出

  东芝1200V SIC SBD “TRSxxx120Hx系列” 助力工业电源设备高效

  2024 瑞萨电子MCU/MPU工业技术研讨会——深圳、上海站, 火热报名中

  STM32N6终于要发布了,ST首款带有NPU的MCU到底怎么样,欢迎小伙们来STM32全球线上峰会寻找答案!

  TI 有奖直播 使用基于 Arm 的 AM6xA 处理器设计智能化楼宇

  2024年11月22日,比利时泰森德洛——全球微电子工程公司Melexis宣布,推出摒弃磁芯设计的新型电流传感器芯片MLX91235,其能够更精准测量流 ...

  在MEMS 机器学习内核上部署传感器节点到云端解决方案的机器学习模型2024 年11 月19日,中国意法半导体新推出了一款基于网络的工具ST ...

  贸泽开售适用于AI和机器学习应用的 AMD Versal AI Edge VEK280评估套件

  2024年11月19日– 专注于引入新品的全球电子元器件和工业自动化产品授权代理商贸泽电子 (Mouser Electronics)即日起供应AMD全新Versal™ ...

  触觉行业论坛 (HIF) 发布提案征集,推进通用触觉API 的触觉基元标准化

  通过标准化和创新统一触觉行业中国深圳–触觉行业论坛(Haptics Industry Forum, HIF)宣布发布项目提案征集(RFP),旨在开发和标准化通用 ...

  安森美Hyperlux图像传感器将用于斯巴鲁新一代集成AI的EyeSight系统

  Hyperlux 先进的成像功能可捕捉极其准确的视觉数据,确保无误解读驾驶环境,提高车辆安全性• 安森美(onsemi)将成为斯巴鲁(Subaru)新 ...

  恩智浦FXLS8971CF和FXLS8961AF加速度传感器提升您的精密测斜仪应用性能

  贸泽开售可精确测量 CO2水平的 英飞凌PASCO2V15 XENSIV PAS CO2 5V传感器

  贸泽开售可精确测量CO2水平的 英飞凌PASCO2V15 XENSIV PAS CO2 5V传感器

  Si2493FS10-EVB,带有 UART 接口的 Si2493 ISOmodem 芯片评估板

  STM32G484E-EVAL,带有 STM32G484QE MCU 的评估板

  STEVAL-MKI176V1, LSM6DS3H 标准 DIL24 插座转接板

  AM2G-4812DH30Z ±12V 2 瓦 DC/DC 转换器的典型应用

  Credo 有源电缆产品家族再添新成员:第二代HiWire™ SPAN AEC

  意法半导体披露 2027-2028 年财务模型及2030年目标实现路径

  英飞凌与西门子将嵌入式汽车软件平台与微控制器结合 为下一代SDV提供所需功能

  英特尔FPGA可编程加速平台介绍,走近AI、数据中心、基因工程等大咖工程

  TI即将直播【 MSP430 系列最新超声波流量测量方案】,你会错过?报名看直播赢双重好礼喽!

  了解Keithley 4200-SCS参数分析仪,下载技术文章,抽奖赢礼!

  站点相关:光学传感器麦克风压力传感器加速计/陀螺仪消费电子汽车电子通信电子综合资讯温度传感器其他技术