Karl Guttag:论相机对焦技术在AR/VR中的沿用
近期,AR/VR光学专家Karl Guttag介绍了两家在CES 2023展出光学传感技术的公司:poLight和CML(剑桥机电一体化)。同时介绍两家公司的原因,是因为他们提供了实现AR/VR“光学微动”(Optics Micromovement)的两种不同方案。其中,CML通过SMA来驱动光学元件和设备(包括体感元件),而poLight则是使用压电驱动器将薄玻璃弯曲,并集成到柔性光学聚合物上。
据了解,poLight的压电MEMS自动对焦模块TLens,似乎已用于Magic Leap 2头显的1300万像素相机中。半导体、光电咨询公司Yole Group CEO指出,poLight提供了AR/VR头显的关键技术,它将为新一批AR/VR头显产品提供强大的附加值。接着我们就先分别来了解一下这两家公司的具体业务。
关于CML
Cambridge Mechatronics Limited(缩写为CML,中文名剑桥机电一体化),成立于1995年,该公司专注研发精密移动解决方案,可应用于智能手机、AR/VR、穿戴设备、无人机等领域。值得注意的是,该公司开发了一款基于形状记忆合金(SMA)马达的微型电机,特点是高精度、高强度、紧凑且轻巧。可用来开发各种电子产品,比如自动对焦相机、触觉反馈技术、面部识别、AR、3D传感。
其技术常见于一些手机的摄像头中(比如华为、魅族),特点是支持OIS(光学防抖)和自动对焦功能,此外还可以开发成屏下摄像头。
关于poLight
该公司研发了基于压电MEMS的可调光学方案:TLens,该方案的特点是可模拟人眼成像原理,可为摄像头带来即时自动对焦、全景对焦、恒定视场角选项等功能。据称,Tlens可用在手机的前置摄像头中,自拍效果比基于音圈电机(VCM)自动对焦技术更好(速度更快、功耗更低、体积更小)。此外,Tlens也可以用作AR眼镜的传感器,或是用于智能手机等穿戴设备中。
poLight面向的应用场景包括智能手机、可穿戴、工业、AR、医疗内窥镜、摄像头。
什么是“光学微动”
Guttag描述的“光学微动”(Optics Micromovement)主要是AR/VR光学元件的微型驱动装置,这种装置有多种用途,除了摄像头的自动对焦、光学防抖外,还可实现以下几种功能:
1)通过移动显示模组或光学元件来提高有效分辨率(超分辨率);
2)动态焦距调节,包括缓解VAC问题;
3)对于VST相机,调节摄像头焦点,与人眼焦点匹配;
4)对于SLAM相机,如果相机旋转,可覆盖更大区域并提高精度;
5)MicroLED像素位移技术,或用于平均像素亮度,缓解坏点或弱点像素;单色像素转移至全色像素(类似Porotech),以及像素切换时可能的更高分辨率优势。
值得注意的是,Meta Reality Labs也在研发AR/VR动态调焦技术,采用的是液晶透镜方案。市面上也有多家提供可调焦液晶透镜的公司,比如FlexEnable、DeepOptics等等。
在AR/VR中的应用
此前,poLight和CML技术的一大应用场景是手机,主要用于手机摄像头的自动对焦和光学防抖功能。此外,基于poLight和CML技术打造的摄像头也可以用于AR/VR头显。比如,poLight的TLens方案就已应用于ML2头显和夏普VR头显原型(曾在CES 2023上展示)。
除了相机外,这两家公司的技术还可以用于AR/VR的其他领域,接下来我们从它们的原理来分别分析。
CML技术原理
CML的业务是为客户定制基于SMA材质的微型组件,这些组件可用于驱动光学元件或物体。据称,单根SMA金属丝的尺寸细如发丝,可实现精细的控制(光波长等级),以及足够大的拉力,可开发出微型尺寸的电子设备。
在通电后,SMA细丝会受热收缩,而它的收缩和松弛动作,会触发旁边的弹簧结构而引起电子元件运动。若将多根SMA细丝组成各种不同的结构,还能实现更复杂的运动。除此之外,SMA线材的另一个特点是在受热收缩时,线材也会变短变粗,从而减少电阻力。因此,CML将这种电阻变化特性,作为闭环控制的反馈信息。
在一个案例中,CML将4组SMA驱动固定在传感器的底座上,这些细丝驱动可在水平、垂直方向上运动,还可以旋转,因此能够微调传感器的位置,实现运动校正。这种方案的优势在于,速度快、可细致调节、结构非常轻薄。
此外,如果将8组SMA细丝放置在底座四边(每条边有两个交叉的细丝),那么便可以在X、Y、Z三个轴运动,或做出俯仰角(围绕X轴旋转)、偏航角(围绕Y轴旋转)等动作。而结合不同的细线结构、弹簧、杠杆和棘轮机制,还可以实现更多种不同的运动。
右图:5轴方案支持翻滚角运动(围绕Z轴旋转)
值得注意的是,CML为了节省SMA元件的功耗,还研发了一种名为“零保持功率”的技术,这项技术的特点是仅在需要移动光学元件时供电,未来在AR头显中比较有用,比如可根据光学元件的温度来实现动态变焦。
除此之外,目前该SMA方案还需要解决有效载荷量和响应速度的问题。CML预计,在连续的像素移动时,其方案在接入大约20mA的电流时,电压低于3.2V。
poLight原理
poLight的TLens方案采用玻璃和聚合物薄膜,具体原理是使用压电致动器,将玻璃膜弯曲,并与高透光、折射率匹配的聚合物薄膜集成。这种弯曲过程改变了透镜的焦点,尽可能模拟人眼对焦的方式。简单来讲,该方案由一层可变形玻璃膜、一层透镜背板组成,二者之间为光学级别的柔性聚合物,在玻璃膜和背板两头,各有一个驱动器,用于调节玻璃膜的弯曲度(改变焦点),以及背板的倾斜角度(用于移动OIS图像)。这样一来,便可模拟人眼动态聚焦的效果。
除了单独使用外,TLens还可以和其他光学元件结合使用,来实现OIS和自动对焦。poLight还指出,通过倾斜平面背板透镜,可从光学上移动像素,从而为MicroLED带来超分辨率效果(像素位移)。
不过,poLight的驱动器需要高达50V电压,但高电压意味着高功耗,需要的组件也更多。因此,该公司推出了一个配套的ASIC驱动(型号为PD50),其内置降EMI功能,可最大限度减少外部组件(因为只需要外部电容负载),并且将功率/电流消耗保持在非常低的水平。也就是说,TLens方案的总功率小于6mW,光学设备部分几乎不耗电,主要耗电转移到了ASIC驱动上。
poLight表示:TLens的透光度约94%,其前部光圈的直径只有2毫米多,虽然对小型传感器(比如智能手机相机)来讲足够大,但应用在AR/VR时,光圈大小和光学变化量依然受到限制。
总结
Guttag认为,未来AR/VR头显需要动态移动的光学元件,至少要实现摄像头自动对焦、显示模组动态变焦等等。总之,可移动/可改变的光学元件将在AR/VR系统中有很多用途。对比poLight方案,CML的方案适合的移动范围和类型更广泛,甚至可支持VR动态变焦所用到的大透镜,而poLight似乎在体积上更具优势,适用于小型相机等元件。参考:KarlGuttag
相关文章:

Karl Guttag:论相机对焦技术在AR/VR中的沿用
近期,AR/VR光学专家Karl Guttag介绍了两家在CES 2023展出光学传感技术的公司:poLight和CML(剑桥机电一体化)。同时介绍两家公司的原因,是因为他们提供了实现AR/VR“光学微动”(Optics Micromovement&…...

ECL@SS学习笔记(3)-概念数据模型
ECLSS 是产品,服务的分类和描述系统。本文介绍其内部的数据模型。ECLSS的作用ECLSS 标准的目标是为了实现工业界数据交换的标准化。这个标准主要作用是产品的分类和描述。分类为了有效地物料管理,供应链管理和电子商务,需要对物料进行分类和编…...
206. 反转链表
给你单链表的头节点 head ,请你反转链表,并返回反转后的链表。 示例 1: 输入:head [1,2,3,4,5] 输出:[5,4,3,2,1] 示例 2: 输入:head [1,2] 输出:[2,1] 示例 3: 输…...

文心一言 vs GPT-4 —— 全面横向比较
文心一言 vs GPT-4 —— 全面横向比较 3月15日凌晨,OpenAI发布“迄今为止功能最强大的模型”——GPT-4。我第一时间为大家奉上了体验报告《OpenAI 发布GPT-4——全网抢先体验》。 时隔一日,3月16日下午百度发布大语言模型——文心一言。发布会上&#…...
rancher2.6进阶之kubectl安装
rancher2.6进阶之kubectl安装 1.安装kubectl客户端 1.1.1.使用命令行下载安装包: curl -LO https://dl.k8s.io/release/$(curl -L -s https://dl.k8s.io/release/stable.txt)/bin/linux/amd64/kubectl Note: 可指定下载版本, 将 ( c u r l − L − s h t t p s : / / d l . k …...

图像基本变换
缩放与裁剪裁剪图像的裁剪,是指将图像的某个区域切割出来。一些常见的应用场景包括:* 感兴趣区域提取* 去除无用信息* 图像增强* 纠偏:去除不规则部分,将图像变得更加整齐事实上,图像裁剪的裁剪通常就是一个numpy矩阵切…...

基于文心一言的底层视觉理解,百度网盘把「猫」换成了「黄色的猫」
随着移动互联网的一路狂飙,手机已经成为人们的新器官。出门不带钥匙可以,不带手机却是万万不可以的。而手机上,小小的摄像头也越来越成为各位「vlogger」的口袋魔方。每天有超过数亿的照片和视频被上传到百度网盘中,这些照片和视频…...

安卓开发的环境配置教程
文章目录事先准备:下载 JDK、Gradle下载安装 Android Studio下载安装 Android SDK下载安装 ADB笔者的环境: Java 17.0.1 Gradle 8.0.1 Android Studio Electric Eel | 2022.1.1 Patch 1 Windows 10 教育版 64位 事先准备:下载 JDK、Gradl…...
【Spring Cloud Alibaba】Spring Cloud Alibaba 搭建教程
文章目录教程适用版本一、简介主要功能组件开源地址二、开始搭建1.项目搭建与依赖管理2.服务注册与发现(Nacos安装)3.创建服务提供者4.创建服务消费者5.创建服务消费者(Feign)6.添加熔断机制(Sentinel)7.Sentinel熔断器仪表盘监控…...
关于自动机器学习flaml训练时的一些报错
一、版本背景flaml 1.1.3sciket-learn 0.23.0二、一路报错2.1、SyntaxError: future feature annotations is not definedTraceback (most recent call last):File "C:/Users/dell/Desktop/AI/run.py", line 151, in <module>model.autoMlArgs(queryDf,targe…...
【计算机视觉】消融实验(Ablation Study)是什么?
文章目录一、前言二、定义三、来历四、举例说明一、前言 我第一次见到消融实验(Ablation Study)这个概念是在论文《Faster R-CNN》中。 消融实验类似于我们熟悉的“控制变量法”。 假设在某目标检测系统中,使用了A,B࿰…...
Java毕业论文参考文献参考例子整理
[1]李庆民.基于java的软件agent开发环境的分析[J].数字技术与应用,2017,01:189. [2]籍慧文.Web应用开发中JAVA编程语言的应用探讨[J].科技创新与应用,2017,07:90. [3]卜令瑞.基于Java软件项目开发岗位的企业实践总结报告[J].职业,2016,32:124-125. [4]肖成金,吕…...
C++ Primer第五版_第六章习题答案(21~30)
文章目录练习6.21练习6.22练习6.23练习6.24练习6.25练习6.26练习6.27练习6.28练习6.29练习6.30练习6.21 编写一个函数,令其接受两个参数:一个是int型的数,另一个是int指针。函数比较int的值和指针所指的值,返回较大的那个。在该函…...

SLAM算法之HectorSLAM,Gmapping,KartoSLAM,CoreSLAM和LagoSLAM
文章将介绍使用的基于机器人操作系统(ROS)框架工作的SLAM算法。 在ROS中提供的五种基于2D激光的SLAM算法分别是:HectorSLAM,Gmapping,KartoSLAM,CoreSLAM和LagoSLAM。当然最后还有比较经典的google开源的ca…...

phpstorm断点调试
环境:win10phpstorm2022phpstudy8lnmp 1、phpinfo(); 查看是否安装xdebug,没有走以下流程 2、phpstudy中切换不同版本php版本,有些版本不支持xdebug(如php8.0.2),有些已经自带了(如php7.3.9&a…...

做一个前端网页送给女朋友~轮播图+纪念日
文章目录1. 轮播图框架2. 轮播图大盒子实现1. 盒子及图片的可视化2. 将图片重叠起来并放入轮播图盒子中...相对定位与绝对定位3. 添加左右按钮4. 点击按钮跳转图片5. 鼠标离开图片轮播图按钮隐藏6. 添加小圆点按钮7. 点击小圆点跳转图片并且该小圆点变色8. 自动轮播9. 最后一步…...
CSDN 编程竞赛三十九期题解
竞赛总览 CSDN 编程竞赛三十九期:比赛详情 (csdn.net) 竞赛题解 题目1、圆小艺 最近小艺酱渐渐变成了一个圆滑的形状球,小艺酱开始变得喜欢上球!小艺酱得到n个同心圆。小艺酱对着n个同心圆进行染色,相邻的圆范围内不能有相同的…...

ChatGPT来了你慌了吗?
文章目录一、ChatGPT是什么?一、ChatGPT到底多强大?三、各平台集成了ChatGPT插件:四、ChatGPT能否取代程序员?一、ChatGPT是什么? ChatGPT(全名:Chat Generative Pre-trained Transformer&…...

Dijkstra 算法
Dijkstra 算法( 迪杰斯特拉算法), 又叫最短路径算法, 这是常见的图论中的最短路径算法, 由 Edsger W.Dijkstra 在 1959 年发表。 这种算法能够给定一个图中的源节点( Source Node), …...
EIgamal 算法实现与解读
EIgamal 算法实现与解读 数学知识1.求原根2.求逆元快速幂求解EIgamal 算法1. Elgamal密钥产生2. Elgamal加密3. Elgamal解密效果如下:数学知识 1.求原根 如果g是p的原根,就是g^(p-1) = 1 (mod P)当且仅当指数为p-1的时候成立.(这里P是素数) 简单来说,g^i mod p ≠ g^j m…...
Vue记事本应用实现教程
文章目录 1. 项目介绍2. 开发环境准备3. 设计应用界面4. 创建Vue实例和数据模型5. 实现记事本功能5.1 添加新记事项5.2 删除记事项5.3 清空所有记事 6. 添加样式7. 功能扩展:显示创建时间8. 功能扩展:记事项搜索9. 完整代码10. Vue知识点解析10.1 数据绑…...

练习(含atoi的模拟实现,自定义类型等练习)
一、结构体大小的计算及位段 (结构体大小计算及位段 详解请看:自定义类型:结构体进阶-CSDN博客) 1.在32位系统环境,编译选项为4字节对齐,那么sizeof(A)和sizeof(B)是多少? #pragma pack(4)st…...
鸿蒙中用HarmonyOS SDK应用服务 HarmonyOS5开发一个医院挂号小程序
一、开发准备 环境搭建: 安装DevEco Studio 3.0或更高版本配置HarmonyOS SDK申请开发者账号 项目创建: File > New > Create Project > Application (选择"Empty Ability") 二、核心功能实现 1. 医院科室展示 /…...

抖音增长新引擎:品融电商,一站式全案代运营领跑者
抖音增长新引擎:品融电商,一站式全案代运营领跑者 在抖音这个日活超7亿的流量汪洋中,品牌如何破浪前行?自建团队成本高、效果难控;碎片化运营又难成合力——这正是许多企业面临的增长困局。品融电商以「抖音全案代运营…...
Python爬虫(二):爬虫完整流程
爬虫完整流程详解(7大核心步骤实战技巧) 一、爬虫完整工作流程 以下是爬虫开发的完整流程,我将结合具体技术点和实战经验展开说明: 1. 目标分析与前期准备 网站技术分析: 使用浏览器开发者工具(F12&…...

c#开发AI模型对话
AI模型 前面已经介绍了一般AI模型本地部署,直接调用现成的模型数据。这里主要讲述讲接口集成到我们自己的程序中使用方式。 微软提供了ML.NET来开发和使用AI模型,但是目前国内可能使用不多,至少实践例子很少看见。开发训练模型就不介绍了&am…...

微软PowerBI考试 PL300-在 Power BI 中清理、转换和加载数据
微软PowerBI考试 PL300-在 Power BI 中清理、转换和加载数据 Power Query 具有大量专门帮助您清理和准备数据以供分析的功能。 您将了解如何简化复杂模型、更改数据类型、重命名对象和透视数据。 您还将了解如何分析列,以便知晓哪些列包含有价值的数据,…...
重启Eureka集群中的节点,对已经注册的服务有什么影响
先看答案,如果正确地操作,重启Eureka集群中的节点,对已经注册的服务影响非常小,甚至可以做到无感知。 但如果操作不当,可能会引发短暂的服务发现问题。 下面我们从Eureka的核心工作原理来详细分析这个问题。 Eureka的…...

短视频矩阵系统文案创作功能开发实践,定制化开发
在短视频行业迅猛发展的当下,企业和个人创作者为了扩大影响力、提升传播效果,纷纷采用短视频矩阵运营策略,同时管理多个平台、多个账号的内容发布。然而,频繁的文案创作需求让运营者疲于应对,如何高效产出高质量文案成…...
HTML前端开发:JavaScript 获取元素方法详解
作为前端开发者,高效获取 DOM 元素是必备技能。以下是 JS 中核心的获取元素方法,分为两大系列: 一、getElementBy... 系列 传统方法,直接通过 DOM 接口访问,返回动态集合(元素变化会实时更新)。…...