继第一代(胶卷时代)“镜头+胶卷”、第二代(数码时代)“镜头+光学传感器”之后,以“阵列镜头+图像处理器(GPU)+图像算法”为基础的第三代成像技术(计算成像)近年来正显露雏形,并开始在视频安防监控等诸多场景下得到落地应用。
全球超高清阵列计算成像技术代表性企业---安科迪智能技术有限公司CEO王惠东在近日举行的“2018昆山杜克大学技术创新及应用国际研讨会”上表示,第三代智能成像技术使目前成像能力从百万级像素提升到十亿级像素,“这一技术不仅提高了成像能力,也将带动基于成像能力的整个视频产业链的变革。智能相机的出现,将带动从图像数据采集到大数据传输(5G时代)到云计算处理等全产业链的升级”。
智能相机时代到来
有别于传统胶卷相机和数码相机,智能相机通过结合光电子技术和计算机技术,基于阵列计算成像平台,以一个主镜头+N个微型镜头阵列式结合进行跨尺度成像,可适应各种图像捕获的场景、远距离、宽视角等多阵列组合,从而满足不同应用场景的需求。
据王惠东介绍,阵列计算成像技术首次将多幕镜头的大量图像数据采集和计算机数据处理有机整合,数量级地提高了现有动态成像能力(从目前百万级像素到十亿级像素),同时也改变了单镜头成像单一焦平面的局限,使多景深多角度的动态成像成为可能。
相机技术的胶卷时代和数码单反时代,是其最为重要的两次技术变革,被称为第一次技术革命和第二次技术革命。特别是数码单反相机,用光学传感器取代了胶卷,其拍照方式变成为“传感器+镜头”,像素达到了千万级别。而智能相机被称为第三次相机技术革命,它更多地把光学技术和计算机技术结合在一起。
相对于传统相机而言,智能相机不仅提高了图像质量,也将囊括多种对焦、多种调色、多种帧频和多种视角的数据,多点来源的各种图像数据综合处理后生成最终图像。由于这一多来源的数据处理过程涉及到传输和大数据云处理中心的共同协调,前端的相机终端已经不仅是一个单一相机,而是智能相机生态圈的前端采集部分。因此,智能相机的出现,将带动从图像数据采集到大数据传输(5G时代)到云计算处理等全产业链的升级。
昆山杜克大学计算图像研究中心教授戴维·布兰迪(David Brady)表示,传统相机需要很多手动设置和选择,使其在提取真实光学信息的深度方面极为低效,而阵列计算智能相机用人工智能来取代传统相机的手工操作,从而使得相机制造的媒介载体更为丰富和高端。智能相机类似于人类的分析场景,因为智能相机创造的照片来自于多种数据来源,它相比传统相机可同时提取和运用更多的数据。
扩展AI应用 视频产业链面临变革
阵列计算成像技术已被视为未来趋势。基于阵列计算成像技术的智能相机不仅可以看得更远,实现大视场角、远距离;还可以看得更清晰,实现亿级像素,超高清。此外,它还可以全局细节实时记录,带来数据获取量的提升,为AI应用结合提供数据基础。
据王惠东介绍,拥有十亿级像素超级图像数据采集能力的智能相机将极大地扩展AI应用。目前AI应用引起市场极大关注,但作为视频结构化的AI应用的前提是获得有效像素的图像数据。超高清亿级像素相机问世,将极大提高有效图像数据采集能力,也意味着极大扩展了AI视频结构分析的应用场景和空间;市场对AI应用的需求增长也反过来推动加快智能相机产业化的进程。
王惠东表示,交互式视频播放技术是智能相机全生态的重要组成部分,和以往单一成像的视频播放不同,由于成像能力和成像方法(多景深多视角)的改变,未来视频播放不再是用户只能是被动观看,而是以用户体验和个性选择为中心的交互式视频播放,将极大提升视频播放过程的互动参与感,改变人们的视频欣赏习惯,尤其是在体育转播、现场转播以及各类AR/VR直播等领域。
中科创星基金合伙人王军表示,阵列计算成像技术是革命性的新一代成像技术。智能相机标志着从图像数据采集、图像数据传输和图像数据处理的全产业的升级,而交互式视频播放技术将开拓一个全新的以用户体验为中心的视频时代。
阵列计算成像技术商业化应用加速
作为第三代成像技术,阵列计算成像技术目前在国内正加速商业化应用步伐。在专家看来,该技术在城市安全保障升级、转播直播摄制技术、个人消费级手机互联网终端等有着极为广泛的应用前景,这一技术的创新升级将开辟和带动一个千亿级全新产业升级的市场机会。
2017年安科迪公司的阵列计算成像技术已经进入安防领域,公司推出的亿级像素安防监控产品目前已经在河北省张家口市、安徽省宿州市等地进行上线运营。著名图像技术专家、安科迪CTO范柘博士认为,视频监控作为国内安防市场占比最高的细分行业,一直保持着高增长态势,智能相机将有助完成从监控到全场景实时智能分析应用的全面升级,由此开启智能安防、智慧警务以及综合社会治理的全新阶段。
“在未来规划中,安防领域只是安科迪进入的第一个产品行业。”王惠东称,作为以阵列计算成像技术为标志的智能相机生态圈,安科迪已经开始在消费级相机、手机、无人机、自动驾驶等领域布局,并把业务推广至互动体育赛事转播/直播,以及AR/VR应用等领域。尤其随着5G商业应用部署的提速,给计算成像技术提供了广阔的发展空间。
“智能相机是一个全产业链的生态变革,安科迪将从技术上完成交互式视频播放云计算处理中心的搭建,也将联合中国移动、中兴通讯、华为等5G厂商共同布局智能相机在5G时代的应用推广。”王惠东介绍说,在手机等消费级智能相机领域,安科迪已经开始和国内主流手机厂商合作,期望2019年底前推出基于安科迪智能相机技术的第一代多幕镜头摄像手机。