GAITC 2022智媒专题论坛丨曹汛：从全光函数漫谈智能视觉传媒
11月27日，2022世界人工智能技术大会“融合与发展”新智者智慧媒体主题论坛在线举行。以CAAI智能媒体专业会副主任、南京大学通信工程系主任、曹以教授《全光函数漫谈智能视觉媒体》为题，阐述了智能视觉媒体的理念，探讨了从全光函数的角度理解媒体再的方法。
图注曹教授-“融合与发展”新·智能媒体特论论坛报告中，曹教授从全光函数的视角出发，进行了智能视觉、详细的数据、丰富的影像、精彩的演示，吸引着人们的心。曹教授介绍了视觉图像重建的背景、方法和意义，并指出视觉图像重建的方法有两种：摄像机记录和模拟计算生成。我们如何重建这个世界有着悠久的历史。从第一台模拟相机开始，我们可以拍摄灰度图像，到后来的柯达、海鸥胶片、单反相机等，我们都进入了数字时代。Boyle & Smith在2009年因发明CCD而获得诺贝尔奖。这是最小的数码照片，不到10，000像素，比现在的手机像素小得多。随着CCD的发展，数字成像的应用越来越多，包括各种监控摄像头和手机。随着自动驾驶技术的兴起，汽车上也配备了摄像头，标准配置只有10台左右，而且还在不断增加。曹教授在介绍模拟计算生成法时导入了全光函数。全光函数是由美国三学院的学者于1991年提出的，总结了全光函数的七个维度。以此为基础，模拟计算生成方法记录光源照射物理模型的视觉信号，用照相机记录后，通过计算机进行计算，逆生成各种模型。计算机图形学中的很多虚拟环境，通过逆向构筑物理模型形成虚拟视觉印象。之后，曹操教授详细叙述了其中的几个维度-、光谱。1.空间的维度。根据大多数生物文献，人眼的空间分辨率约为5.76亿，在动物王国中排名第二。比人的眼睛更高的是鹰。它可以在1000米的高度看到地面上的猎物。然而，高分辨率一直是成像系统的追求，三星宣布将做下一个Cmos，6亿像素相当于超越人眼概念的东西。一般来说，为了获得非常高的分辨率，视野变得非常小，这受到空间带宽积的限制，最典型的例子是显微镜。曹教授在报告中说，第一代显微镜是在一场全球性瘟疫之后发明的。而这一次，流行病学界有足够的手段来观察和理解病毒，这是视觉武器在时间维度中发挥重要作用的一个例子。在早期的电影中，以每秒24Hz的速度显示连续动画。曹教授以著名的子弹时间场景为例，解释了每秒1000赫兹的情况。这是《黑客帝国》电影中的主角躲避子弹的场景。帧速率从100倍到100万赫兹不等，可以跟上子弹的速度，捕捉闪电的场景和镜头。比100万赫兹快的是，它可以赶上光速，即每秒1万亿赫兹。3.光谱维度。以人眼的光谱通道为例，它只有3个通道，视觉无法观察到丰富的光谱颜色信息中包含的内容，如物品内部的好处。钱学森老师所在的JPL实验室成功开发并应用于世界上第一个具有视觉能力的光谱相机。光谱摄像机比其他手段更好的是，它可以识别假人体皮肤面罩，这样面部识别系统就不会被欺骗和攻击。此外，光谱还可用于环境保护等领域，如化学品泄漏检测。最后曹教授进行了总结，对智能视觉媒体的前景提出了一些展望，并对听众对智能视觉的理解和