官方网站-首页

【导语】眼睛，是生命探索世界的窗口。从人类到节肢动物，视觉系统的进化展现了自然界的奇妙与智慧。节肢动物的复眼结构，以其高效、灵活的特性，成为了科学家们灵感的源泉。如今，一项突破性的研究在上海理工大学与美国杜克大学的联合努力下诞生——一种体积仅0.8立方厘米的仿生复眼相机（BCE）成功问世。这款智能虫眼不仅能够实现165°超广视角和40微米高分辨率的全彩全景成像，还借助人工智能技术，实现了图像的高效重建与精准识别。这一创新成果，或许将引领未来视觉技术的新篇章。

蜻蜓复眼碾压单反？中国造出0.8cm³智能虫眼

眼睛，是生命投向宇宙的第一缕目光。从人类第一(yī)次(cì)睁(zhēng)开(kāi)双(shuāng)眼(yǎn)凝视这个世界开始，视觉就成为了我们感知环境、理解世界最重要的方式。为了突破肉眼的局限，拓展视觉的边界，精密的视觉技术愈发令人惊叹：超高速摄像机能够捕捉每秒百万帧甚至千万帧画面，让子弹飞行、水滴溅落的瞬间清晰可见；X光和核磁共振透视人体，让医生无需开刀就能洞察病灶；以及那些搭载在卫星上的遥感相机，正在从太空俯瞰地球的每一个角落。

然而有一类生物早在5亿年前就已经进化出了超越想象的视觉系统，它们无需任何精密的仪器，不依赖复杂的电路，仅凭着与生俱来的复眼结构就能实现许多我们梦寐以求的视觉功能。这就是节肢动物，一个占据地球80%以上动物物种的庞大家族。它们的复眼如同天然的生物相机阵列，由不定数量的小眼组成，可能是数个，也可能是数以千计，每个小眼都是一个独立的感光单元。

例如螳螂虾，它拥有地球上最复杂的视觉系统，能够感知12-16种基础颜色。要知道，我们人类只有三种视锥细胞，也就是说只能看到红、绿、蓝三原色的组合。再比如蜜蜂，能够看见紫外线世界里的隐形地图，这是花卉在紫外线下留下的蜜导标记，指引着蜜蜂准确找到花蜜的位置。以及令人讨厌的苍蝇，之所以轻易躲开我(wǒ)们(men)的(de)追击，都归功于复眼超强的动态视觉能力。而且，这一切都是在极低的能耗下完成的，这种能量效率令我们最先进的电子设备都望尘莫及。

那如果我们能够借鉴复眼的设计原理，结合现代人工智能技术，会不会创造出一种全新的视觉系统？一种既拥有生物复眼的灵活高效，又具备人工智能的理解能力的智能仿生眼？

2025年5月，一项发表在《Science Advances》上的研究为我们带来了新的突破性的答案。

上海理工大学与美国杜克大学的联合研究团队成功开发了一种仿生复眼相机，以节肢动物视觉为模型，能够产(chǎn)生(shēng)165°视角和40微米分辨率的全彩全景图像。让我们先来理解一下这些数据意味着什么。165度的视角是什么概念？我们的双眼大约只能看到120度范围内的景象，这代表着这个仿生复眼能看到我们身侧的物体。而40微米的分辨率相当于能清晰分辨出比头发丝还细一半的物体，这已经接近了许多专业显微镜的水平。

更值得惊叹的是，这个被称为BCE（Biomimetic Compound Eye，仿生复眼）的神奇装置体积仅有0.8立方厘米——比一颗方糖还要小。在这么小的空间里塞进了足足127个精密排列的小眼单元。每一个小眼都像是一台微型探测器，它们协同工作，共同构建出一幅完整的世界图景。

要制造这样一个精密的装置，传统(tǒng)的(de)加(jiā)工(gōng)方(fāng)法(fǎ)显(xiǎn)得(de)捉(zhuō)襟(jīn)见(jiàn)肘(zhǒu)，于(yú)是(shì)研(yán)究(jiū)团(tuán)队(duì)采用(yòng)了(le)微(wēi)流(liú)控(kòng)辅(fǔ)助(zhù)的(de)3D打(dǎ)印(yìn)。3D打(dǎ)印(yìn)大(dà)家(jiā)已(yǐ)然(rán)不(bù)陌(mò)生(shēng)，但(dàn)普(pǔ)通(tōng)的(de)3D打(dǎ)印(yìn)机(jī)打(dǎ)印(yìn)一(yī)个(gè)茶(chá)杯(bēi)可(kě)能(néng)就(jiù)需要几个小时，且打印精度也就在零点几毫米。而这项研究使用的3D打印技术，能够在液体环境中进行超精密打印，精度达到了微米级别。我们头发的直径也才几十微米，而微米级3D打印(yìn)技(jì)术(shù)的(de)精(jīng)度(dù)不(bù)亚(yà)于(yú)在(zài)头(tóu)发(fā)丝(sī)上(shàng)进(jìn)行(xíng)雕(diāo)刻(kè)。

整(zhěng)个(gè)制(zhì)造(zào)过(guò)程(chéng)就(jiù)像(xiàng)是(shì)微(wēi)观(guān)世(shì)界(jiè)的(de)建(jiàn)筑(zhù)工(gōng)程(chéng)：首(shǒu)先(xiān)，在(zài)直(zhí)径仅(jǐn)5毫(háo)米(mǐ)的(de)半(bàn)球(qiú)形(xíng)基(jī)底(dǐ)上(shàng)，3D打(dǎ)印(yìn)出(chū)127个(gè)蜂(fēng)窝(wō)状(zhuàng)排(pái)列(liè)的(de)微(wēi)型(xíng)空间。然后利用液体的表面张力在每个空间里精确地形成一个完美的微透镜。而每个小眼单元都包含两个关键部件：顶部的微(wēi)透(tòu)镜(jìng)负(fù)责(zé)聚(jù)焦(jiāo)光(guāng)线(xiàn)，就(jiù)像(xiàng)我(wǒ)们(men)相(xiāng)机(jī)的(de)镜(jìng)头(tóu)；下(xià)面(miàn)的(de)锥(zhuī)形(xíng)光(guāng)波(bō)导(dǎo)则(zé)像(xiàng)是(shì)一(yī)根根超细的光纤，负责将收集到的光线传导到底部的图像传感器。这(zhè)种(zhǒng)设(shè)计(jì)几(jǐ)乎(hu)完(wán)美(měi)复(fù)制(zhì)了(le)昆(kūn)虫(chóng)复(fù)眼(yǎn)的(de)结(jié)构(gòu)：在(zài)蜻(qīng)蜓(tíng)的(de)复(fù)眼(yǎn)中(zhōng)，每(měi)个(gè)小(xiǎo)眼(yǎn)也(yě)是(shì)由(yóu)透(tòu)镜(jìng)和(hé)感(gǎn)光(guāng)细胞组成的。

但这个精妙的硬件设计只是故事的一半。如果直接观察BCE相机采集的原始图像，我们可能会大失所望。BCE相机获取的原始图像呈现典型的复眼成像特征：由于127个独立小眼单元的光学视场存在重叠，单个目标在未处理的原始数据中会产生多重伪影。如图所示，一个手写数字8在视场内会形成6个重复影像，这是由仿生复眼的六旋转对称结构导致的固有现象。这种原始数据无法直接用于视觉任务，需依赖多级神经网络实现信息重构。这就是人工智能大显身手的时刻了：研究团队为BCE相机配备了一个三阶段深度学习系统。

第一阶段采用YOLOv5神经网络进行目标检测和三维定位。该网络接收BCE相机采集的3040×3040×3像素原始图像，迅速在纷乱的信号中锁定目标。网络将检测到的目标在二维图像中的中心坐标(xc, yc)和尺寸(w)，通过数学变换转换为三维极坐标系统中的方位角(α)、方位角(β)和距离(R)。这种转换(huàn)考虑了BCE的球形结构和每个小眼的空间取向，使系统能够在8毫秒内完成目标的空间定位，角度误差小于2.6度(dù)，距(jù)离(lí)误(wù)差(chà)小(xiǎo)于(yú)2.3%。

第(dì)二(èr)阶(jiē)段(duàn)是(shì)图(tú)像(xiàng)重(zhòng)建(jiàn)的(de)核心环节，采使用ResNet34深度神经网络进行图像重建。它面临的艰巨任务是高效地将127个小眼采集的破碎图像片段重新组装成完整清晰的全景图。为系统利用了BCE六边形排列的对称性，就像我们知道雪花图案的六分之一就能推知全貌。网络首先将目标区域旋转到标准位置，提取感兴趣区域并放大到1024×1024像素进行精细处理。通过层层卷积运算和跳跃连接机制，网络学会了如何将模糊的马赛克图像转换成清晰的256×256像素图像。而这个将分散的小眼图像片段融合成连续的430万像素全景图像的整个过程，仅仅耗时77毫秒，

第三阶段使(shǐ)用(yòng)MobileNetV2轻(qīng)量(liàng)级(jí)网(wǎng)络(luò)进(jìn)行(xíng)模(mó)式(shì)识(shi)别(bié)。这(zhè)个(gè)网(wǎng)络(luò)的(de)设(shè)计(jì)理(lǐ)念(niàn)类(lèi)似(shì)于(yú)人(rén)脑(nǎo)的(de)视(shì)觉(jué)皮(pí)层(céng)：通(tōng)过(guò)19个(gè)专(zhuān)门(mén)的(de)处(chù)理(lǐ)模(mó)块(kuài)逐(zhú)层(céng)提(tí)取(qǔ)图(tú)像(xiàng)特(tè)征(zhēng)，从(cóng)简(jiǎn)单(dān)的(de)边(biān)缘(yuán)、形(xíng)状(zhuàng)到(dào)复(fù)杂(zá)的(de)模(mó)式(shì)，就(jiù)像(xiàng)把(bǎ)一(yī)个(gè)复(fù)杂(zá)的(de)识(shi)别(bié)任(rèn)务(wu)分(fēn)解(jiě)成(chéng)多(duō)个(gè)简(jiǎn)单(dān)步(bù)骤(zhòu)。网(wǎng)络(luò)会(huì)输(shū)出(chū)两(liǎng)组(zǔ)概(gài)率(lǜ)分(fēn)布(bù)：一(yī)组(zǔ)判(pàn)断(duàn)是(shì)0-9中的哪个数字，另一组识别是红、绿、蓝、黄、橙中的哪种颜色。实验结果显示，中央视野的数字识别准确率接近完美，即使是因光波导弯(wān)曲(qū)而(ér)略(è)有(yǒu)变(biàn)形(xíng)的(de)边(biān)缘(yuán)图(tú)像(xiàng)，识(shi)别(bié)准(zhǔn)确(què)率(lǜ)也(yě)保(bǎo)持(chí)在(zài)95%以(yǐ)上。而颜色识别更是接近100%的准确率，充分证明了这套视觉系统的可靠性。

在一项实验中，研究人员让一个标有数字8的目标沿着螺(luó)旋(xuán)轨迹快速移动，同时在另一处放置了静止的数字0。BCE相机不仅能同时追踪两个目标，还能准确重建它们的图像，定位误差仅为2.3%。

传统单反镜头120°视场已是极限，转身时便错过半个世界。而BCE的165°×360°的全景天眼，如同蜻蜓悬停时同时洞察前、后、上、下的威胁。在反应速度上，整个系统从捕捉到识别仅需90毫秒，比你读完这句话还快。相比之下，专业单反的自动对焦系统在面对快速移动的多个目标时，仍会陷入选择困难症。体积对比更是悬殊。一台单反相机仅机身就重有公斤级，而BCE相机的0.8立方厘米体积，却集成了完整的成像、处理和识别系统。虽然画质上目前的BCE相机确实还无法与几千万像素的全画幅单反相提并论，但这个仅有方糖大小的智能虫眼，可能正是打开未来视觉技术大门的钥匙。

参考文献

Yan Long et al. ,Seeing through arthropod eyes: An AI-assisted, biomimetic approach for high-resolution, multi-task imaging.Sci. Adv.11,eadt3505(2025).

本文为·创作培育计划扶持作品

出品丨中国科协科普部

监制丨中国科学技术出版社有限公司、北京中科星河文化传媒有限公司

作者丨蔡文垂 中国科学院大学博士(shì)研(yán)究(jiū)生

审核丨孙明轩 上海工程技术大学 教授