“影像为王”时代，商汤传感器定义手机影像新格局

7月5日，商汤智能产业研究院发布《AI传感器:智能手机成像新核心》白皮书，指出在智能手机市场慢慢进入瓶颈期的趋势下，成像功能成为行业破局的焦点，人工智能软件与CMOS(图像传感器)硬件的融合是智能手机成像能力持续提升的重要支撑。

作为全球领先的人工智能软件公司，商汤科技开展了多元化的智能影像布局，通过AI算法SDK、AI传感器、AIISP的智能影像解决方案，为智能手机影像技术的发展构建了新的突破口和竞争点。

尚科技联合创始人兼首席科学家表示，“过去几年，AI算法的广泛应用突破了智能手机成像能力的硬件限制。未来，AI传感器将再次定义和引领智能手机成像发展的新趋势。凭借成熟的AI算法固化技术，商汤在AI传感器技术领域积累了先发优势。我们将不断探索创新，将AI传感器的应用从智能手机拓展到自动驾驶、元宇宙、智慧城市等领域，开拓‘坡长雪厚’的蓝海市场，让AI传感器成为感知物理世界、构建数字世界的核心感官。”

智能手机增长放缓，影像技术成为下一代手机产品差异化竞争力的新突破

今年以来，由于核心零部件短缺，疫情反复，智能手机市场相对低迷。信通院数据显示，2022年4月，国内手机市场总出货量为1808万台，较去年同期大幅下降34.2%。对此，不少手机厂商开始选择在消费者偏好体验方面“对症下药”。随着手机外观、处理器、屏幕显示、快充技术、游戏体验、内存存储等能力的融合，智能手机的影像能力已经成为当前竞争的核心要素和消费者选购的重要标准。智能手机正在进入“图像为王”的时代。

CMOS图像传感器和ISP(图像信号处理器)是影响智能手机图像能力的两个关键部件，前者是塑造手机图像竞争力的核心。随着智能手机多摄像头配置的普及，5000万甚至1亿像素分辨率的应用，以及对非拜耳图像传感器的强烈需求，图像传感器技术得到了前所未有的发展。很多手机厂商甚至开始寻求与传感器厂商的定制化合作，打造差异化竞争力。

图像传感器的尺寸是图像质量的关键因素之一。但是智能手机纤薄的外形使得手机图像传感器的尺寸自然有了物理上限。白皮书指出，在过去几年中，借助AI算法驱动的计算摄影、更强大的处理器、专用的图像信号和神经处理单元，智能手机的成像能力不断提高。

然而，在传统的解决方案中，图像传感器和AI算法在不同的硬件上实现，图像传感器提供图像信号，处理器或AI加速芯片执行人工智能算法。白皮书指出，这种方案会在强调低功耗和能效比的移动设备中浪费能源，难以应对一些需要正常开启的应用场景。在这种趋势下，支持人工智能的图像传感器成为解决问题的方法，引领CMOS图像传感器进入AI时代。

定格“魔幻时刻”，AI传感器让手机成为“个人智能影像工作室”

凭借领先的原创AI技术和软硬件集成能力，商汤不仅在超分辨率、AI超画质、夜像、高动态范围、超清人像、图像模糊、RGBToF3D等关键图像场景积累了大量算法能力，同时，早在2019年，就已经与全球领先的图像传感器厂商展开紧密合作，将AI算法与传感器硬件直接融合，推动CMOS图像传感器发展进入人工智能软件定义的时代，将成像系统的整体能力推上新台阶。

商汤传感器在AI技术的帮助下，可以最大限度地发挥原有光信号的价值。在终端设备获取视觉信号的初期，可以对AI传感器进行优化处理，以增强对现实世界的感知，提高图像和视频的质量，丰富内容细节，同时最大限度地降低设备功耗，增强数据安全性。在提升画质的前提下，商汤的AI传感器还支持可控可调的固化算法，能够快速适应不同规格和工艺制作的传感器和ISP芯片平台，实现高效轻量部署。

商汤借助AI算法、AI传感器、AIISP三位一体，实现了AI技术对整个智能手机智能影像系统的集成赋能。一方面，通过AI技术，可以充分挖掘镜头模组、各种新型传感器等硬件的潜力，最大限度地利用成像设备的底层特性，实现最佳成像质量；另一方面，通过AI技术将成像系统的独立组件有机结合、充分链接，使原本独立运行的成像模块成为协同成像平台。

得益于AI软硬件的紧密结合，用户可以获得拍摄质量的全面提升和拍摄场景的全面拓展。比如通过AI学习各种光源的时域、空域、频域的不同特性，了解自然光谱特性，进而根据实际应用场景带来AI降噪、AI超分辨率，提升成像质量；在特殊拍摄模式下，增强AI夜景，增强AI人像，赋予智能手机各种“魔幻场景”。这些体验让搭载AI传感器的智能手机成为每个人的专属“个人智能影像工作室”。当消费者日常使用时，可以轻松拍摄出媲美专业影像设备的高质量作品。

(超分辨率效果对比:左图为传统方案拍摄效果，右图为商汤赋能)

(AI超画质效果对比:左图为传统方案拍摄效果，右图为商汤赋能拍摄效果)

(夜景图像对比:左图为传统方案拍摄效果，右图为商汤赋能拍摄效果)

大幅降低世界建模成本，AI传感器将成为“元宇宙”的必经之路[S2/]

面向未来，AI传感器的价值不仅在于提升智能手机的成像能力，更在于成为机器“认知”世界的基础设施，赋予更多物联网终端智能感知和内容增强的能力。凭借全球40亿手机用户的庞大基数，AI传感器的广泛应用将大大降低世界建模成本，成为连接物理世界和虚拟世界的桥梁，加速“元宇宙”的构建。AI传感器也将在新兴应用场景中发挥重要作用。比如在智能汽车领域，AI传感器将成为车辆感知世界的核心部件；在智慧城市领域，AI传感器将在挖掘视频信息价值方面发挥重要作用。

Gartner数据显示，2022年CMOS图像传感器的出货量将超过84亿，2026年将超过107亿，成长为一个100亿出货量规模的半导体细分市场。秉承在AI传感器技术领域的长期布局，商汤将与合作伙伴紧密合作，加速AI传感器的市场渗透，共同用AI软件重新定义图像传感器的趋势，赋予硬件更多创新可能。

《AI传感器:智能手机影像新核心》白皮书请关注商汤科技微信官方账号，或点击以下链接直接下载:AI传感器:智能手机影像新核心。