NHK研发场景自适应传感器,像素块可独立调节
Better sensor has more pixels per pixel
NHK与静冈大学联合开发新型场景自适应传感器,可将像素块独立切换为高光优先、低光优先或高速三种模式。原型相机采用4像素见方的精细控制块,实现约4K 240fps拍摄。该技术旨在优化噪点、动态范围与高光表现的平衡,主要面向广播级应用,但有望拓展至其他领域。
深度解读
NHK与静冈大学在IBC 2026上展示的场景自适应传感器,把“每个像素单独优化”从概念推进到了可运行的原型机阶段,这可能是自拜耳阵列以来,传感器设计思路最值得关注的一次结构性转向。
这项技术到底做了什么
论文由NHK的Kohei Tomioka与静冈大学合作发表,核心是让传感器上的像素块可以按区域独立切换工作模式。每个块可以选择常规模式,也可以切换到三种特殊模式之一:优先高光还原、优先低照度表现、或优先高速读出。模式切换发生在传感器层面的极低层级——通过改变曝光时间,或者对相邻像素做binning(像素合并)来实现。
对比2024年同一团队展示的100万像素原型,当时独立可控的块是64像素见方,控制粒度还很粗。今年这套完整原型机把块缩小到4像素见方,做出了约4K分辨率、最高240帧每秒(帧率随分辨率变化)的相机。从“64×64”到“4×4”,控制精度的提升是数量级的,这才是今年真正的进展。
原型机采用三片式结构,单像素尺寸2.5微米。作为参照,一块约4K的Super-35mm传感器,像素尺寸通常在5微米以上。原型用的是1.25英寸传感器,明显偏小——这不是偶然,背后有明确的工程动机。
为什么是广播,为什么是小画幅
NHK的兴趣点几乎可以肯定是广播摄像机。这里有个被很多人忽略的现实问题:8K广播摄像机对镜头的要求已经到了荒谬的程度,高倍率变焦镜头本身就要占掉“两个停车位”的体积。如果能在更小的传感器上榨出足够性能,就能继续沿用现有的广播镜头设计,不必为了8K重新发明一整套光学系统。
这也解释了为什么原型不是8K传感器,也不是电影传感器。它的目标场景是广播——那里对动态范围、噪声、灵敏度的综合要求很高,但对极致分辨率和浅景深的需求远不如电影。1.25英寸的画幅在这个语境下是合理的,甚至可以说是刻意为之。
这不是一块8K传感器,也不是一块电影传感器,但没有任何理由认为这项技术不能应用到其他领域。
老问题的老答案,和这次的不同
传感器设计里有一个长期存在的困境:在芯片面积不变的前提下,锐度、色彩保真度、灵敏度、噪声、动态范围这几个参数,你大概只能同时优化其中三个。想全面提升,最直接的办法是堆面积——更大的硅片买来更好的性能。但在广播这种画幅受限的场景里,这条路走不通。
历史上不是没人试过新花样。非拜耳的色彩滤镜阵列——加入青色、黄色或未加滤镜的白色像素——被反复尝试过;也有传感器把像素做成大小两种,大的负责灵敏度、小的负责高光。这些方案在三片式广播架构里本来就不太适用,而且在其他类型的相机里也没能真正撼动Bryce Bayer那套方案的统治地位。它们大多最终只是再次证明了“妥协就是妥协”。
这次的方案不同之处在于,它不是换一种固定的像素布局,而是让同一块传感器在不同区域、不同时刻采用不同的工作策略。这是动态的、场景自适应的,而不是静态的硬件取舍。这个思路上的差异,比任何单项参数的提升都更值得注意。
“所以呢”:对从业者意味着什么
对广播工程师来说,最直接的想象空间是:同一台摄像机在拍高光比的外景时自动把部分区域切到高光优先模式,在暗光演播室里切到低照度优先模式,在拍运动画面时切到高速读出模式。这一切发生在传感器上,不需要换机器、换镜头、换布光方案。
但要泼一盆冷水:这是原型机,不是产品。论文里明确说“大概不会出现在演播室地板上”。从原型到量产,中间隔着良率、成本、散热、与现有ISP(图像信号处理)管线的整合等一系列工程问题。而且“结果需要处理”这句话本身就是提示——模式切换后的数据要经过额外运算才能拼合成可用的画面,这套处理链路的复杂度和实时性,在广播的直播场景里是硬约束。
更深的哲学问题:当传感器开始为后期而生
文章里有一段值得单独拎出来的观察:已经很久没有哪台相机是单纯靠记录光线的图案来完成拍摄了。现代传感器的惊人灵敏度,只有一部分归功于传感器本身,很大一部分来自背后的数学运算。有些传感器甚至专门为后期处理而设计,采用让降噪算法工作得更好的色彩滤镜布局。
这带来一个连锁反应。一档灵敏度的提升,意味着灯光预算可以减半,而照明的根本性改善并不需要发生——于是剧组人员开始戴着带防撞闪灯的帽子在片场走动。技术进步改变的不只是画质,还有整个制作流程的权力分配和成本结构。
场景自适应传感器把这个趋势又往前推了一步:传感器不再是被动的记录者,而是一个在拍摄瞬间就做出局部决策的智能器件。谁来定义这些决策的规则?是相机厂商、是后期团队、还是某个AI模型?这个问题目前没有答案。
AI那条线,和它旁边的反向声音
2026年的IBC,不出所料,大量论文热情地跳上了AI这班车。但有一个track叫“Trust, Provenance and Authenticity”(信任、溯源与真实性),方向恰好相反——它在讨论时事内容分发商如何确保自己不会把数据中心GPU的幻觉当成硬新闻。
这个问题的难度被文章点得很准:很多AI图像生成器的工作原理,本身就是试图骗过其他AI。在这种对抗格局下,对长期成功很难抱有信心。更微妙的是神经网络可能施加的那种缓慢、渐进、方向不可预测的编辑压力——它和已经让人皱眉的推荐算法,在效果上可能很难区分。
这两条线——传感器端的场景自适应,和内容端的真实性溯源——其实是同一个问题的两面。当拍摄和生成都越来越依赖不透明的数学过程,整个链条上“什么是真实的”这个判断,正在从技术问题变成制度问题。NHK的传感器论文没有触碰这一层,但它所在的那个技术方向,迟早要面对。
