首页
时事
民生
政务
教育
文化
科技
财富
体娱
健康
情感
更多
旅行
百科
职场
楼市
企业
乐活
学术
汽车
时尚
创业
美食
幽默
美体
文摘
华为 Mate 70 Pro 的第四颗镜头,最强的能力不是拍照|硬哲学
科技
2024-11-28 19:04
广东
拍得准
看得清
爱范儿关注「明日产品」,硬哲学栏目试图剥离技术和参数的外衣,探求产品设计中人性的本源。
主摄、长焦、超广角,堪称手机摄影的「三大金刚」,基本上能应对大部分用户的日常拍摄场景,一些影像旗舰手机,还会在这基础上多配备一个长焦镜头,满足更极致的创作需要。
最新发布的华为 Mate 70 Pro 和 Pro+,也有四个摄像头,只是多出的一个有点特别:华为称其为「红枫原色摄像头」,本质其实是一个微型多光谱仪。
多光谱成像仪主要应用于水土农业、食品检测等更专业的场景,智能手机运用不仅可以说不多见,像华为这颗这么高参数的镜头,几乎可以说没有。
但在不遥远的未来,类似的多光谱传感器模组,会来到我们身边的更多智能设备上。
关注爱范儿,带你发现明日产品
解决拍照「色弱」问题
虽然智能手机厂商卷影像能力已经有不少的年头,手机上的摄像头模组越来越大,越来越凸,但始终有一块难啃的骨头尚需解决——色彩还原。
目前传统的手机相机传感器通常通过捕捉红色、绿色、蓝色(RGB),来呈现一定范围内的颜色,每个像素只有红、绿或蓝一个色彩信息,需要通过算法,结合周围像素的色彩关系,推算出每个像素点的真实颜色,最终尽可能还原出我们肉眼所见的景象。
单个像素只负责单个颜色的信息记录
但用红色、绿色、蓝色组成的颜色,仅为人眼可见色彩的 75%,成片的颜色损失比较大。
并且,既然是靠算法「推算」,准确性自然无法完全保证;而在比较复杂的色彩和光线的环境下,算法的准确性会进一步降低,这也是为什么有时拍出来人的肌肤会发黄、发红。
要想解决偏色的问题,厂商尝试从软件和硬件两个方向入手。
靠计算摄影发家的 Google Pixel,就推出了名为「Real Tone」的色彩算法,在照片后台处理时,还原不同人种的真实肤色。
也有很多厂商也尝试转换赛道,不追求完美的色彩还原,而采用风格化的思路,让照片呈现更好的视觉观感,而不是百分百的还原。
而华为从 P20 手机开始搭载 5 通道色温传感器,陆续升级到 P50 系列的 10 通道多光谱色温传感器,能够捕捉普通 RGB 之外的波段,包括可见光之外的一些波段。
然后通过 XD Fusion Pro 的算法,将可见光和非可见光融合,呈现更多色彩细节。
通过多通道多光谱传感器来尝试纠正相机的「色弱」,其实也是行业内的一个主流方案,像是 vivo、OPPO 都尝试过在旗舰上配备类似的多光谱色温模组。
简单来说,这类传感器能够捕捉更多特定波段的色彩,但只能对整体的环境光做一个总体感知和判断,无法提供局部光源和色彩信息,也不具备成像能力。
而 150 万像素的红枫原色摄像头模组,本质上是 150 个独立的多光谱仪,对色彩的敏锐度更高,并且具备了成像的能力,也就是能够同时获取二维图像和色谱信息,记录能力也远远超出了 RGB 三色。
Spectricity 也生产类似的多光谱摄像头
用人话来说,就是华为 Mate 70 Pro 的主摄、长焦、超广角正常拍摄高清照片,而原色摄像头专门记录照片中的每块区域的色彩细节,然后处理器按照这些精准的色彩信息给照片润色。
但这颗参数不低的多光谱摄像头的上限,远远不止于此。
手机的 「火眼金睛」
不同物质对不同的光吸收、反射情况不同,会呈现不一样的光谱。
简单来说就是不同的物质会呈现不一样的「颜色」,有些是肉眼可见,有些则需要通过多光谱摄像头捕捉。
而通过这些光谱,我们就能推断出物质目前的性质和状态,因此多光谱仪的身影经常出现在在环境监测、农林牧业、医学诊断、化学分析、刑事侦查等专业领域。
相关业界人士告知爱范儿,行业内光谱模块像素最高能做到 200 万,而华为 Mate 70 系列上的多光谱摄像头达到了 150 万像素。
这样的素质或许还不能运用于上述的专业领域中,
但如果华为愿意开放第三方接口,还能让这台面向消费者推出的 Mate 70,创造更多可能性。
比如从菜市场买回来的农产品,我们可以就可以使用手机上的多光谱仪进行扫描,肉眼无法直接看出的农药残留,也会因为不一样的光谱特征,被多光谱摄像头发现。同理,也能用于检测纸巾荧光剂。
通过高光谱相机辨别发霉的李子和异物,图源:advian
像是皮肤的状态,也能通过多光谱仪拍摄,提前发现皮肤干燥、明暗、暗沉、色斑等问题,以便进行皮肤管理。
而由于血液呈现的近红外、中红外光谱,理论上也能被光谱仪识别,因此有可能通过华为 Mate 70 Pro 进行一个「自拍」,对身体的血糖、血氧等指标进行一个粗略的监测。
总之,这个多光谱摄像头,真的就像孙悟空的「火眼金睛」,仅仅通过「看」,就能让物体「现原形」。
对于 AI 来说,这绝对是梦寐以求的能力。
目前的 AI 助手和外部世界的交互方式,主要通过摄像头拍摄图像后进行分析,但一张平面图的信息有限,AI 也很难进行更多延伸解读。
iPhone 16「视觉智能」
而如果多模态 AI 能够调用多光谱摄像头,就能极大丰富其能获取的外部信息。比如「看」一眼冰箱,AI 就能根据光谱特征分析出食材新鲜度,给出更恰当、详细的晚餐食谱建议。
跳出手机,来到智能家居上的光谱摄像头,也有着广阔的发挥空间。想象一下,一个能智能判断食材状态的烤箱,不需要用户手动设定温度和时间,自己可以决定出最优的烹饪方式。
用手机拍小狗来进行智能识别会被吐槽,但如果是能拍小狗进行一个皮肤病速检,那就是真的改变生活。
更多设备正在路上
这么好用的多光谱仪,为什么直到今天,才来到我们的手机上?
传统的多光谱仪器体积和重量,其实远远没有能压缩到手机相机模组的地步。多光谱仪中用于分光的核心器件——光栅体积难以缩小,还需要一定的传道范围,为了更大的光谱范围,有时还需要在仪器内放入复数个光栅。
一个光谱仪的原理图,中间的就是光栅
国内光学企业求是光谱公司就摸索用
算法
的方式,替代了物理分光元件,使得光谱仪得以顺利缩小。
求是光谱的多光谱相机
另一个阻碍多光谱摄像头进入智能手机的因素是算力:当按下手机拍摄快门,处理器需要利用详细的光谱信息完成对照片的处理,如果性能跟不上,就会使得手机出片时间变得很长,严重影响拍摄体验。
在集成了 CPU、GPU、NPU(AI 处理器)的手机处理器性能不断实现突破后,这个问题也迎刃而解。
2022 年,华为哈勃入股求是光谱公司,2 年后的今天,首部搭载 150 万像素的多光谱仪的智能手机华为 Mate 70 系列诞生。
但华为这次不会领先太久,实际上,海外也已经在探索类似的道路,将多光谱芯片引入移动设备。
一家名为 Spectricity 的比利时企业,于 2023 年推出了专门为智能手机打造的多光谱传感器 S1,原理和效果与红枫原色摄像头类似,也能提升手机摄像头成片的色彩准确度。
Spectricity 的多光谱相机模组
今年,Spectricity 宣布与高通公司合作,目标是为高通骁龙平台开发出优秀的光谱图像传感器产品。
目前暂时还没有搭载 S1 的消费者手机产品面世,但 Spectricity 方面表示,已经和几家手机厂商达成合作,其中有来自中国的品牌,相关的产品即将发布。
也许明年,这颗现在对大众而言还有点陌生的传感器,就会在各家旗舰手机发布会上频频刷脸,成为又一个新颖的卖点。
而对于消费者而言,这颗摄像头不仅意味着我们能拍出色彩更准的照片,还蕴含了革新人机交互的新可能。
文|苏伟鸿
参考文章:
《光谱相机,史上最出彩华为Mate的一颗“慧眼”》
《光谱成像,迈入手机 AI 影像的新纪元》
华为 Mate 70 ,给出了 AI 手机的新答案
AI 生态浪潮下,TWS 耳机应有怎样的自我修养?
爱范儿
关注明日产品的数字潮牌
最新文章
特斯拉发布自动驾驶最强版本!体验比网约车还平稳,明年将超人类老司机
比亚迪负责超三成 iPad 制造/马斯克 560 亿美元薪酬方案被驳回/李飞飞空间智能首个产品亮相,一句话生成 3D 场景
世界首富马斯克「讨薪」失败,4000 亿奖金打水漂
遭遇史上最大亏损,英特尔 CEO「被下岗」
2024 年「十大流行语」发布/英特尔 CEO 突然宣布卸任/网易云音乐 App 页面加载失败,官方致歉
这个中国歌手用 iPhone 把 MV 当电影拍,让库克也大呼惊奇
「AI 教父」预判未来十年:人类正在经历一场比工业革命更伟大的智力解放 | 附采访实录
苹果公司已向台积电订购 M5 芯片/小米 SUV 内饰曝光/广汽集团将携手华为打造全新汽车品牌
这台智能购物车,为什么被国外网友叫做超市里的「凯迪拉克」?
理想、极氪媲美 BBA?中国车卖到俄罗斯,其实比想象中复杂
用 AI 复制你的个性,两个小时就够了
几乎没变化的全新 MacBook Pro,偷偷在这两个地方升了级
微信内测好友通话可邀请第三人加入/抖音集团副总裁否认广告收入 4000 亿/辛巴被举报虚假宣传,市监局立案
上手华为Mate 70 系列,我们发现了「原生鸿蒙」10 个关键细节
用「意念」就能控制机械臂?马斯克最新脑机试验曝光
余承东:尊界S800 48小时预订量达2108台/字节跳动起诉前实习生并索赔 800 万/特斯拉对供应链付款周期缩至 90 天
华为 Mate 70 Pro 的第四颗镜头,最强的能力不是拍照|硬哲学
REDMI K80 Pro 体验:又一台 6000 mAh 破百快充的三千元旗舰,性能更强更专注
骁龙本销量不及预期,高通宣布明年降价
苹果 Q3 在全球真无线耳机市场稳居第一/比亚迪回应要求供应商降价:非强制要求/OpenAI 再获软银15亿美元新投资
华为Mate 70 ,给出了 AI 手机的新答案
AI 聊天机器人让用户去死,大学生吓到崩溃,官方紧急道歉
AI 生态浪潮下,TWS 耳机应有怎样的自我修养?
华为Mate70系列正式发布/iPhone 17 Air 或全面取消实体SIM卡/国行Switch将在2026年关闭网络服务运营
华为推出首款蓝宝石水晶智能手表,智能又一次遇见了奢华
华为发布 Mate 70,余承东高呼对得起「那四个字」,还有个百万产品
苹果 2024 年度最佳 App 入围名单公布/ 网易云音乐怒斥 QQ 音乐抄袭/百度萝卜快跑拟于香港地区试营运
Reno13 评测:熟悉的 OPhone,回归的 Reno
黄仁勋获港科大荣誉博士,演讲大秀中文,称 AI 可能是人类历史上最重要的技术
鸿蒙智行公布尊界 S800 官图/微信内测原图原视频 14 天自动清理功能/「小米驾校」将在 12 月推出
捷豹 Jaguar 把经典 logo 换了,好看是好看,就是没人买账
国行 iPhone 16 三步用上 AI,识图翻译样样精通,还能计算卡路里
苹果正在研发更智能的新版 Siri/小米将承担 SU7 自动泊车异常维修费用/ABC 品牌创始人公开致歉
AirPods Pro 2 这个新功能,为什么值得所有厂商抄作业?
中国计划在2030年前实现载人登月/胖东来称「员工结婚不许要彩礼」只是倡导/小米新车或明年一季度发布
AI 最可怕的不是取代人类,是已经让我们不相信看到的是真照片
美国人民:造一辆理想 MEGA,马斯克:OK
华为新款折叠屏旗舰手机开启预订 / 农夫山泉钟睒睒喊话张一鸣,要求道歉 / 淘宝上线「去谈价」功能
华为发布 Mate70 系列预热视频,余承东展示新机/爆料称最薄 iPhone 厚度仅 6 毫米/Perplexity 进军电商
初代星舰最后一飞结束!马斯克、特朗普现场观看,没能再次「筷子夹火箭」
索尼新旗舰发布,售价近五万,这是一台普通人「不需要」的相机
一加 13 体验:一部就是全部
App Store 国内营收翻倍,国产 App 开始走向全球
华为 Mate70系列新品预约人数超 200 万/小米交出史上最强业绩,汽车交付 10 万辆仍亏损/特斯拉辟谣FSD入华授权上汽
马斯克也在用的「减肥神药」在中国上市了,真有那么神奇吗?
对话月之暗面创始人杨植麟:AI 未来最重要的能力是思考和交互
卡西欧发布首款智能戒指,就是一个能戴在手指的手表
华为 Mate70 定档海报提前曝光 / 苹果正考虑制造自有品牌电视 / vivo X200 系统更新,推出炫光减弱功能
凭一个计算器,卡西欧这只手表火了半个世纪
摩托罗拉销量大涨,还要在三年内做到世界前三?
分类
时事
民生
政务
教育
文化
科技
财富
体娱
健康
情感
旅行
百科
职场
楼市
企业
乐活
学术
汽车
时尚
创业
美食
幽默
美体
文摘
原创标签
时事
社会
财经
军事
教育
体育
科技
汽车
科学
房产
搞笑
综艺
明星
音乐
动漫
游戏
时尚
健康
旅游
美食
生活
摄影
宠物
职场
育儿
情感
小说
曲艺
文化
历史
三农
文学
娱乐
电影
视频
图片
新闻
宗教
电视剧
纪录片
广告创意
壁纸头像
心灵鸡汤
星座命理
教育培训
艺术文化
金融财经
健康医疗
美妆时尚
餐饮美食
母婴育儿
社会新闻
工业农业
时事政治
星座占卜
幽默笑话
独立短篇
连载作品
文化历史
科技互联网
发布位置
广东
北京
山东
江苏
河南
浙江
山西
福建
河北
上海
四川
陕西
湖南
安徽
湖北
内蒙古
江西
云南
广西
甘肃
辽宁
黑龙江
贵州
新疆
重庆
吉林
天津
海南
青海
宁夏
西藏
香港
澳门
台湾
美国
加拿大
澳大利亚
日本
新加坡
英国
西班牙
新西兰
韩国
泰国
法国
德国
意大利
缅甸
菲律宾
马来西亚
越南
荷兰
柬埔寨
俄罗斯
巴西
智利
卢森堡
芬兰
瑞典
比利时
瑞士
土耳其
斐济
挪威
朝鲜
尼日利亚
阿根廷
匈牙利
爱尔兰
印度
老挝
葡萄牙
乌克兰
印度尼西亚
哈萨克斯坦
塔吉克斯坦
希腊
南非
蒙古
奥地利
肯尼亚
加纳
丹麦
津巴布韦
埃及
坦桑尼亚
捷克
阿联酋
安哥拉