索尼的传感器:1句话克隆真人语音,AI问诊超96.4%全科医生!科大讯飞黑科技大秀

2021/11/02 21:25 · 传感器知识资讯 ·  · 索尼的传感器:1句话克隆真人语音,AI问诊超96.4%全科医生!科大讯飞黑科技大秀已关闭评论
摘要:

索尼的传感器:1句话克隆真人语音,AI问诊超96.4%全科医生!科大讯飞黑科技大秀十三发自凹非寺量子位报道|公众号QbitAI全球第一款内置AI的图像传感器问世。这就是近日来自索尼的重磅消息:宣布即将发布两款智能视觉传感器——IMX500和IMX501。它们

索尼的传感器:1句话克隆真人语音,AI问诊超96.4%全科医生!科大讯飞黑科技大秀  第1张

索尼的传感器:1句话克隆真人语音,AI问诊超96.4%全科医生!科大讯飞黑科技大秀

十三 发自 凹非寺量子位 报道 | 公众号 QbitAI
全球第一款内置AI的图像传感器问世。
这就是近日来自索尼的重磅消息:
宣布即将发布两款智能视觉传感器——IMX500和IMX501。
它们集成了一个逻辑处理器和存储器,因此每个模组都可以作为一个微型计算机工作。
目前这款传感器已经能够以 1200 万像素捕捉静态图像,支持 4K@60fps 视频拍摄。
IMX500 和 IMX501的出货时间分别为今年4月和6月,税后价格分别为日元(约661元人民币)和日元 (约1323元人民币)。
新款传感器具有如下特点:
像素芯片和逻辑芯片组成的堆叠式结构,在逻辑芯片上配备了AI图像分析和处理功能的图像传感器。像素芯片获取的信号通过传感器上的AI进行处理,无需高性能处理器或外部存储,可助力边缘AI系统的开发。传感器输出元数据(属于图像数据的语义信息)而不是图像信息,从而减少了数据量并保证了隐私安全。此外,AI能够为广泛应用领域提供多样化的功能,例如高速AI处理下进行实时目标跟踪。也可以根据用户的需求或系统,使用位置重新编写内存,来选择不同的AI模型。
据索尼介绍,新发布的图像传感器,极大地拓宽了AI摄像头的研发空间,将有望广泛应用于零售和工业设备行业,并有助于构建与云端连接的优化系统。
首款内置AI图像传感器主要功能
接下来就是IMX500和IMX501的四大主要功能。
具备AI处理功能的图像传感器
像素芯片是背照式进光的,有效像素约为1230万,可以捕捉广阔视角的图像信息。
除了传统的图像传感器操作电路外,其逻辑芯片还配备了索尼原发的DSP,专门用于AI信号处理,并为AI模型存储。
这种配置无需高性能处理器或外部存储,使其成为边缘AI系统的理想选择。
元数据输出
像素芯片采集的信号通过ISP进行处理,并在逻辑芯片的处理层进行AI运算,将提取的信息作为元数据输出,可以减少需要处理的数据量。
同时,不输出图像信息有助于降低安全风险和保证隐私安全。
除了传统图像传感器捕捉的图像外,用户还可以根据自己的需要和用途选择数据输出格式,包括ISP格式输出图像(YUV/RGB)和ROI特定区域提取图像。
高速AI处理
当使用传统的图像传感器录制视频时,需要发送每一帧的视频数据进行AI处理,导致数据传输量大,难以实时呈现结果。
索尼的新款传感器产品在逻辑芯片上进行ISP处理和高速AI运行(处理MobileNet V1只需3.1毫秒),在一个视频帧内完成整个过程。这种设计可以在录制视频的同时保证高精度、实时的目标追踪。
可自由选择AI模型
用户可以将自己选择的AI模型写入嵌入式内存中,并根据其需求或系统使用位置,对其进行改写和更新。
例如,当多个搭载新款传感器的摄像头被安装在零售场所时,某个单一类型的摄像头可以在不同的地点、环境、时间或目的下使用:
当安装在场所入口时,可用于计算访客人数;当安装在商店的货架上时,可以用来检测库存短缺;当安装在天花板上时,它可以用来绘制商店客流的热力图。此外,指定相机中的AI模型可以被改写,从一个用于检测热力图的模型,变成一个用于识别消费者行为的模型。
IMX500/IMX501主要参数
最后,奉上IMX500和IMX501的主要参数。
那么,这样的传感器,猜猜谁会最先用上呢?
举报/反馈

索尼的传感器:盘点索尼9款最新的图像传感器

  索尼除了自己的相机业务之外,也是相机的核心部件——传感器的一大生厂商。
  图像传感器作为摄像头模组的核心部件,广泛应用于智能手机、汽车、安防监控、航空航天等领域。
  虽然我国拥有全球最大的图像传感器市场,然而在高端消费类电子领域的市场份额几乎被索尼和三星占据,两者共占据约7成全球市场。目前索尼以占比49.2%的绝对优势位于霸主地位。
  近日,外媒带来了索尼即将亮相的传感器的总结,这些传感器将会用于索尼自己即将推出的相机,同时也可能会出现在尼康、富士、松下乃至佳能的产品中。
  M4/3传感器
  1、IMX492LQJ
  这款传感器有4700万像素,基于彩色方形像素排列指数,可提供31.3fps的刷新率以及8K视频功能
  2、IMX594CQR
  这款传感器有4100万像素,能够录制4KDCI视频
  APS-C画幅传感器
  3、IMX671AQR
  这款传感器有着4300万像素,支持8K12bit视频录制,而这款传感器在搭载了堆叠式DRAM之后可输出16位色深的静态图片,而这款传感器也有可能亮相于索尼α7000这款微单
  4、IMX510
  这是一款2018年亮相的传感器,有着3200万像素,但暂时还没有关于这款传感器更多的信息。
  全画幅传感器
  5、IMX521CQR
  这块全画幅传感器仅有1530万像素,但其采用了四拜耳技术,最终可以输出6100万像素。此外,这块传感器也支持4K/60P视频录制,也支持HDR功能。索尼α7SIII也预期将搭载这块传感器
  6、IMX311&IMX313
  这两块传感器均为背照式传感器,仅在像素数上有细微差别,但同为4890万级别。这两块传感器均搭载了ActivePixel技术,可以以24张/秒的速度进行图片连拍。
  7、IMX409
  这是一块5500万像素的全画幅传感器,采用了正方形像素排列,最高连拍速度可以达到13.2张/秒
  8、IMX410
  与前文的IMX409相同,IMX410也采用了正方形像素排列,但像素则下降至2460万,这块传感器在全像素读取时可达到19张/秒的连拍速度
  9、IMX554DQC
  这块3000万像素的全画幅传感器也搭载了正方形像素排列技术,在全像素读取时可达到36.6张/秒的图片连拍速度。
  结语:
  根据目前曝光的索尼新款传感器,可以发现索尼图像传感器有明显走向高像素和高速的趋势。
  走向高像素,一方面是为了满足更多用户对于高像素的需求;另一方面则可能是为了满足6K乃至8K视频的拍摄。
  最后,期待能够尽早看见搭载这些新传感器的相机亮相,让我们的相机性能越发强大。
索尼的传感器:1句话克隆真人语音,AI问诊超96.4%全科医生!科大讯飞黑科技大秀  第2张

索尼的传感器:索尼A6300传感器是什么?索尼A6300传感器尺寸是多少?

索尼A6300传感器是什么
  索尼A6300传感器是Exmor CMOS sensor。
  针对索尼A6300传感器是什么的问题,A6300具备出色的4D对焦性能,其对焦速度快至约0.05秒*1,拥有几乎覆盖整个取景范围的425个相位检测对焦点。A6300的约2420万像素APS-C画幅Exmor CMOS影像传感器配合BIONZX影像处理器,在ISO 100-ISO*2的感光度范围内具备高画质低噪点的表现。此外, A6300还拥有全像素读取模式的4K视频拍摄功能。
  索尼A6300拍摄的4K视频码流最高达到了100Mbps 。A6300还支持S-Log视频拍摄,提供S-Log 2与S-Log 3曲线,大幅提升了视频拍摄的宽容度,也为用户提供了更多视频后期处理的空间。
  索尼A6300与上一代A6000相比,机身材质有所区别,索尼 A6300采用了镁合金的全金属机身架构,能够防尘防滴,舍弃A6000的塑料材质,让新款的索尼A6300增加不少的逼格,作为最强APS-C微单,实至名归。
索尼A6300传感器尺寸是多少
  索尼A6300传感器尺寸是23.5×15.6mm。
  取景器方面,A6300搭载了236万像素EVF电子取景器,相较于上一代的144万像素而言,提升还是显而易见的;显示屏上,A6300具备一块92.1万像素3.0寸翻转屏,依然没有加入触控设计,这一点倒是符合其专业机型的定位。
  索尼A6300相机的背部依然采用了3寸的翻折屏幕设计,在背部的按键位置与上一代相比,按键位置有所改变,增加了AF/AE锁按键,视频拍摄键依然在右手把手位置上。
  索尼A6300传感器是什么的问题总结。A6300虽然在像素方面没有提升,但在高感能力上则有了改进,之前A6000的感光度范围为ISO 100-,而A6300的感光度最高可扩展至ISO ,在夜间拍摄时有一定的优势。
索尼的传感器:1句话克隆真人语音,AI问诊超96.4%全科医生!科大讯飞黑科技大秀  第3张

索尼的传感器:索尼imx系列的传感器排名如何?

sony的摄像头序号很乱 也缺少介绍 请内行分析一下 谢谢
没想到还有催更的朋友们,好感动,感谢支持。IMX766已更新,后续有新的传感器也会持续更新的。
快百赞了,到了百赞我就把手机端使用的IMX传感器排名升级为主流厂家在移动端传感器的盘点和粗略排名,以此感谢你们的支持与喜欢呀,大家有什么问题随时都可以像我提问,发现我的问题也欢迎指正,我们一起共同进步呢
-----------------------------------------------------------------------------------------------------------------------------------
不知道你说的IMX传感器是手机端(下面)的还是相机端(上面)的,如果是相机的,那就往大底上找;大画幅(Large format)就不说了,大画幅摄影所带来的影像的锐度、颗粒状、影调及质感虽然是其他类型相机没法比拟的,但对于普通民用来说无疑就是高高在上的空中楼阁(大画幅相机的头部厂商基本有富士 尼康 罗敦司得 施耐德 仙娜等厂商),而且在中国,大画幅的普及率并不高;实际上中画幅 全幅或者apsc对于大多数摄影爱好者就完全足够了,所以说就先浅谈一下中画幅足矣);
大画幅相机
大画幅相机样张
中画幅传感器:
IMX411(150M)66.7mm IMX411是目前最强的中画幅传感器(背照式Cmos),支持8k16帧录制;在动态范围和色深上均有较大提升。 代表机型:飞思IQ4 150M
IMX211(100M)66.7mm 尺寸和IMX411相同,单像素面积更大(前照式Cmos)代表机型:哈苏H6D
IMX161和IMX211
手机端的传感器和相机端的传感器大小不是一个级别的,手机端传感器目前没有超过1英寸(二排左三,代表:索尼黑卡系列)的。如下图所示,倒数第三个即IMX600(代表机:华为Nova 6)尺寸,一排左一为全画幅相机传感器尺寸。
从全画幅到1/3.2”大小直观对比图
而从全画幅到更高级别的相机。。。
很直观。。。
图中红框是全画幅传感器的尺寸(即图一中full frame36×24mm的那个,就是第一个),而绿框则是大画幅最小底片的尺寸,对比已经很显著,而手机嘛。。。
言归正传, 手机端IMX系关系基本如下:(因为说要给大家更一个所有手机端优秀sensor的盘点排名,所以我就不严苛的拍123了,大家只要知道越靠前就越优秀就好)
~~夏普 aquos r6 主摄 (20.2M) 1英寸,一英寸大底,供应商不明(应该是索尼),默认1倍时是裁切到24mm焦段,超广角则是19mm焦距的原生焦段。这个大小已经和卡片机一个级别了,aqous r6也是全球首发一英寸大底的手机。
~~ISOCELL GN2(50M) 1/1.12 2021年上半年旗舰传感器,单位像素面积 1.4μm,支持智能 ISO Pro 、Dual Pixel Pro(双像素增强:对一些像素进行对角线隔离,充分利用上/下相位差,帮助手机尤其是在黑暗环境下更好更快的对焦;TETRACELL (四合一技术,每相邻四个个像素用相同滤色器,在弱光环境下四像素合一合成一个大像素,四合一以后等效 1250 万大像素,单像素面积2.8μm),GN2是首款同时搭载Dual Pixel Pro和Tetracell技术的三星传感器。代表机型:小米11Pro、小米11Ultra(因为光圈较小加上小米目前的调教还有待加强所以说目前拍出来的照片还时有翻车,但未来可期ξ( ?>))
IMX689(1/1.43)和GN2实拍对比
~~IMX 700 (50M) 1/1.28 2020年上半年当之无愧的王者,拥有2020年手机传感器中最大的底,RYYB的阵列比拜尔阵列提升了40%的进光量,使其在极限弱光下的表现远好于其它竞品(无论是照片与视频,暗光拍摄的最优解)。采用多合一技术后单像素面积甚至达到了2.8微米,直出12.5M的优势也是较之它家也是较为明显的。而其全像素八核对焦技术也确保了IMX700在对焦速度的碾压性优势,可以说在20年,这是一款趋于完美的sensor。代表机型为:华为 P40 PRO+、华为Mate 40 Pro+等
IMX 700
~~OV48C(48M)1/1.32 OV48C采用Quad Bayer设计,基于PureCel Plus技术打造,是一款搭载DCG HDR 功能,提供4800万像素分辨率、1.2微米像素尺寸、高速度、片上高动态范围的旗舰级手机图像传感器。支持15fps/秒的4800w像素视频 60fps/秒4K视频输出,在各方面都能带来优异的体验。代表机型:小米10 Ultra
OV48C
~~ISOCELL GN1(50M) 1/1.33 与HMX同样的大底,相比于HMX与HM1,主要提升了对焦能力。今年首个在对焦上做出创举的IMX689在获得一致好评后,紧接着的IMX700和GN1就都在对焦上下了大功夫。采用了全像素双核对焦的GN1弥补了SK5HM1的不足,并在像素和单像素面积之间找到了较好的平衡,是一颗非常优秀的传感器。代表机型:Vivo X50+
GN1
~~OV64A (64M) 1/1.34,采用豪威科技的PureCel Plus-S晶片叠加技术,单像素面积达1μm,弱光条件下像素四合一为1600w像素,单像素面积2μm。代表机型:华为Mate 40 e(原生)、荣耀v40(裁切至1/1.56,50M)等
~~ISOCELL HM1(108M) 1/1.33 基于自家Nanocell技术,三星HM1支持了九像素合一的技术,所以默认静态输出1200w像素,比较有效的提升了信噪比。然而这颗传感器最引人注目的还是其108M的分辨率,108M全开的高频信息还原优势是十分明显的,可以带来较为明显的解析力增益。代表机型:三星S20 Ultra 三星note 20 Ultra等(HM1是HMX的升级版,其在多合一技术、对焦速度上有了较大的提升。HMX代表机型:小米cc 9 pro,小米10 pro等
主流优秀传感器一览
~~imx789(52M) 1/1.35,原生16:11比例,力求在拍照(4:3)和视频(16:9)上都能裁切一个合适的尺寸,所以说拍照时其裁切后相当于一个4:3的1/1.43(48M)的sensor,支持拍摄4k 120fps视频,2×2 OCL结构和双原生ISO,单像素尺寸1/1.12 μm,素质极棒。代表机型:1+9 Pro(然鹅1+把这个sensor调的跟屎一样)
~~.IMX 689 (48M) 1/1.43 支持12 bit raw格式,RGB阵列(理论上说进光量没有650大,但是其色准要比650好上不少,支持QPDF对焦,也支持双原生ISO技术),同时支持12bit超精图像采集(对我们用处不大),引领了手机端传感器用先进对焦技术弥补高像素对焦缓慢缺陷的潮流。支持四合一直出1200w,是20年上半年极为优秀的传感器。代表机型:OPPO find x2 Pro、一加8Pro等 (OPPO对这689的调校 要比一加好的多)
IMX689 IMX586及三星GM1三者面积直观对比
IMX 766 (50M) 1/1.56 2×2 OCL结构,支持全像素全向对焦,多合一后单像素面积达到1.0μm,实力尚可。绿厂有独占期,766作为超广角加上自由曲面超广角直接杀疯(find x3系),作为主摄就。。华为p50p也使用了766作为主摄,加上一颗黑白摄像头辅助成像,这次主打计算光学,所以极其能打,比同样采用766当主摄的一众绿厂机型强了太多,所以766看调校,总的来说不错,但是自身素质还是无法跻身顶尖之列。
~~IMX 608(40M) 1/1.54 支持像素16合一,单像素面积甚至可达了4.48μm!作为超广角端sensor,它还支持QPAF对焦(全像素四核) ,对于视频录制来说,IMX608的独特长宽比例使其在与同等大小的传感器对比时更具优势,可以通过更少的裁切以获得更好的画质。代表机型:华为Mate30 Pro(超广)、华为p40 PRO(超广)等
HUAWEI P40 Pro 摄像模组
~~ IMX 650(40M) 1/1.73 又名 IMX600RYYB(┯_┯)华为夜拍颠覆友商的开始,在夜拍场景下对友商进行了降维打击。是华为对未来手机摄影理念探索的具象表达,就像当年华为说的那样:Rewrite The Rules;它是首款采用RYYB阵列的sensor,代表了了华为手机摄影未来发展的方向(如今,华为不仅在主摄采用ryyb排列,就连长焦也使用上了这一技术)可以说,对RYYB技术的掌握和调校的能力是华为手机领域除麒麟之外的又一技术壁垒。代表机型:华为MATE 30 Pro、荣耀 V30 Pro等
RYYB排列相比传统拜耳阵列有40%的进光量优势
~~IMX 555(12M)1/1.76 单像素1.8μm,RGGB,感觉上三星为了抬高HMX没有对这颗传感器作更多的算法调优,不过这并不能掩盖555的优秀事实,看看单像素面积就知道了,我个人觉得108M真的是方向错了(hmx的4k视频拍摄一塌糊涂,色温和对焦都跟不上),imx 555的设计才比较合理。代表机型:三星s20+
18、19主流传感器一览
~~.IMX 600 (40M) 1/1.73 一款经典的sensor(拜耳阵列),帮助华为在影像方面打遍2018无敌手,2018没有争议的王者,它的领跑开启了新一轮的相机军备竞赛。也是它让华为在手机摄影领域一战封神。代表机型:华为p20 Pro,华为mate 20 Pro(18神机!)等
P20搭载IMX380 P20 Pro搭载IMX600
~~IMX686 /(682)(64M) 1/1.79 682是686的缩水版,但这两个照相性能不会相差太远,所以说把他们列到一个里面了,代表机型:红米K30 Pro、魅族17、魅族18等
IMX600 RYYB和IMX686的对比
~~.IMX 586/(582) (48M)1/2 国家统一分配的sensor,即使到了20年,也依旧有新机搭载(并非全是放在主摄上)(586和582的区别:586最高支持4k60帧视频录制,同时支持3-HDR技术,而582则只支持4k30帧的视频录制,高动态范围也是靠算法实现,在其他方面二者没什么区别)。 代表机型:一加7 Pro、小米9、华为Nova5等
Sony放出的IMX 586图样
实际上我个人,非常不赞同为这些硬件排名,我认为比硬件更重要的是这些硬件发布时带给我们的震撼与冲击,强大不代表着经典,但经典一定很强大;想想lumia 1020 808。。。
Lumia 1020
。。。硬件发烧友们,追求的是硬件发布之前那份期待,需要的是发布会上新品带来的惊喜,享受的是拥有它们时的满意;这些,是发烧友们追逐硬件时的不竭动力,而发烧友们脸上由衷的笑容,则是对硬件开发者最大的鼓励。
手机样张示例
硬件之间的熟强熟弱,并不是冰冷的参数可以表达的。若想拍出世间的精彩,就要是提升自己的摄影技术;为什么手机样片摄影师拍的和我们拿手机拍的相去甚远?手机厂商样张摄影师拍出来的高质量画面是得益于样张摄影师多年的摄影积淀而非其手中的硬件,在他们手里,一台过时的相机亦或是手机都可以记录人世间美好的瞬间。
经典中的经典
摄影设备的好坏是决定不了一切的,最好的设备拍不出最优的画面,好到极限的照片之上限依旧是人。多年前的大师们,他们拍出的那些惊艳世界的照片时用的就是那些今天我们眼中不入流的古董(举个例子可能略夸张),决定一张照片好坏的不是照片的细节的多少,而是照片中所拍之人之物之景,在拍摄者心中的价值以及拍摄者对这张照片倾注的情感,美从来不需要用参数去决定,欣赏美的从来都是人,有着热诚之心的人们。

您可能感兴趣的文章

本文地址:https://www.ceomba.cn/1477.html
文章标签: ,   ,  
版权声明:本文为原创文章,版权归 ceomba 所有,欢迎分享本文,转载请保留出处!

文件下载

老薛主机终身7折优惠码boke112

上一篇:
下一篇:

评论已关闭!