您好,欢迎访问海腾顺达!

客户服务热线:010-62623528

海腾顺达http://www.htsdic.com.cn

热门搜索:电源管理数字信号处理器(DSP)常备现货库存ADI系列XILINX系列高速运放低功耗运放精密运放

当前位置:首页 » 资讯中心 » 公司新闻 » 双摄像头应用算法厂商屈指可数 多方合作需授权成难点

双摄像头应用算法厂商屈指可数 多方合作需授权成难点

文章出处:责任编辑:作者:人气:-发表时间:2016-06-16 09:29

双摄像头如果要体现出其优势,则势必需要双路ISP与应用算法的双重结合,应用算法在双摄像头中的主要作用是将单个摄像头所拍摄的两张图像合成为一张。据了解,目前应用算法企业并不多,除了上述的高通、MTK以外,还有就是ArcSoft、Cores Photonics、舜宇光学及LINX(已在2015年被苹果收购),算法企业的缺乏在很大程度上限制了产业的发展,其次,最为重要的是多方合作的问题。

  据索喜科技(上海)有限公司高级市场经理路标介绍,双摄像头的应用也是多种多样的。总的来说,目前常见的有三种,一种是通过一个彩色,一个黑白的sensor的配置来提升低照度的效果;一种是通过使用两个按一定摆放方式的摄像头来抓取目标物体的景深信息;一种是通过双摄的方式实现光学变焦镜头的效果。三种方式目前索喜都有已开发的算法,尤其是在景深的算法上,无论是反应时间还是得到的景深信息的精度方面,都索喜科技的优势很明显。

  此外,高通同样在开发算法上进行了巨大的投入,以改善拍照体验。为了实现这一目标,高通集结了一群工程师在专注于这项任务。高通支持的算法能覆盖所有的成像环节。例如,其有优化所有不同自动对焦技术的算法,从激光自动对焦(AF)到相位检测自动对焦(PDAF),并确保这些前沿的自动对焦技术会根据我们的混合自动对焦框架实现优化。得益于其内部算法,高通已帮助不少商用终端成功部署了混合自动对焦框架,例如一加手机2、乐视超级手机Max Pro、小米手机5和红米Note 3全网通版等。

  值得一提的是弱光视频(LLV)和拍照(LLP)的增强特性。据高通产品市场总监王宇飞强调,借助LLV和LLP,高通已经开发出了算法,以帮助提升弱光环境下的成像效果。它能自适应地提亮太暗照片和视频区域,同时在曝光不足的区域高效降噪。在支持双摄像头方面,高通已开发出算法,支持图像融合和深度图创建。这样,消费者无需携带数码单反相机(DSLR),就能够体验不同焦距的“背景虚化”特效(聚焦在照片的不同部分)。

  上海芯兴微电子科技有限公司总经理周宇对笔者称:“兴芯微通过和业内顶尖的算法公司的合作,通过顶层软件与底层ISP的配合实现了一整套的深度图获取方案,通过这种高精度的深度图获取,可以实现三维建模、背景虚化等优秀的影像效果。还能通过内建的立体标定方案提升双摄模组的良率,为模组厂商提供一整套的良率提升方案。”同样,索喜科技也在和相应的算法公司不断深入接触,完成方案的调试和整合。

  此外,据笔者了解到,除了算法企业不多之外,算法在实现的过程中同样存在难点,据周宇介绍,以双摄效果最为常见的深度图获取为例:首先,需要对双摄模组进行立体标定,获得双摄模组光轴以及光学中心的三维坐标以及旋转偏移角度并矫正模组自身的畸变和旋转;其次,利用获得的两幅标定后的图像进行配准,将视场不同的两幅图像进行“拼接”,包括关键点的识别与匹配以及一些遮挡、透视场景的处理等;最后,利用匹配的两幅图像通过三角关系进行深度信息的获取和融合,才能得到一副完整、高精度的深度图像。

  他强调:“对于算法实现的难度,可以说双摄的每一个部分都有极高的技术含量。立体标定方面,需要具备模组制造工艺的了解以及对多达十几项参数的获取与矫正;配准方面,需要快速的找到两幅图像的匹配点并处理好遮挡、透视场景的处理,保证算法的稳定;最后,如何在如此巨大的运算量下实现实时的深度获取将会是一个非常巨大的挑战。”

  除了在技术方面的难点之外,还有就是合作问题,这同样是一个非常大的难点。上文中提到目前算法企业并不多,更为严重的是,如果采用第三方公司的算法,则首先需要算法公司、手机公司、模组厂定义好双摄像头规格,然后把双摄像头交给平台商做单颗摄像头的驱动调试和效果调试,同时完成两颗摄像头的同步;再交给算法公司做双摄像头算法调试和植入;对平台商企业而言,还要把自家的ISP(图形信号处理器)授权给第三方算法公司,在这个过程中,合作将会是一个很大的困难。

  据周宇称,一个好的双摄效果必然是一个完整的系统的工程,它需要模组厂、算法公司以及手机公司的紧密配合才能够实现,这是一项非常庞大的工程。做好双摄像头需要三个公司去进行这个“规格”的定义,而规格定义这件事本身就会是一件非常具有难度的工程,毕竟图像并不存在一个像通信的3GPP一样的标准组织,没有一个大家认可的统一的规范和协议。而如果需要达到良好的效果,进行紧密的协同与合作又必须要有这样的规格。

  那么,这个规格谁来定?怎么定?怎样确定这样的制定是否合理?这将会是一个非常巨大的工程。在这点上,具有整个产业整合能力的巨头公司会有非常大的优势,因为它们有资源、有能力去影响和整合三方资源,为最终的优秀效果负责。

  所以不难看出,合作将会成为双摄像头市场的一大难点,除了高通、MTK等拥有自家算法的企业以外,如索喜科技、芯兴微都在与第三方算法公司展开紧密合作,合作的强度直接决定了最终产品性能的高低,在此过程中“互相信任”的重要性则不言而喻。对于ISP厂商而言,如何博取算法公司的厚爱也是一个考验。此外,平台商还需要向算法公司释放调试授权,想必这也是如高通、MTK要自己做算法及苹果收购LINX的原因所在。

  整体而言,双摄像头市场虽然在今年得到了广泛关注,不少企业已经针对双摄像头市场推出了相关的双路ISP,但是其发展并不是十分顺利,其中原因包括ISP的不可或缺性以及产业链的多方合作,在ISP方面,由于其研发难度大目前国内的ISP供应商并不多;算法在双摄像头中更是重中之重,除了技术难点以外,产业链的多方合作过程中的“授权”问题可能会成为阻碍产业链发展的主要障碍,这点从苹果、高通、华为海思在自家高端处理器中集成自家的ISP就可以看出。

此文关键字:芯片,半导体,电子元器件,放大器,线性器件,制冷片,DSP,IC

相关资讯