刘品
学以致用---博主简介:专注语音、视频数字信号处理方面的研究以及算法在手机平台上面的移植和优化。涉及语音/音频编解码,语音增强,语音识别,语音音质客观评估,VOIP语音引擎 Qos算法模块和声音变速不变调和变调不变速等功能实现。熟悉ARM 各个系列的CPU,用ARMv4,ARMv5,ARMv6 and Cortex Neon 汇编优化相关算法代码,争取perforamance 最优。目前主要Windows mobile and Android platform上做相关speech/audio算法以及应用开发, HEVC 编解码器PC 和手机上的开发与应用。(交流Email:liupin.2008@gmail.com)
2

  1月20日,据AppleInsider网站报道,美国专利商标局(USPTO)上周公布了苹果最初在2012年申请的一项专利技术,它能以预录或修改的图像取代某些视频帧,从而解决FaceTime在网络带宽不理想时出现的漏帧和画质不佳等问题,带给用户以更流畅的视频聊天体验。

  如今在很多地方,iPhone和iPad用户通过移动无线网络进行视频聊天时常常受到带宽和现有技术的限制,而遭遇漏帧和画质变差等问题,严重时几乎无法正常交流。

  苹果申请的这项旨在解决上述问题的专利名为“采用基于内容的帧搜索的视频传输”,它能利用之前已经传输的视频帧和“视频帧包含的内容信息”,来减少视频通话双方设备之间传输的数据量,具体方法主要有以下三种:

  第一,也是最主要的方法,是捕捉视频帧中一些标志性的信息点(如五官特征)并建立相应的“系数”,然后生成可以根据这些系数搜索和调取视频帧的数据库。当带宽足够时,完整画面以及相应的信息系数可以被发送和储存;当带宽较低时,设备可以进行运算并发送一系列信息系数来取代视频帧;当网络差到开始漏帧时,系统就开始利用信息系数在先前保存的视频数据中寻找相似的画面,然后调取并显示最匹配的画面来替代漏掉的视频帧。

  第二,可以利用生成的视频帧信息系数自动修改此前录制的视频帧图像,再将修改过的图像插入到视频信息流中的漏帧处。

  第三,被视为背景的物体能以比主体更低的分辨率传输,例如人脸的分辨率更高而背后的墙的分辨率更低。

  上述技术除了能够提高视频聊天的质量,还能减少对数据流量的消耗。即便每三帧中插入根据信息系数调取或修改而成的一帧,所减少的数据流量也是相当可观的。

  目前尚不知这项专利将来会否应用到苹果的产品中,但是如今高清摄像头越来越普及而移动数据成本依然较高,这种功能对于经常用FaceTime进行视频聊天的iOS用户还是相当实用的。

转自: http://it.sohu.com/20140120/n393822741.shtml

 

 

posted on 2014-01-21 11:27  liupin  阅读(1028)  评论(0编辑  收藏  举报

-->