谈谈音频开发

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

摘要: 前面的博客里说过最近几个月我从传统语音(语音通信)切到了智能语音(语音识别)。刚开始是学语音识别领域的基础知识,学了后把自己学到的写了PPT给组内同学做了presentation(语音识别传统方法(GMM+HMM+NGRAM)概述)。一段时间后老板就布置了具体任务:在我们公司自己的ARM芯片上基于k 阅读全文
posted @ 2019-09-09 08:21 davidtym 阅读(10138) 评论(6) 推荐(9)

摘要: 又被“过运营商语音认证”虐了一回!虐的伤痕累累、疲惫不堪!过程是痛苦的,但结果是美好的,收获也是挺多的!既然用了“又”,那以前肯定被虐过。是的,没错。那是7年多前(2011年底),同样是在秋冬,不过一个是2011年底,一个是2018年底。同样是在芯片公司, 不过一个是老牌外企,一个是本土新秀。当时我 阅读全文
posted @ 2019-01-21 07:45 davidtym 阅读(3451) 评论(1) 推荐(8)

摘要: 本人从事音频软件开发10+年,既开发过voice相关的,又开发过music相关的,但大多数还是开发voice相关的。掐指一算到现在在通信终端上开发过的语音解决方案共有五套,它们既有有线通信的,又有无线通信的;既有在上层开发的,又有在底层开发的;既有在ARM上开发的,又有在DSP上开发的,总之各有特色 阅读全文
posted @ 2018-05-08 21:14 davidtym 阅读(10732) 评论(9) 推荐(21)

2025年10月23日

摘要: 智能手机上打电话时通常会支持在扬声器和听筒以及蓝牙耳机之间的动态音频设备切换。我开发过的一款手表也有这样的功能,只不过由于是手表,没有了听筒,动态音频设备切换就变成了在扬声器以及蓝牙耳机之间了。本文就讲讲这款手表上动态切换音频设备是怎么做的。 1, 手表SoC硬件框图 这款智能手表的SoC为了降成本 阅读全文
posted @ 2025-10-23 08:20 davidtym 阅读(132) 评论(0) 推荐(0)

2025年9月22日

摘要: 蓝牙(bluetooth, BT)技术的一个典型应用领域是音频,两者相结合,产生了蓝牙无线耳机等非常普及且受欢迎的产品。我是做音频的,目前主要做智能手机和手表上audio DSP的音频软件开发。开发的产品都会涉及到蓝牙相关的功能,如打蓝牙电话和听蓝牙音乐等。本文就讲讲手机手表上音频里的蓝牙那点事。工 阅读全文
posted @ 2025-09-22 08:19 davidtym 阅读(432) 评论(0) 推荐(2)

2025年7月3日

摘要: 智能手机(或智能手表)等用电池的电子设备对功耗比较敏感,因此不管是使用中还是待机时都要做低功耗处理来省电。前面的文章(智能手表音乐播放功耗的优化)讲了一款智能手表在播放音乐时的低功耗优化,这属于音频场景使用中的低功耗处理,智能手机上的处理也类似。本文讲讲没有音频场景使用时Audio DSP(下文简称 阅读全文
posted @ 2025-07-03 08:12 davidtym 阅读(329) 评论(0) 推荐(0)

2025年4月23日

摘要: 基于安卓平台的智能手机芯片回来后要做bringup。首先是负责平台的把安卓OS起来,然后就轮到各功能模块做bringup了,Audio是其中主要功能模块之一。Audio由于场景多和牵涉到的core多,bringup工作会多些。本人曾多次做过智能手机和智能手表上audio 的bringup,主要负责a 阅读全文
posted @ 2025-04-23 08:06 davidtym 阅读(396) 评论(0) 推荐(0)

2025年4月8日

摘要: 在智能手机或智能手表等SoC上通常有一块专门的audio DSP(简称ADSP)来做音频处理。要做音频处理,ADSP首先要被boot起来。本文以CEVA BX2为例来讲讲ADSP的boot过程。 在上篇文章(Audio DSP 链接脚本文件解析)里讲过链接脚本里用关键字ENTRY来设定程序的入口,且 阅读全文
posted @ 2025-04-08 08:33 davidtym 阅读(327) 评论(0) 推荐(1)

2025年3月26日

摘要: 上篇文章(智能手表音乐播放功耗的优化)讲了怎么优化音乐场景下的功耗,其中第二点是优化memory的布局。那么在哪里优化memory的布局呢?就是在本文要讲的链接脚本(ld)文件里。作为audio DSP 软件工程师,ld文件要能看懂和会修改。作为程序来说,先编译后链接。编译得到目标文件,链接就是把这 阅读全文
posted @ 2025-03-26 07:48 davidtym 阅读(369) 评论(0) 推荐(1)

2025年3月12日

摘要: 对于智能手机/手表等设备来说,续航能力/功耗是其重要的指标之一。要想有好的续航能力,一定要把主要应用场景下的功耗优化好。音乐播放就是主要的应用场景之一。本文就讲讲我开发的一款智能手表上音乐播放场景下是怎么做功耗优化的。 功耗优化一定程度上与硬件相关,因此先给出这款智能手表跟音乐播放相关的硬件框图,如 阅读全文
posted @ 2025-03-12 07:38 davidtym 阅读(580) 评论(1) 推荐(4)

2024年10月28日

摘要: 通常芯片设计公司(比如QUALCOMM)把芯片设计好后交由芯片制造商(比如台积电)去生产,俗称流片。芯片设计公司由ASIC部门负责设计芯片。ASIC设计的芯片只有经过充分的验证(这里说的验证是FPGA(现场可编程门阵列)原型验证, 通过将RTL移植到FPGA来验证)才能去流片。因为流片费用昂贵,如果 阅读全文
posted @ 2024-10-28 07:58 davidtym 阅读(514) 评论(0) 推荐(1)

2024年7月9日

摘要: 在audio DSP中, 软件的code和data主要放在3种不同的memory上,分别是片内的ITCM、DTCM和片外的memory(比如DDR)上。ITCM只能放code,DTCM只能放data,片外的memory既能放code也能放data。在写代码时要规划好哪些放片内,哪些放片外。上面说的这 阅读全文
posted @ 2024-07-09 08:39 davidtym 阅读(298) 评论(0) 推荐(0)

2024年3月21日

摘要: 最近在做蓝牙的宽带语音通话。相对于蓝牙窄带语音,主要变化是把采样率从8k变到16k,以及编解码器从CVSD变成mSBC(modified SBC,改进的SBC)等。蓝牙语音通话相关的HFP(Hand Free Profile)强烈建议在宽带语音通话时要用上语音丢包补偿(packet lost con 阅读全文
posted @ 2024-03-21 12:28 davidtym 阅读(372) 评论(0) 推荐(1)