Windows也能接受苹果手机投屏了!(解决投屏成功后,PC端没有声音)
AI 生成声明:本文内容由 AI 生成或经 AI 辅助完成,请注意甄别。
在 https://github.com/VampireQW/jianjie 下载了项目代码,成功跑起来,连接IOS投屏成功,但没有声音,多次调试后,终于解决。
以下为处理过程。
iPhone 用屏幕镜像投到 Windows,画面一直在动,电脑上其它声音也正常,只有投屏这一路是静的。手机上写着「已连接 AirPlay,已静音播放」。
这句话容易看反。它的意思是手机扬声器已经把输出让给 AirPlay,不是手机把声音关掉了。镜像音频走的是和画面同一套局域网里的 UDP,不走蓝牙。蓝牙只负责另一条「电脑控制」通道。
这次真正读到声音,是改完 recvfrom 的地址长度之后。改之前,接收线程两秒里对同一个套接字失败上百万次,错误码一直是 10014(WSAEFAULT)。
先看包,再看音量
镜像建立后,接收器日志里能看到音频流已经谈妥:ct=8、spf=480、AAC-ELD 44100/2。这是屏幕镜像用的 AAC-ELD,不是单独听歌时的 ALAC。
可播放的声音帧计数却是 0。开头只有一个 16 字节的空包(12 字节 RTP 头加 4 字节 no-data 标记 00 68 34 00),后面不再增长。视频包同一时段已经有一百多个。
所以当时不是「解码了但扬声器没响」,而是声音端口上的后续数据报没有被读出来。音量滑块、静音勾选、换播放设备,都解释不了这件事。
有一个相邻但独立的问题值得单独记住:Windows 共享模式的 WASAPI 不接受 44100。扬声器的混合格式是 48000 Hz、32 位浮点、立体声、声道掩码 0x3。管线里要先重采样,并带上 channel-mask,否则会出现 The stream is in the wrong format。用同样的 caps 放一段测试音,峰值能到接近 1。这次静音发生时,真正的 AAC 帧还没进解码器,所以它不是这一次没声音的原因。
错误码 10014 是怎么来的
音频线程对声音套接字调用的是「不需要对方地址」的接收:源地址和长度指针都传 NULL。落到 Windows 的回退路径时,原来的代码是:
ssize_t kernel_timestamp_session_recv(..., void *src_addr, int *addrlen, ...)
{
int n = recvfrom(sock, buf, (int)buf_len, 0,
(struct sockaddr *)src_addr,
(socklen_t *)&addrlen);
return n;
}
addrlen 已经是 int *。再写 &addrlen,取到的是这个指针变量自己在栈上的地址,不是调用者给出的长度。
调用者传入 NULL, NULL 时:
from是NULLfromlen却不是NULL,它指向栈上那个值为 0 的指针槽
Winsock 规定:from 为 NULL 时,fromlen 也必须为 NULL。否则 recvfrom 返回 SOCKET_ERROR,WSAGetLastError() 是 WSAEFAULT(10014),并且不把数据报从队列里拿走。
select 仍然认为套接字可读。线程马上再读,再次 10014,再循环。实测大约两秒内,控制口和声音口各自失败了一百多万次。队列里的 AAC 包一直堆着,计数停在第一个 16 字节空包上。
为什么恰好能读到第一个包?第一条路径走的是 WSARecvMsg。网卡没有打开软件时间戳时,这次接收成功后会关掉该路径,后面全部落到上面的 recvfrom。所以现象是:同步和第一个空包都出现了,随后线程空转,真包一个都进不了解码器。
改法
没有地址就让 fromlen 也是 NULL。有地址时,用一块真正的 socklen_t 承接长度,读完再写回调用者。
socklen_t fromlen = 0;
socklen_t *fromlen_ptr = NULL;
if (src_addr && addrlen) {
fromlen = (socklen_t)*addrlen;
fromlen_ptr = &fromlen;
}
int n = recvfrom(sock, buf, (int)buf_len, 0,
(struct sockaddr *)src_addr, fromlen_ptr);
if (n >= 0 && addrlen && fromlen_ptr)
*addrlen = (int)fromlen;
改完之后,同一条连接上真包从 0 增到 5000 以上,单包长度大约 340 到 530 字节,控制口和声音口的读失败都是 0,电脑扬声器出声。
旁边那个 unsigned 的坑
修这个指针之前,还遇到过另一个 Windows UDP 的老问题,它会制造大量假日志,但不是这次静音的根因。
recv / recvfrom 失败时返回 -1。如果把返回值赋给 unsigned int,-1 变成 4294967295。长度判断 packetlen >= 20 会通过,程序拿套接字缓冲区里残留的字节去解析时钟同步包。默认开启 SIO_UDP_CONNRESET 时,ICMP 端口不可达会让后续 recv 返回 WSAECONNRESET,于是这种假同步可以每秒出现几百次,音频时钟被写成 0。
两处都要守住:
- 用
ssize_t保存返回值,小于 0 就丢弃这次读取,不要拿去解析。 - 对只收不发、或会收到 ICMP 不可达的 UDP 套接字,用
SIO_UDP_CONNRESET关掉这种上报,避免数据报被错误吞掉。
只修这两处时,假同步没有了,声音仍然没有。因为数据报还在,只是 recvfrom 的参数非法,读不出来。
可以带走的判断顺序
- 手机写「已连接 AirPlay,已静音播放」,说明输出已经交给接收端。先数接收端的 UDP 包,不要先调手机音量。
- 画面在、音频 SETUP 也完成了,但可解码帧数是 0:问题在收包,不在 GStreamer 音量或扬声器。
select一直可读、recvfrom却马上失败:看WSAGetLastError()。10014 要先核对from和fromlen是不是成对出现。参数本身已经是指针时,不要再取一次地址。- 失败的
recv返回值不要放进无符号长度。它会变成一个「合法的超大包」。 - 共享模式播放还要匹配端点的混合格式。那是下一关,只有包真的被读出来之后才轮到它。
如果本文吸引了你,为你带来了灵感,帮助,麻烦你轻轻点击【推荐】,
你的热心评论,推荐,是我分享文章的强大动力之一。谢谢阅读!
作者:CatcherX
主页:http://catcherX.cnblogs.com
关于我:热爱IT技术、擅于用技术解决实际应用问题,目前专攻Web,网络应用开发。
.Net平台下的ASP.NET MVC;
WinForm(CS端管理系统、数据采集分析、网络应用)开发工作;
熟悉数据库SqlServer开发,Oracle管理技术;
前端Html,Css,JavaScript,Ajax;
涉猎网络安全,运维,电工基础;闲谈文学艺术。
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接。
或邮件:CatcherXue(at)hotmail(dot)com
联系我,非常感谢。

浙公网安备 33010602011771号