Rockchip RK3399

您所在的位置:网站首页 数字音频hdmi驱动程序 Rockchip RK3399

Rockchip RK3399

2024-07-13 04:37| 来源: 网络整理| 查看: 265

----------------------------------------------------------------------------------------------------------------------------

开发板 :NanoPC-T4开发板eMMC :16GBLPDDR3 :4GB显示屏 :15.6英寸HDMI接口显示屏u-boot :2023.04linux   :6.3----------------------------------------------------------------------------------------------------------------------------

在前面的章节我们已经介绍了machine驱动(simple-audio-card)、platform驱动(i2s)、以及codec驱动(Realtek ALC5651),并测试了通过耳机进行音频的输出。

如果我们想通过HDMI接口进行音频输出的话,我们应该怎么做呢?

我们知道音频驱动主要由三部分组成、machine、platform、codec,这里我们仅仅是更换了codec,将ALC5651更换为了HDMI,其他的并没有什么变化,因此我们只需要进行少量的调整就可以实现通过HDMI进行音频的输出。

一、I2S2接口

我们在Rockchip RK3399 - ALC5651 & I2S基础说过RK3399的I2S2模块,其连接到HDMI和DP的音频接口,支持8通道音频数据传输。

I2S2与HDMI连接(这些引脚没有对外暴露,所以是看不到的):

引脚引脚(I2S2) 方向 功能引脚(HDMI) 方向 I2S2_SCLK_OUT O ii2sclk I I2S2_TX_LRCK_OUT O ii2slrclk I I2S2_8CH_SDO[3:0] O ii2sdata[3:0] I

I2S2与DP连接(这些引脚没有对外暴露,所以是看不到的):

引脚引脚(I2S2) 方向 功能引脚(DP) 方向 I2S2_SCLK_OUT O source_i2s_clk I I2S2_TX_LRCK_OUT O source_i2s_ws I I2S2_8CH_SDO[3:0] O source_i2s_data[3:0] I 二、设备树配置 2.1 hdmi_sound设备节点

在arch/arm64/boot/dts/rockchip/rk3399.dtsi文件根节点下已经定义了hdmi_sound设备节点:

hdmi_sound: hdmi-sound { compatible = "simple-audio-card"; simple-audio-card,format = "i2s"; simple-audio-card,mclk-fs = ; simple-audio-card,name = "hdmi-sound"; status = "disabled"; simple-audio-card,cpu { sound-dai = ; }; simple-audio-card,codec { sound-dai = ; }; };

(1) compatible:指定设备驱动程序的兼容性,即告诉内核该设备可以被哪些驱动程序所使用;

(2) simple-audio-card,format:指定数字音频接口格式为“I2S”,即使用I2S接口传输音频数据;

此外还支持的数字音频接口格式有:right_j、left_j、dsp_a、dsp_b、ac97、pdm、msb、lsb。

(3) simple-audio-card,mclk-fs:指定主时钟频率MCLK与采样频率之前的比值,例如256表示主时钟频率为系统频率的256倍;

(4) simple-audio-card,name:指定声卡的名称为“hdmi-sound”;

(5) status:指定设备状态为“禁止”,表示该设备状态为禁止运行;

(6) simple-audio-card,cpu:指定cpu接入音频编解码的dai;这里配置为&i2s2,即i2s2设备节点的句柄;

(7) simple-audio-card,codec:指定编解码音频接入cpu的dai;这里配置为&hdmi,即hdmi设备节点的句柄;

我们需要在arch/arm64/boot/dts/rockchip/rk3399-evb.dts文件添加如下属性,启用machine驱动:

&hdmi_sound{ status = "okay"; }; 2.2 hdmi设备节点

在arch/arm64/boot/dts/rockchip/rk3399.dtsi文件根节点下已经定义了hdmi设备节点:

hdmi: hdmi@ff940000 { compatible = "rockchip,rk3399-dw-hdmi"; reg = ; interrupts = ; clocks = , , , , ; clock-names = "iahb", "isfr", "cec", "grf", "ref"; power-domains = ; reg-io-width = ; rockchip,grf = ; #sound-dai-cells = ; status = "disabled"; ports { hdmi_in: port { #address-cells = ; #size-cells = ; hdmi_in_vopb: endpoint@0 { reg = ; remote-endpoint = ; }; hdmi_in_vopl: endpoint@1 { reg = ; remote-endpoint = ; }; }; }; };

关于HDMI设备节点各个属性等我们后面单独介绍。

我们需要在arch/arm64/boot/dts/rockchip/rk3399-evb.dts文件添加如下属性,启用hdmi驱动:

&hdmi { ddc-i2c-bus = ; pinctrl-names = "default"; pinctrl-0 = ; status = "okay"; }; 2.3 i2s2设备节点

在arch/arm64/boot/dts/rockchip/rk3399.dtsi文件根节点下已经定义了i2s2设备节点:

i2s2: i2s@ff8a0000 { compatible = "rockchip,rk3399-i2s", "rockchip,rk3066-i2s"; reg = ; interrupts = ; dmas = , ; dma-names = "tx", "rx"; clock-names = "i2s_clk", "i2s_hclk"; clocks = , ; power-domains = ; #sound-dai-cells = ; status = "disabled"; };

这是Rockchip RK3399中I2S2设备节点描述。它包括以下属性:

compatible:指定设备驱动程序的兼容性,即告诉内核该设备可以被哪些驱动程序所使用; reg:指定I2S0控制器的基地址和地址空间大小,从0xff8a0000到0xff8a1000共有0x1000个字节的寄存器空间,其中0xff8a0000为I2S2寄存器基地址; interrupts:指定I2S控制器的中断号为GIC_SPI 41,并且取值方式为IRQ_TYPE_LEVEL_HIGH,意味着中断信号为高电平触发; dmas:指定数据传输时使用的DMA控制器,第一个表示tx数据使用的DMA控制器,第二个表示rx数据使用的DMA控制器; dma-names:分别对应"tx"和"rx"的DMA名称; clock-names:指定时钟名称,"i2s_clk"表示I2S0控制器时钟,"i2s_hclk" 表示I2S总线时钟; clocks:i2s_clk时钟来自SCLK_I2S2_8CH,i2s_hclk时钟来自HCLK_I2S2_8CH; power-domains:指定设备隶属于的电源域,这里是 RK3399_PD_SDIOAUDIO; #sound-dai-cells:表示定义这个节点的sound DAI数据单元格的数量,这里为0表示没有单元格; status:表示设备状态,这里 "disabled" 表示该设备当前是禁用状态;

我们需要在arch/arm64/boot/dts/rockchip/rk3399-evb.dts文件添加如下属性,启用platform驱动:

&i2s2 { status = "okay"; }; 三、内核配置  3.1 内核配置 3.1.1 HDMI配置

在linux内核根目录下执行make menuconfig配置以下选项:

Device Drivers ---> Graphics support ---> [*] Direct Rendering Manager (XFree86 4.1.0 and higher DRI support) ---> [*] DRM Support for Rockchip Display Interface Bridges ---> [*] Synopsys Designware I2S Audio interface # 对应DRM_DW_HDMI_I2S_AUDIO

确保编译配置里有HDMI相关配置,如果缺少了自己补上:

CONFIG_DRM=y #必须 CONFIG_DRM_ROCKCHIP=y #必须 CONFIG_ROCKCHIP_DW_HDMI=y #必须 CONFIG_ROCKCHIP_INNO_HDMI=y CONFIG_DRM_PANEL_SIMPLE=y #必须 CONFIG_DRM_DW_HDMI_I2S_AUDIO=y #必须 CONFIG_DRM_DW_HDMI_CEC=y 3.1.2 其他

关于I2S、以及simple-audio-card驱动的配置,我们在Rockchip RK3399 - ALC5651音频调试其实已经介绍过了:

Device Drivers ---> Sound card support ---> Advanced Linux Sound Architecture ---> Sequencer support ALSA for SoC audio support ---> ASoC support for Rockchip {*} Rockchip I2S Device Driver ASoC Simple sound card support

确保编译配置里有如下相关配置,如果缺少了自己补上:

CONFIG_SND_SEQUENCER=y CONFIG_SND_SEQ_DUMMY=y CONFIG_SND_HRTIMER=y CONFIG_SND_DYNAMIC_MINORS=y CONFIG_SND_SOC=y CONFIG_SND_SOC_ROCKCHIP=y CONFIG_SND_SOC_ROCKCHIP_I2S=y CONFIG_SND_SIMPLE_CARD=y

配置完内核之后记得保存配置,存档:

root@zhengyang:/work/sambashare/rk3399/linux-6.3# mv rk3399_defconfig ./arch/arm64/configs/

重新配置内核:

root@zhengyang:/work/sambashare/rk3399/linux-6.3# make rk3399_defconfig 3.2 编译内核

在linux内核根目录下执行如下命令进行编译内核:

root@zhengyang:/work/sambashare/rk3399/linux-6.3# make -j8

u-boot-2023.04路径下的mkimage工具拷贝过来,然后在命令行使用mkimage工具编译即可:

root@zhengyang:/work/sambashare/rk3399/linux-6.3# cp ../u-boot-2023.04/tools/mkimage ./ root@zhengyang:/work/sambashare/rk3399/linux-6.3# ./mkimage -f kernel.its kernel.itb 3.3 通过tftp烧录内核

给开发板上电,同时连接上网线,进入uboot命令行。我们将内核拷贝到tftp文件目录:

root@zhengyang:/work/sambashare/rk3399/linux-6.3# cp kernel.itb /work/tftpboot/

接着给开发板上电。通过uboot命令行将kernel.itb下到内存地址0x10000000处:

=> tftp 0x10000000 kernel.itb

通过mmc write命令将内核镜像烧录到eMMC第0x8000个扇区处:

=> mmc erase 0x8000 0xA000 => mmc write 0x10000000 0x8000 0xA000 四、测试  4.1 查看音频设备节点

查看音频设备节点:

root@rk3399:/# ll /dev/snd drwxr-xr-x 2 root root 80 Aug 6 15:04 by-path/ crw-rw---- 1 root audio 116, 4 Aug 6 15:04 controlC0 crw-rw---- 1 root audio 116, 7 Aug 6 15:04 controlC1 crw-rw---- 1 root audio 116, 3 Aug 6 15:04 pcmC0D0c crw-rw---- 1 root audio 116, 2 Aug 6 15:04 pcmC0D0p crw-rw---- 1 root audio 116, 6 Aug 6 15:04 pcmC1D0c crw-rw---- 1 root audio 116, 5 Aug 6 15:04 pcmC1D0p crw-rw---- 1 root audio 116, 1 Aug 6 15:04 seq crw-rw---- 1 root audio 116, 33 Aug 6 15:04 timer

其中:

controlCx:用于声卡的控制,例如通道选择,混音,麦克控制,音量加减,开关等; pcmCxD0c:用于录音的pcm设备; pcmCxD0p:用于播放的pcm设备; seq:音序器; timer:定时器;

C0D0代表的是声卡0中的设备0,pcmC0D0c最后一个c代表capture,pcmC0D0p最后一个p代表playback,这些都是alsa-driver中的命名规则。

从上面的列表可以看出,我里应该是有2个声卡,声卡0/1下各挂了3个设备,根据声卡的实际能力,驱动实际上可以挂载更多种类的设备,我们通常更关心的是pcm和control这两种设备,默认一个声卡对应一个Control设备。

4.2 查看所有声卡

查看所有声卡:

root@rk3399:/# cat /proc/asound/cards 0 [hdmisound ]: simple-card - hdmi-sound hdmi-sound 1 [realtekrt5651co]: simple-card - realtek,rt5651-codec realtek,rt5651-codec

第一个数字为声卡编号,第二个数字为声卡唯一标识,最长16个字符。以声卡编号1为例:

1为声卡编号,realtekrt5651co为ALSA声卡的唯一标识,因为struct snd_card  id字段其长度为16,所以存放的就是realtek,rt5651-codec去除特殊字符之后的的前15个字符。

声卡分两种通道,一种是Capture、一种是Playback。Capture是输入通道,Playback是输出通道;我们以声卡0为例;

root@rk3399:/# ll /proc/asound/card0 -r--r--r-- 1 root root 0 Aug 6 16:43 id dr-xr-xr-x 5 root root 0 Aug 6 16:43 pcm0c/ dr-xr-xr-x 5 root root 0 Aug 6 16:43 pcm0p/ root@rk3399:/# cat /proc/asound/card0/id hdmisound

pcm0p属于声卡0输出通道,pcm0c属于声卡0输入通道。

4.2.1 查看播放设备 root@rk3399:/# aplay -l **** List of PLAYBACK Hardware Devices **** card 0: hdmisound [hdmi-sound], device 0: ff8a0000.i2s-i2s-hifi i2s-hifi-0 [ff8a0000.i2s-i2s-hifi i2s-hifi-0] Subdevices: 1/1 Subdevice #0: subdevice #0 card 1: realtekrt5651co [realtek,rt5651-codec], device 0: ff880000.i2s-rt5651-aif1 rt5651-aif1-0 [ff880000.i2s-rt5651-aif1 rt5651-aif1-0] Subdevices: 1/1 Subdevice #0: subdevice #0

这里看到的ff8a0000.i2s-i2s-hifi i2s-hifi-0为声卡0音频数据链路的名称、ff880000.i2s-rt5651-aif1 rt5651-aif1-0为声卡1音频数据链路的名称。

4.2.2 查看录音设备 root@rk3399:/# arecord -l **** List of CAPTURE Hardware Devices **** card 0: hdmisound [hdmi-sound], device 0: ff8a0000.i2s-i2s-hifi i2s-hifi-0 [ff8a0000.i2s-i2s-hifi i2s-hifi-0] Subdevices: 1/1 Subdevice #0: subdevice #0 card 1: realtekrt5651co [realtek,rt5651-codec], device 0: ff880000.i2s-rt5651-aif1 rt5651-aif1-0 [ff880000.i2s-rt5651-aif1 rt5651-aif1-0] Subdevices: 1/1 Subdevice #0: subdevice #0 4.3 音频播放 4.3.1 播放音频测试

找到一个wav音频文件,播放音频:

root@rk3399:/# cd / root@rk3399:/# aplay AbuduOffice.wav Playing WAVE 'AbuduOffice.mp3' : Signed 16 bit Little Endian, Rate 44100 Hz, Stereo 4.3.2 声卡配置

默认是实使用声卡0进行音频播放的,如果需要更改默认声卡,需要修改/etc/asound.conf文件。

asound.conf配置文件,是alsa-lib的默认配置文件,路径在 /etc/,可以用来配置alsa库的一些附加功能。这个文件不是alsa库运行时所必须的,没有它alsa库也可以正常运行。asound.conf允许对声卡或者设备进行更高级的控制,提供访问alsa-lib中的pcm插件方法,允许你做更多的复杂的控制,比如可以把声卡组合成一个或者多声卡访问多个I/O。

比如我们配置:

defaults.pcm.card 0 defaults.pcm.device 0

名字为default的声卡,指向card 0,也就是hdmisound。

4.3.3 查看I2S2寄存器值

在音频播放时运行如下命令查看I2S2控制器寄存器值:

root@rk3399:~# cat /sys/kernel/debug/regmap/ff8a0000.i2s/registers 00: 0000000f 04: 0000000f 08: 00033f3f 0c: 00000014 10: 000f0110 # 第8位写入0x01,Transmit DMA enabled 14: 01f00000 18: 00000000 1c: 00000003 # 第0位写入0x01,开始TX传输 20: 00000000 24: 00000000 4.3.4 查看时钟

查看所有与i2s2相关的时钟,如下图所示:

root@rk3399:~# cat /sys/kernel/debug/clk/clk_summary | grep i2s hclk_i2s2 2 2 0 100000000 0 0 50000 Y hclk_i2s1 1 2 0 100000000 0 0 50000 Y hclk_i2s0 1 2 0 100000000 0 0 50000 Y clk_i2s2_div 1 1 0 800000000 0 0 50000 Y clk_i2s2_frac 1 1 0 11289600 0 0 50000 Y clk_i2s2_mux 1 1 0 11289600 0 0 50000 Y clk_i2s2 2 2 0 11289600 0 0 50000 Y clk_i2s1_div 0 0 0 800000000 0 0 50000 N clk_i2s1_frac 0 0 0 40000000 0 0 50000 N clk_i2s0_div 0 0 0 800000000 0 0 50000 N clk_i2s0_frac 0 0 0 40000000 0 0 50000 N clk_i2s1_mux 0 1 0 0 0 0 50000 Y clk_i2s1 0 1 0 0 0 0 50000 N clk_i2s0_mux 0 1 0 0 0 0 50000 Y clk_i2s0 0 1 0 0 0 0 50000 N clk_i2sout_src 0 0 0 0 0 0 50000 Y clk_i2sout 0 0 0 0 0 0 50000 N

从从上面输出的信息看到hclk_i2s1、clk_i2s2已经使能了,并且输出的时钟频率为11289600,由于I2S2并没有对外相关引脚,因此无法通过仪器测量。

五、设置系统默认音频设备

由于我们之前移植了ubuntu操作系统,因此在我尝试打开一个有视频的网页时,发现视频播放竟然没有声音。而我想通过HDMI接口将声音播放出来,应该怎么办呢?

5.1 安装pavucontrol

一般情况下,系统都自带该命令,无需再下载,如果没有就下载。

root@rk3399:/# sudo apt-get install pavucontrol 5.2 配置pavucontrol

pavucontrol命令功能比较强大,可以禁用指定声卡、可以选择指定声卡只能录音或者只能放音,用来切换声卡非常方便。

在ubuntu桌面环境运行如下命令打开pavucontrol界面: root@rk3399:/ pavucontrol

如果没有打开pavucontrol界面,并且一直处于等待加载状态,尝试在桌面系统环境执行如下命令:

root@rk3399:/ pulseaudio --system &

pavucontrol界面如下图所示:

第一个Built-in Audio对应着声卡0,第二个Built-in Audio对应着声卡2;这里我们配置声卡0的Profile为Stereo Output,即立体声输出。然后将声卡2 关闭掉。

然后我们看一下输出设备配置,可以看到声卡0的输出端口信息:

修改/etc/pulse/system.pa文件:

root@rk3399:/# vim /etc/pulse/system.pa

在load-module module-native-protocol-unix之后添加auth-anonymous=1:

load-module module-native-protocol-unix auth-anonymous=1

需要注意的问题: pavucontrol命令打开界面设置的信息只能本次有效,如果系统重启,配置也会还原,也就是说设置之后不会永久保存。

5.3 永久保存配置

如果不想每次开机都设置一次,可以将配置写入到配置文件:/etc/pulse/default.pa。

在ubuntu桌面环境控制台运行如下命令,查看当前系统可用的音频端口:

root@rk3399:/ pacmd list | grep "active port" active port:

根据打印的结果,可以知道HDMI声卡的输出端口是:active port: 。

将打印的数据输出到text.txt文本文件中:

root@rk3399:/ pacmd list > text.txt

然后使用vim打开文本文件,搜索active port字段:

root@rk3399:/ vim text.txt

如下图所示:

搜索到之后,再向前翻,找到index字段,找到这个声卡对应的编号。确定节点编号是22之后,就设置配置文件;

root@rk3399:/# vim /etc/pulse/default.pa

在文件末尾增加一行代码: 其中的22就是找到编号,analog-output是使用的声卡端口名称,前面查找到的。

set-sink-port 22 analog-output

重启即可生效。

参考文章

[1] 在RK3399上使用pavucontrol命令设置系统默认声卡(ubuntu18.04桌面系统)

[2] PulseAudio

[3] Ubuntu18.04设置系统默认音频设备:使用pavucontrol命令



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3