声音处理

音讯撷取
音频捕获是一种传感器小码,用于捕获来自麦克风的音频数据包。捕获的音频以32位浮点数据发布。

配置参数
参数 描述 默认
capture_card_name 用于捕获音频的音频设备的名称。如果使用系统的默认捕获设备,请将其保留为空。
采样率 用于捕获音频的以Hz为单位的采样率。 16000
num_channels 要捕获的音频通道数。 6
audio_frame_in_Milliseconds 每个音频数据包的持续时间(以毫秒为单位)。 100
ticks_per_frame 1个音频帧内查询ALSA的次数。 5
留言内容
信息 原型类型 名称
输出量 AudioDataProto audio_capture
样品申请
音频捕获示例应用程序从麦克风捕获音频,并将其作为原始音频数据保存到PCM文件中。此应用程序需要将麦克风连接到主机/设备,并在系统设置中将其设置为默认音频输入设备。连接的麦克风的规格应用于配置音频捕获组件(num_channels和 sample_rate)。该应用程序配置为以16kHz采样率捕获6通道音频数据。该数据被捕获为100ms音频数据包,并保存到/tmp/audio-out-f32-16k.pcm。

平台:台式机,Jetson TX / 2,Jetson Xavier,Jetson Nano

硬件:任何麦克风

音频播放
音频播放是一种传感器小码,用于将音频数据包发送到播放设备。小码接受32位浮点音频数据,并通过默认的系统音频输出设备播放它。

留言内容
信息 原型类型 名称
输入值 AudioDataProto audio_playback_input
样品申请
音频播放示例应用程序使用自定义组件从16位原始PCM文件列表中加载音频数据。音频数据将转换为32位浮点数,然后发布到音频播放组件,该组件将通过默认的系统音频输出设备进行播放。该应用程序配置为加载单通道16kHz PCM文件。

平台:台式机,Jetson TX / 2,Jetson Xavier,Jetson Nano

硬件:任何扬声器/耳机

音频能量计算

音频能量计算功能可计算音频数据包的音频能量。如果是多通道音频数据包,它将计算音频数据包各通道的平均能量。能量以分贝(dB)计算。

此功能可作为“音频能量计算”小码使用。

配置参数

<colgroup style="box-sizing: border-box;"><col width="19%" style="box-sizing: border-box;"><col width="68%" style="box-sizing: border-box;"><col width="13%" style="box-sizing: border-box;"></colgroup>

参数 描述 类型
channel_indices 用于计算音频能量的音频通道索引列表。 整数列表
reference_energy 麦克风最大捕获音量的能量(以dB为单位)。该值可以从麦克风规格表中以声学过载点或最大dB的形式获得。例如,ReSpeaker 4-mic阵列v2.0的reference_energy为120dB。默认值为0。 浮动

留言内容

<colgroup style="box-sizing: border-box;"><col width="18%" style="box-sizing: border-box;"><col width="41%" style="box-sizing: border-box;"><col width="41%" style="box-sizing: border-box;"></colgroup>

信息 原型类型 名称
输入值 AudioDataProto audio_packets
输出量 AudioEnergyState audio_energy

视域变量

计算的能量在Sight中可用来表示average_energy_per_audio_packet

样品申请

声源定位的示例应用程序演示了此功能。

平台:台式机,Jetson TX / 2,Jetson Xavier,Jetson Nano

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 219,869评论 6 508
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,716评论 3 396
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 166,223评论 0 357
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,047评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,089评论 6 395
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,839评论 1 308
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,516评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,410评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,920评论 1 319
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,052评论 3 340
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,179评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,868评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,522评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,070评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,186评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,487评论 3 375
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,162评论 2 356

推荐阅读更多精彩内容