数字制造讲义05-软硬件数据通信

数字制造讲义01-成为数字世界的建造者
数字制造讲义02-Arduino入门
数字制造讲义03-电路基础
数字制造讲义04-负责输入和输出的智能元件

Connect Everything

image

玩过乐高的同学都知道,乐高积木非常容易上手,只需要把积木拼在一起——它们总是能拼在一起,不管是什么大小和形状,所以它成为了经典的儿童益智玩具。

在我们制造东西的时候,目标也是把不同的物体和元件拼接成一个完整的、具有一定功能的物品。但是我们会面对一个比乐高困难得多的问题:不同的元件出身和禀赋可能天差地别,想要把它们连接到一起,得想出各种办法。

比如,我想做一个薯片罐头打击乐器,敲击罐头,就可以让 iPad 里面的乐器发出对应的声响。

想想看,我们要把哪些东西连接起来?

我们要连接敲击的平面和 iPad 中的 APP。可是并不存在这样的接口。怎么办?

一段电线连不起来,那我们用两段。可以先用 Arduino 帮我们收集敲击的信号,然后作为中转,再传给 APP。

可是, Arduino 怎么连接 iPad 呢?

你可能会说,可以用数据线呀!没错,不过,要用什么样的数据线呢?这取决于我们要传输什么样的数据。我们想要控制 APP 中的乐器,就需要包含 MIDI 信息的数据,于是要用 MIDI 数据线来传递。

所以,我们的问题拆分成了好几个:

  • 如何连接敲击面和 Arduino (电路)
  • 如何连接 Arduino 和 iPad(一头必需是 iPad 支持的端口,如 type-c)
  • 如何从 Arduino 传输 MIDI 数据到 APP(一头必需是 MIDI 数据线)

条条小路通骡马

这节课我们学习有哪些方式把不同的东西连接在一起,让它们之间可以传递数据,完成一定的功能。

硬件和硬件、软件和硬件、软件和软件的数据通信,主要可以分为两大类型:有线和无线。

想要跟硬件沟通,需要用某种它能听懂的「语言」。但是这种语言在人类看来简直像天书,它是机器专用的代码——汇编语言(assembly language),是一种用于电子计算机、微处理器、微控制器,或其他可编程器件的低级语言。

有线

串口通信(Serial Communication), 是最常见的通信方式。它是指外接设备和计算机之间,通过数据信号线、地线、控制线等,按位进行传输数据的一种通讯方式。 这种通信方式使用的数据线少,在远距离通信中可以节约通信成本,但其传输速度比并行传输低。

串口的概念跟并口相对应:

image

因为要跟机器直接打交道的语言(低级别的语言)比较难掌握,所以有许多更高级别的语言(近似人类语言)的库可以帮助我们通过串口跟机器沟通,例如 Python 语言的 pySerial

Arduino 也是靠串口跟计算机通信。

在我们上传程序到板子之前,就需要选择用哪个串口通信。在 Port 选项上方,还有 Serial Monitor 工具(IDE右上角放大镜图标也可以),我们常常在调试程序时,打开串口监视器并查看里面的数据。

那么,Arduino 用什么数据线跟电脑的串口连接呢?

最常见就是 USB 数据线了。USB 是 Universal Serial BUS 的缩写,从名字可见其野心(不过讲真,数据接口类型太多,真的让人头疼死……)

来认认 USB 接口们,哪些是平常经常会见到的:

image

备受关注的 USB 4.0 就要来了,但是现实比较骨干,我们仍然需要跟各种各样的数据接口和数据线打交道,尤其是音频和视频的数据线,还远未到 USB 一统天下的时候。

这张图汇总了大部分音视频数据接口的长相,总有一款适合你:

USB 没有办法替代这么多的数据接口和数据线,其中很重要的一个原因是连接距离。音视频的连接长度常常跨越几米甚至上百米,这时候 USB 就傻眼了。

在远距离传输的场景下,互联网(广域网/局域网)就可以大显身手。在有线互联网中,我们通过 IP 地址访问和联通计算机。

IPv4地址分为 A、B、C、D、E 五类,出去特殊作用的 D、E 两类,剩下的 A、B、C 三类地址是常见的 IP 地址段。A 类地址的容量最大,可以容纳 16,777,214 个主机,B 类地址可以容纳 65,534 个主机,C 类地址可以容纳 254 个主机。

  • A类地址:10.0.0.0--10.255.255.255
  • B类地址:172.16.0.0--172.31.255.255
  • C类地址:192.168.0.0--192.168.255.255

无线

基于无线的连接越来越普遍,也越来越重要了。

为啥?

image

尤其在制作互动装置时,我们不希望被太多连线所缠绕和局限活动范围,所以需要借助无线连接的方式。

而且,多种多样的无线数据传输,也是 IOT(Internet of Things 物联网)的基础设施。

那么蓝牙呢?蓝牙的应用也越来越普遍了。

蓝牙是一种点对点的通信方式,主要目的是服务移动设备。蓝牙的功耗以及成本比 wifi 低一些,但是传输距离很短,一般用于近距离设备的通信,例如耳机和手机。

<iframe frameborder="0" src="https://v.qq.com/txp/iframe/player.html?vid=a05428d2mlx" allowFullScreen="true"></iframe>

科技情报局:NFC、蓝牙和 WiFi 有什么区别?_腾讯视频

除了 wifi 和蓝牙,还有 ZigBee、RF、WiMax 等等传输方式,我们不太会接触到,这里就略过了。

传输音乐数据

音乐和乐器是我们不变的主题。那么我们要深入了解一下如何传输音乐相关的数据。

MIDI

音乐数字接口(Musical Instrument Digital Interface,简称 MIDI )是一个工业标准的电子通讯协议,为电子乐器等演奏装置(如合成器)定义各种音符或弹奏码,让电子乐器、电脑、手机或其它的舞台演出配备彼此连接,调整和同步,可以即时交换音乐数据。 MIDI 不传送声音,只传送包括音调和音乐强度的数据、音量、颤音和相位等参数,还有设定节奏的时钟信号。在不同的电脑上,输出的声音也因音源器不同而有差异。

回顾 MIDI 的历史,简直就像回顾数字时代的陈年往事:

<iframe frameborder="0" src="https://v.qq.com/txp/iframe/player.html?vid=n08561s7vij" allowFullScreen="true"></iframe>

WHAT IS MIDI 什么是 MIDI_腾讯视频

MIDI 1.0 于 1983 年 8 月发布。35 年过去了,MIDI 终于在今年 1 月迎来了 2.0 版本。

image

当然,现阶段我们常用的还是 5 脚的 MIDI 数据线,和 0~127 的整数型数字:

image
MIDI Cable Wiring
First Connector Cable Second Connector
Pin 1 No Connection Pin 1
Pin 2 Shield Pin 2
Pin 3 No Connection Pin 3
Pin 4 Voltage Reference Line Pin 4
Pin 5 Data Line Pin 5

课上演示的从 MAX 发送 MIDI 数据给 Ableton,记得自己动手试一试哦!

从移动端发送 MIDI 数据给其他设备,可以使用类似 KnobLab 的 APP,它支持多种传输方式:

image

OSC

OSC(Open Sound Control)是用于连接声音合成器、计算机和其他多媒体设备的协议,用于辅助音乐表演或节目控制之类(共享音乐表现数据如手势、参数和音符序列)的目的。OSC 的优势包括互动性,准确性,灵活性等。

来听听看 OSC 的作者之一 Matt Wright 是如何介绍它的:

<iframe frameborder="0" src="https://v.qq.com/txp/iframe/player.html?vid=f08563i3n66" allowFullScreen="true"></iframe>

Open Sound Control OSC intro_腾讯视频

OSC 常常用来替代 MIDI,因为它的分辨率更高、可传递的参数更丰富。OSC 消息使用 UDP / IP 和以太网通过 Internet和局域网传输。

image

OSC 已广泛应用于音乐表演、机器人、视频性能接口、分布式音乐系统和进程间通信等领域,在实验音乐控制器中更是必不可少。

那么怎么使用 OSC 传输数据呢?

在触摸设备如 iOS 上,用 TouchOSC 最方便不过了(不过要收费)。

image

在移动端下载 TouchOSC,在桌面端下载编辑器,在编辑器里面可以创建自定义的操作面板。然后在移动端设置输入和输出端口。接下来就可以在 Max/MSP 里面接收和发送 OSC 数据了。因为 OSC 通过 UDP 协议传输,所以使用 udpsendudpreceive 对象:

image

Max 接收到数据后,可以看到 OSC 的数据格式类似文件路径 URI:/{序号}/{参数名} {参数值}

这样我们就把手机和电脑连接起来,并且在手机上实现个性化的控制。

除了移动端的 TouchOSC,OSCulator 也是一款好用的 OSC 控制器,感兴趣的同学可以自行研究一下。

当然,Arduino 和 Max 也是可以方便地勾搭上的:

image

本周的作业,是研究 Arduino 如何触发 Ableton 或 Max 里面的声音采样,以及如何使用 OSC 跟 Arduino 通信


00 的文集

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,204评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,091评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,548评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,657评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,689评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,554评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,302评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,216评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,661评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,851评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,977评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,697评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,306评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,898评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,019评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,138评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,927评论 2 355

推荐阅读更多精彩内容

  • 国家电网公司企业标准(Q/GDW)- 面向对象的用电信息数据交换协议 - 报批稿:20170802 前言: 排版 ...
    庭说阅读 10,970评论 6 13
  • 大学的时候,帮朋友写的操作系统调研的作业,最近整理过去的文档时候偶然发现,遂作为博客发出来。 从串口驱动到Linu...
    free_will阅读 7,390评论 7 59
  • 今天看到一篇文章,说的是儿媳妇不愿和婆婆住在一起是否算是不孝顺? 我看了不少回答,大多数都是儿媳妇的回复,茫...
    百里云龙阅读 1,011评论 0 1
  • 网络营销学习心得体会作为电子商务专业学生,在以后的工作中运用网络进行营销的时间占多数。在跟老师学习了一个学期的网络...
    DN_6fc1阅读 323评论 0 0
  • 暑假前特意去买了一本卓立校长写的《欢迎来到一年级 幼小衔接家长手册》,断断续续拿来阅读,开学前几天,我还跟孩子说,...
    wuxicindy阅读 1,593评论 0 0