//*铺垫部分
2022年的一天,张鸣完成了一天的工作,离开办公室准备回家。
春天的暖阳在这个时候,星期五下午格外地旖旎。其实今天为了把下周的一些事情安排好张鸣特意多待了三个小时,其他同事中午就离开了。4.5天工作制还是效率很高的。
车一启动,张鸣的耳机里响起了一阵声音:“您要到达的目的地是XXX,途径主要道路有XXX,目前路况总体通畅个别路段XX有轻度拥堵。。。”果然,开了一会儿出城必经之路的几个十字路口确实有点堵,不过耳机里响起的音乐正好是张鸣喜欢的,确切说是与耳机连接的云音乐系统根据已有的曲目、他喜欢的类型和当天新添加的几首歌中的一首,而且正好是让人舒缓的风格,迎合塞车的路况。
出城了,两侧楼宇渐渐低矮了起来,此时张鸣的智能眼镜上闪烁着限速提示和高亮化的高速公路指示。耳机里熟悉的一声提示音告诉他目前进入了一个平缓的驾驶区域,张鸣语音唤醒手机通话,滴滴两声后是熟悉而温柔的声音“阿鸣,什么时候到家呀?”
“半个小时之内吧,已经上高速了。”
“好的。今天有个好消息,等你回来。”
“什么好事儿呀,是咱儿子学校的编程比赛获奖了吗?”
“瞅你这记性,决赛不是改下周了嘛。我说的是爸术后恢复特别好[注1],今天已经回家了,一会儿一起吃完饭。”
“啊,太好了!”
此时此刻,张鸣的老丈人正在社区的操场慢跑,虽然在一个月的恢复期内运动强度要严格控制但此时的老李已经获得了与之前每周长跑一样的轻松感。突然,老李的耳机传出轻柔的语音:“您的心率已经接近XX,为了您的健康请立刻减少运动强度。”于是老李改成慢走,不巧,正好遇到同样在活动的老赵。
老赵也戴着一副耳机,老李和老赵都有点听力衰退,但借助助听模块彼此交谈非常流畅,生活一切正常。
在高速正常行驶的张鸣突然听到警报的提醒:“前方两公里处已经出现大雨,伴随强风,请小心行驶。”
“每年这个月都有几天异常的风雨。”张鸣心里想。果然,很快地刚才的晴空被乌云和雨点所替代。
此时张鸣还收到了儿子发来的一段语音,通过语音命令让耳机播放,此时耳机的降噪模块将雷声遮盖到最小,儿子的声音非常清楚。
离家不远了,来去匆匆的阵雨也消退了。
下面说正事儿*//
2022年智能耳机已经进入寻常百姓家,价格的下降和性能的提升不只是规模经济带来的,还有一些几年前就持续发展的技术革新:
首先是流媒体技术的发展,耳机不再是被动传输某种声音的工具,而是主动接收和传递信息的平台,这得益于网络协议的发展,避免了之前单纯TCP/IP、蓝牙等平台的局限,耳机和智能眼镜(如果有的话)实现了多网融合,各平台的硬件兼容性空前良好。
其次是语音处理技术的发展,降噪、音效、增强、预测等等模型进一步完善,无论是助听、音频播放还是什么功能都做到了绝大多数日常情景体验良好。而且改进的模型加快了运算速度,减少了单位数据传输,与硬件无缝配合。
##下面貌似是真的正事儿
基于以上憧憬,我考虑6个月左右完成一个小型的个人项目,主题是流媒体技术与音(+少量视?)频处理的结合。
传统的以连接为核心的流媒体架构和以储存后播放的非即时音频技术范式在这几年随着直播等互联网技术/业务的发展转向面向内容、实时处理的趋势。而相关技术比如Quic、WebRTC、websocket以及其他新兴的协议还没有成熟,此时正有独特的学习探索空间。
从新的互联网角度改造和拓展多媒体技术,正如当今主流的多媒体技术(数字音频、数字视频)当年从计算机角度转换和拓展了传统基于电路的多媒体技术。这是新的“后浪”!
然后具体做点啥呢??我对音频处理特别是涉及语言相关的内容(比如基于汉语韵律的压缩算法bababla)特别感兴趣,正好有点助听器和语音处理的愿景(被忽悠过?),考虑以此与网络架构(主要是协议相关的)结合,做一个针对服务器端为主的小型处理工具「可能写完时代码还不及一些大数据平台的一个模块的1/10」。
原型设计和功能还需要进一步学习之后敲定,但目前可以确定由于时间和资源限制,功能的测试以偏理论的静态测试为主比如录一段音频,加上实时传输卡顿和丢包的模拟,经过自己写的算法处理,再看变成什么模样了(人耳听+常用数据度量方法打分)。
对这个项目的定义是,一半学技术,一半学规范化开发和业务流程,为找实习做准备。
想必这个设想还很天真,欢迎大噶提建议以及批评!
注
1 张鸣的岳父一周前经历了机器人主刀的超微创冠状动脉支架手术,当天即能自如走动。
参考
会“咬耳朵”的私人助理 - 索尼 Xperia Ear Duo 体验 https://zhuanlan.zhihu.com/p/36882578
智能耳机史(中):巨头围剿下的六大创新赛道 https://36kr.com/p/5142104
智能耳机 2021 https://www.geekpark.net/news/241945
Hearing Aids by Harvey Dillon -Thieme
HTTP/3 HTTP over QUIC is the next generation