美文网首页嵌牛IT观察
谷歌最新AI实验:人人都是指挥家,实时生成交响乐

谷歌最新AI实验:人人都是指挥家,实时生成交响乐

作者: 5e7a8ff18ced | 来源:发表于2019-01-03 15:19 被阅读0次

    姓名:洪丹楠

    学号:16020188006

    转载自:https://new.qq.com/omn/20190103/20190103A0K1DS.html

    【嵌牛导读】:谷歌最新AI实验项目,根据用户指挥动作实时生成交响乐,圆你一个指挥家的梦!只需一个摄像头,浏览器内即可运行,快来试试吧!

    【嵌牛鼻子】:AI、交响乐

    【嵌牛提问】:Al和音乐能产生共鸣吗?

    【嵌牛正文】:

    如果你是一位古典乐发烧友,而且有做乐团指挥的梦想,听见古典乐就走不动道,就算没有乐队,也能自己对着空气手舞足蹈指挥一番,那么恭喜你,谷歌最新的人工智能实验项目简直就是为你量身定制的。而且,不用担心旁边有人对你指手画脚。

    这个项目名为“半导体”,其中融合了谷歌过去一系列机器学习实验中的最新成果。包括AIDuet(邀请用户在浏览器中播放虚拟钢琴演奏,并提供虚拟伴奏),以及AutoDraw(可以解释用户绘制的粗糙涂鸦是什么,并将这些画作转变成为整洁的剪贴画)。

    该项目可以跟踪用户的动作,就像用户在真正的管弦乐队前挥舞双手一样,并根据对用户动作的分析结果,实时生成一段交响乐。

    “半导体”项目地址:

    https://semiconductor.withgoogle.com/

    AI如何制作经典的卡通风格字体效果?

    平面构成点线面的概念 字体选择排版设计技巧 海报设计风格解析

    AI+PS制作彩色橡胶糖果一样的520,甜甜的很有爱!

    教你制作人物插画

    平面设计AI学习教程 利用色彩视觉差制作立体字体设计表现效果

    和上帝借了一双手的美女画家:30米巨作震撼全场

    2017年“首都市民音乐厅”在首图拉开帷幕

    “温妮去海边”魔法绘本亲子音乐会上演

    刘强东要搞养猪厂?是京东发展需要,还是另有布局?

    有情感的机器人要来了,网友:我的机器人女友?

    李大成:高新兴“AR+AI”双引擎助力城市交通“智”理

    150秒科普:为何柯洁对战AI无人看好

    AI机器人能否称之为“人”?网友:先学会人类这种功能再说

    李彦宏上榜“全球最受关注的十大AI领军人物”

    迷人又有范!日本高仿真美女机器人模特,好想有一个

    想试试吗?只需在谷歌浏览器中启动“半导体”,允许其访问网络摄像头权限,然后面向摄像头后退一步,直到你的手臂位于屏幕内的框架中,就可以开始指挥自己的“乐队”了。不一定非要使用传统的指挥手势,本项目会提供建议提示,帮助你一路顺利完成指挥。

    全程无需指挥棒 随意放飞自我

    本项目背后的核心技术是PoseNet,这是一种面向姿势估计的机器学习模型,可以在浏览器中对人的姿势和动作进行分析和估计。它无需任何专门的硬件或软件,即可检测到图像和视频中的人物形象。

    最重要的是,因为所有处理都在浏览器中进行,所以无需向Google或其他任何人发送任何数据,因此你可以完全自娱自乐,无需担心由于数据泄露引发的一些不必要的尴尬。

    这个项目可让用户通过浏览器管理自己的管弦乐队。你可以通过移动手臂,来改变交响乐的速度、音量和乐器种类。该项目使用PoseNet,这是一个可在浏览器中使用的机器学习库,通过网络摄像头捕捉动作。

    PoseNet使用来自现场乐器演奏时录制的数百个微小音频文件,算法会根据捕捉到的动作信息播放这些音频。

    关于PoseNet和姿势估计

    姿势估计指的是检测图像和视频中的人物形象的计算机视觉技术,比如可以确定某人的肘部出现在图像中的位置。需要明确的是,这项技术无法识别图像中的人物身份。该算法仅仅是估计关键身体的关节在图像中的相对位置。

    姿势估计有许多用途,比如用于基于身体反应的交互式装置,以及增强现实设备、动画制作、健身等用途。过去,虽然许多的姿势检测系统是开源的,但都需要专门的硬件或摄像头,以及相当繁复的系统设置。

    由于TensorFlow.js上的PoseNet在可浏览器中运行,只要有网络摄像头,任何人都能在浏览器中体验这项技术。目前该模型已经开源,Javascript的开发人员只需几行代码即可使用。更重要的是,这实际上可以更好地保护用户的隐私。

    参考链接:

    https://www.techradar.com/news/googles-latest-ai-experiment-lets-you-conduct-an-orchestra-in-your-browser

    项目地址:

    https://semiconductor.withgoogle.com/

    相关文章

      网友评论

        本文标题:谷歌最新AI实验:人人都是指挥家,实时生成交响乐

        本文链接:https://www.haomeiwen.com/subject/megfrqtx.html