案例 · 微软小冰 · 2017–2020
小冰音乐:从一篇 KDD 论文到百万美元级业务
我负责小冰的 AI 音乐创作:参与设计模型,搭建它背后的数据管线,再把它做成产品与对外商业 API。
横跨层级研究模型系统产品增长营收
要点
$1M+AI 音乐年收入
KDD'18最佳学生论文(Research Track),合著者来源: Synced, 2018-08-21 ↗
CCTV基于该模型的小冰机器作曲,在《机智过人》中展示来源: 中国科大新闻网, 2018-08-28 ↗
01context
背景
2017 年的问题是:一个聊天机器人能不能从一句话写出一整首歌,旋律、编曲与歌词彼此契合,好到可以上线、可以卖?
02system
系统
两条线,一个系统。研究线做成了 XiaoIce Band:CRMCG 以和弦进行与节奏生成旋律,MICA 用多任务学习完成多乐器编曲。产品线做成了文本生成歌曲:抽取主题与情绪,选定旋律,按旋律写词,生成歌曲。
- 研究
- XiaoIce Band(KDD 2018)
- CRMCG:由和弦与节奏生成旋律
- MICA:多乐器协同编曲
- 数据
- 数据格式定义
- 数据采集与挖掘
- 训练数据管线
- 产品
- 文本 → 主题与情绪
- 旋律 → 歌词 → 歌曲
- 面向客户的商业 API
03role
我负责的部分
- 参与设计算法架构。
- 定义数据格式,负责模型的数据采集、数据挖掘与数据管线。
- 主导产品搭建。
- 交付对外商业 API,负责客户提案与部分商务拓展。
04more
报道与相关
媒体报道
- CCTV[机智过人]机器人小冰进军乐坛 两秒成曲实力惊人 ↗
- SyncedKDD 2018 Announces Best Paper & Other Awards ↗
- 雷锋网 AI 科技评论KDD 2018 Research Track 最佳学生论文详解:流行音乐的旋律与编曲生成 ↗
- 中国科大新闻网我校获数据挖掘领域顶级国际会议KDD 2018最佳学生论文奖 ↗
相关