~/davelee.ai·work
案例 · 微软小冰 · 2017–2020

小冰音乐:从一篇 KDD 论文到百万美元级业务

我负责小冰的 AI 音乐创作:参与设计模型,搭建它背后的数据管线,再把它做成产品与对外商业 API。

AI 音乐创作项目负责人·2017–2020
横跨层级研究模型系统产品增长营收
要点
$1M+AI 音乐年收入
KDD'18最佳学生论文(Research Track),合著者来源: Synced, 2018-08-21 ↗
CCTV基于该模型的小冰机器作曲,在《机智过人》中展示来源: 中国科大新闻网, 2018-08-28 ↗
01context

背景

2017 年的问题是:一个聊天机器人能不能从一句话写出一整首歌,旋律、编曲与歌词彼此契合,好到可以上线、可以卖?

02system

系统

两条线,一个系统。研究线做成了 XiaoIce Band:CRMCG 以和弦进行与节奏生成旋律,MICA 用多任务学习完成多乐器编曲。产品线做成了文本生成歌曲:抽取主题与情绪,选定旋律,按旋律写词,生成歌曲。

  1. 研究
    • XiaoIce Band(KDD 2018)
    • CRMCG:由和弦与节奏生成旋律
    • MICA:多乐器协同编曲
  2. 数据
    • 数据格式定义
    • 数据采集与挖掘
    • 训练数据管线
  3. 产品
    • 文本 → 主题与情绪
    • 旋律 → 歌词 → 歌曲
    • 面向客户的商业 API
03role

我负责的部分

  • 参与设计算法架构。
  • 定义数据格式,负责模型的数据采集、数据挖掘与数据管线。
  • 主导产品搭建。
  • 交付对外商业 API,负责客户提案与部分商务拓展。
04more

报道与相关

媒体报道
相关