智能音乐生成理解 反馈 融合

浙江大学DeepSeek系列专题线上公开课（第二季）第五期浙江大学智能音乐生成：理解·反馈·融合张克俊张克俊浙江大学计算机科学与技术学院浙江大学计算机科学与技术学院工业设计系系主任、国际设计研究院副院长浙江大学浙江大学DeepSeek系列专题线上公开课（第二季）第五期浙江大学智能音乐生成：理解·反馈·融合张克俊张克俊浙江大学计算机科学与技术学院浙江大学计算机科学与技术学院工业设计系系主任、国际设计研究院副院长浙江大学浙江大学DeepSeek系列专题线上公开课（第二季）第五期浙江大一、背景A创作的国乐音乐会张克俊浙江大学计算机科学与技术学院工业设计系系主任、国际设计研究院副院长视频来源https://www.bilibilli.com/video/BV1pw4m127JM，https:/www.bilibili.com/video/BV1Pz421k71o，https://www.bilibil.com/video/BV1Xr421u7vb浙江大学DeepSeek系列专题线上公开课（第二季）第五期浙江大一、背景A创作的国乐音乐会bbbab张克俊浙江大学计算机科学与技术学院工业设计系系主任、国际设计研究院副院长视频来源https://www.bilibili.com/video/BV1pw4m127JM，https:/www.bilibili.com/video/BV1Pz421k71o，https://www.bilibil.com/video/BV1Xr421u7vb浙江大学DeepSeek系列专题线上公开课（第二季）第五期浙江大学一、背景I猜一猜哪首是A/生成的贝多芬交响曲？下面四首交响曲中有三首是原版的贝多芬交响曲，有一首是AI生成的贝多芬《第十交响曲》，猜一猜哪一首是A/生成的？张克俊3\)24)浙江大学计算机科学与技术学院工业设计系系主任、国际设计研究院副院长浙江大学DeepSeek系列专题线上公开课（第二季）|第五期浙江大面向电子音乐与AI的交响未来导赏音乐会202305129张克俊MUSE高东科技融创节浙江大学计算机科学与技术学院工业设计系系主任、国际设计未来诗一古筝AI视听音乐会20254445研究院副院长沈出之水家王萌+于浙江大学DeepSeek系列专题线上公开课（第二季）|第五期一、背景「人工智能：数据、算法和算力数据算法算力deepseekBIGDATA探索未至之境张克俊大数据建设新算法创新大算力突破浙江大学计算机科学2025年数据规模将到达201.6ZB大语言模型推动技术、轻量化深度学习技术、训练芯片创新加速，推断芯片朝着专用定制数据服务由简单场景向个性化复杂场景定制。知识计算、人工智能与科学研究融合等。化发展，类脑芯片、存内计算、量子计算等与技术学院工业设计依旧是重点探索方向。系系主任、国际设计研究院副院长数据来源2025年《中国人工智能计算力发展评估报告》人浙江大学DeepSeek系列专题线上公开课（第二季）|第五期浙江大一、背景IA/音乐生成具有极大理论及应用研究价值人工智能近年学术研究发展趋势1250音乐学1150多音乐1050学950心理学（脑、语言）智能生成850科张克俊750650设计学550450浙江大学计算机科学与技术学院工业设计系系主任、国际设计研究院副院长产业界orkODOUBAOTEAMOPPOHUAWEInagentaSuno数据来源WebofScience浙江大学DeepSeek系列专题线上公开课（第二季）|第五期一、背景IA/音乐生成发展历程1960有限状态机和随机矩阵作曲深度学习神经网络作曲1965模式识别分析作曲迁移学习作曲1987基于规则的知识库系统，混合型算法自然语言处理作曲1987音乐文法系统（DavidCope)强化学习作曲随机组合模块作曲殷子游戏1993交互式遗传算法作曲MusicBERT莫扎特－小舞曲或三重奏Music Transformer19世纪以前1960年-1993年2016年－至今张克俊1957年2002年－2016年马尔可夫链转换表作曲20世纪末各类遗传算法作曲Hiller，弦乐四重奏2002神经网络（LSTM）作曲浙江大学计算机科学与技术学院工业设计系系主任、国际设计先验规则学习式（被动）：会考经验数据驱动式（主动）：会学研究院副院长https :/ /www.pianoabrsm.com/mozart-dice-game浙江大学DeepSeek系列专题线上公开课（第二季）第五期浙江大音乐创作核心流程理论：乐理、和声学、复调、配器法、曲式作曲对象：曲作者、音乐创作人1智能作词作曲 (旋律）内容：音乐主题、作词作曲、小样录制要求：了解和弦，曲式结构等基本乐理对象：编曲人编曲配器： 乐器编配选择、位置、声部编曲：和声、 节奏、旋律、人声、环境、要求：有乐理基础、了解各种乐器、熟练使用段落2智能编曲伴奏生成音乐制作软件、具有音乐把控力、审美能力录制录制：联络真乐器演员、 专业录音棚制作对象：乐队、录音师33 智能润色， 专家知识监棚： 相互交流、把握演奏风格要求：设备需求高、技术门槛高、配合度高张克俊对象：混音师混音环境：专业混音环境、数字或纯模拟混音音乐风格、对声音敏感、熟4智能后期，音效引擎混音：压缩、均衡、激励、失真、混响等练操作软硬件系统浙江大学计算机科学与技术学院工业设计压制母带： 频率、动态、 抖动、响度对象：母带工程师出片：压制产生文件要求：技术标准、经验需求系系主任、国际设计研究院副院长作曲流程长，工种参与类型多， 设备要求专业，驱需利用AI技术协助简化作曲浙江大学DeepSeek系列专题线上公开课（第二季）|第五期浙江大、背景IA/音乐三大模块工作输出评估Pleasure evaluationSimilarityNoise evaluationHuman evaluationEvaluationnotes、phrase、harmonicity、comments.Qmax、music structurerhythm、themepreferenceturingOA-overlappingMachine EvaluationHuman Evaluation算法模型complementaryLanguage-BasedImage-BasedRNN (LSTM、GRU)、CNN-GAN、CNN-VAE、complementarySeq2Seq、Transformer、张克俊3DCNN、CNN-VAE+GANBert、GPT浙江大学计算机科学TranscriptionRendering与技术学院工业设计数据表征AudioSymbolicSheet Music系系主任、国际设计RepresentationRepresentationRepresentationSynthesisOMRPerformance研究院副院长Physical TimeMusical TimeAcousticDomainVisual Domain浙江大学DeepSeek系列专题线上公开课（第二季）|第五期浙江大一、背景【音乐的数据表示(a)(b)(c)67/G张克俊浙江大学计算机科学43/G与技术学院工业设计36/C2系系主任、国际设计