Gemini Lyria RealTime实时音乐生成从零到边播边改的完整上手指南【免费下载链接】cookbookExamples and guides for using the Gemini API项目地址: https://gitcode.com/GitHub_Trending/coo/cookbook谷歌官方示例库 cookbook 里有现成的 Lyria RealTime 实时音乐生成教程写几个词AI 就会一直播演奏乐曲你可以边听边换歌、调速度、改氛围。适合想体验 AI 音乐的新手也适合想给产品加现场配乐功能的开发者。 先认识它Lyria RealTime 到底是什么Lyria RealTime 是 Gemini API 里的一个流式音乐生成模型。它和输入提示词、等待、拿到 mp3的一次性生成不一样它通过 websocket 和你的程序保持一条常开的连接像一间直播间——你点歌它播播到一半你再点新歌它会平滑过渡到新的风格而不是掐断重来。核心能力可以概括为五条持续流式播放音频一小块一小块地传回来播个不停不用等整首生成完文字指挥用词语描述流派、乐器、情绪模型照着弹加权混合提示可以同时叠多个风格比如Sitar:2, Indie Pop:0.6各自调权重实时调参速度bpm、调式scale、明亮度brightness、音符密度density、跟随提示词的严格程度guidance都能播到一半再改以纯音乐为主默认生成无人声的器乐曲切换生成模式并加相关提示词后也可以尝试带人声️ 准备工作跑起来之前装好这三样只需要三样东西Python 环境、API 密钥、官方示例代码。先装依赖。Lyria RealTime 需要 google-genai 1.16 及以上版本本地实时播放还要 pyaudio 和 websocketspip install -U google-genai pyaudio websockets然后申请一个 Gemini API 密钥。本地脚本运行时要把密钥放进环境变量 GOOGLE_API_KEY如果你还不会申请和配置密钥仓库里的 quickstarts/Authentication.ipynb 手把手讲了流程。最后把示例代码拿到手git clone https://gitcode.com/GitHub_Trending/coo/cookbook有两个上手入口Colab 版笔记本 quickstarts/Get_started_LyriaRealTime.ipynb和本地脚本 quickstarts/Get_started_LyriaRealTime.py。注意 Colab 因为环境限制只能输出一小段音频文件体会不到实时想感受边播边改用本地脚本。另外提醒一句Lyria RealTime 目前是实验性功能模型编号 lyria-realtime-expSDK 走 v1alpha 版本调用。现在免费但有配额限制接口也可能调整先别把它直接焊进正式产品。 核心玩法三步完成第一次现场点歌直接用本地脚本开始。它启动后会以 120 bpm、降 A 大调播一首钢琴曲你从这一刻起听的就是实时生成的音乐。第一步播到一半换歌。你可以直接在提示符里敲一个词比如 Baroque 或 Sitar。音乐会继续播只是风格平滑地挪了过去不用先停下再重新开始。第二步叠一个混合配方。输入提示词:权重的组合用逗号隔开比如808 Hip Hop Beat:1, Chill:0.5一个占主导、一个做底色。第三步用参数微调现场。输入 bpm140 让节奏加快输入 scaleF_MAJOR_D_MINOR 换调式play 和 pause 控制继续与暂停q 结束整个会话。整个过程就像你坐在点歌台的 DJ 位上台下乐手永远在线。拿不准写什么提示词时官方笔记本里备好了现成的选项流派Hard Rock、Latin Jazz、Chiptune、Bluegrass 等、乐器Piano、Harpsichord、Didgeridoo 等、情绪Danceable、Ominous Drone、Upbeat 等配着滑杆参数直接挑着试就行。 进阶技巧与避坑指南下面这几条是新手最容易栽的坑每条附一句对策提示词写长了反而更差模型对meditationeerieharp这类短词的理解比一长串定语堆叠的句子更准写提示词时先砍掉一半修饰语。权重不能是 0加权提示里 weight 可以是任意非零数字包括负数填 0 会被解析逻辑直接跳过。卡顿和延迟是同一件事的两面脚本默认保留 1 秒音频缓冲BUFFER_SECONDS缓冲加大能减少断音但你的指令生效会更晚按自己的网络情况调。别在 Colab 里判断它不实时笔记本环境只有有限音频输出感觉不到实时是正常的换本地脚本或去 AI Studio 内置的 Prompt DJ、MIDI DJ 应用里验证真实体验。它是预览版报错先查版本模型带 exp 后缀、接口走 v1alpha调用失败时先确认 SDK 已经升到 1.16 以上再看其他原因。 能拿它做什么游戏动态配乐输入是什么——场景关键词加当前强度宫殿里发 Baroque地牢里发 Ominous Drone输出是什么——一段持续播放、随关卡平滑切换的背景音乐省去预先生成、剪辑大量音乐轨的工作。播客或视频的免版权 BGM输入是什么——节目调性的几个词Chill, Acoustic Instruments输出是什么——一直播下去的原创配乐音量压低垫在内容下面就是完整的一集底乐。一台 AI 点歌台输入是什么——观众打过来的歌词式指令输出是什么——AI 现场接着弹的曲子。官方本地脚本已经实现了文字点歌和调参的完整循环你只需要在外面接一层输入界面就能把它变成一个可以演示的小产品。 下一步延伸资源跑通上面的三步之后可以按这个顺序继续深挖quickstarts/Get_started_LyriaRealTime.ipynbColab 快速入门版适合先验证基本流程quickstarts/websockets/Get_started_LyriaRealTime_websockets.ipynb裸 websocket 版想搞懂实时流底层协议就读它quickstarts/Get_started_LiveAPI.ipynbLive API 的其他实时能力比如实时对话和音乐生成共用一套流式思路读完这篇你现在就可以克隆仓库、装好依赖、跑起本地脚本让第一段持续播放的音乐响起来然后试着在它播到一半时换掉风格。【免费下载链接】cookbookExamples and guides for using the Gemini API项目地址: https://gitcode.com/GitHub_Trending/coo/cookbook创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考
