AI Pulse

没有独显的MacBook也能微调音频大模型了

没有独显的MacBook也能微调音频大模型了

MacBook 没有独立显卡,也能微调支持音频的大模型。mattmireles/gemma-tuner-multimodal 项目明确要求 Apple Silicon 硬件,避开对 NVIDIA 显卡和 CUDA 的依赖。

axolotl 必须配 NVIDIA 显卡;MLX-LM 和 Unsloth 虽可在 Mac 上运行,但不支持音频微调。

训练数据不必全塞进本地硬盘。该项目能直接从 Google Cloud Storage 或 BigQuery 流式读取数据。理论上,即使设备只有 256GB 存储,也能处理 TB 级训练集。用户在终端中运行的命令可能是 gemma-macos-tuner。

这并非简单移植。作者重写了 LoRA 适配层,重构了数据加载器,并绕过了 Hugging Face Transformers 对音频路径的架构限制。项目自称是目前唯一同时支持音频微调、苹果芯片原生运行和云数据流式加载的开源方案,可用于微调 Gemma 4 和 3n 模型。代码托管在 GitHub 仓库 mattmireles/gemma-tuner-multimodal。

阅读原文
📚 相关主题 开源工程

📬 订阅 AI Pulse

每天三次更新,不错过重要信号

▲ 回到顶部