课代表立正
传统的个人语音记录和会议总结管线需要向面向AI的自动化克隆、配置与定时调度流程演进,让AI完全接管工具的安装与交付。
AI-assisted summary of How big is the gap between your prompting skills and an AI pro? — original source. Check the original for full context.
Source published:
Detailed notes
## Detailed walkthrough ### 系统升级与新型实时语音模型
演讲者首先顺便提到自己升级了系统,现在可以实现“一边讲一边实时(real-time)”处理。这一升级得益于 OpenAI 最近推出的新模型,他将其称为“GPT real-time whisper”。虽然目前这个新功能还没有正式推上去,但未来部署后,用户将可以直接在设置里面无缝切换到 whisper 模型,而系统之前原有的功能依然会保持不变。
---
Intake Skill 的构想与音频处理管线
演讲者计划将现有的 AI 对话和生活记录(life record)提炼并封装成一个名为 `intake_skill` 的新功能。为了实现这一目标,他指导在 `ad_hoc_jobs` 目录中新建内容,并参考 `project_scaffolding` 这个 skill 进行脚手架初始化。他所期望的理想效果是,系统每天完全不需要管 Mac 自带的录音,因为 100% 的音频输入都将直接来自语音备忘录(Voice Memos)。因此,系统只需要走 `rsync` 那条同步路径即可。
在这个构想中,演讲者需要构建一个完整的音频处理管线,并通过安装 Cron Tab 来实现自动化调度。例如,每天晚上 12 点定时触发 `rsync` 同步,随后调用自动语音识别(ASR)管线进行文本转写。这个阶段甚至不需要做说话人识别(speaker recognition),直接输出为一个 CSV 文件。紧接着,系统会使用 Codex 的命令行工具(command line)对 CSV 文件进行后续处理。
* **输出目标**:最终需要输出两个内容。一个是经过格式化的 HTML 文件(可由 Markdown 编译而来),包含今天的概述(summary)和行动项(action items),介绍今天发生了什么以及对会议进行分解;另一个是 `meetings` 文件夹,专门存放当前会议的输出。 * **技术演进**:虽然目前在 live recording 中使用的是 Gemini,但演讲者要求将这些逻辑全部转换成 Codex 的 prompt,让 Codex 通过 prompt 去调用并执行相关任务。
---
面向 AI 的 Skill 设计与自动化配置流程
演讲者希望将该功能打造成一个“AI-oriented skill”(面向 AI 的技能)。它的核心应用场景是:演讲者未来会将其作为一个公开的 GitHub 仓库(public GitHub repo),用户只需将该 GitHub 仓库的地址直接贴给 AI 并说“你去给我装一下”,AI 就能自己阅读 README、克隆仓库并完成安装。
在安装完成后,AI 需要引导用户进行初始化配置。所谓的配置并不是让用户手动操作,而是由 AI 来主导完成。整个自动化配置和运行流程的设计细节如下:
* **环境与依赖配置**:AI 需要负责下载 ASR、配置 Python 环境,并跑通 Codex 等相关的命令行工具。 * **初始验证**:为了验证环境是否配好,仓库中可以附带一个非常简单的、trivial 的示例音频文件(如 10 秒钟的 M4A 文件),让 AI 跑通整个闭环验证流程。 * **Cron Tab 自动化**:AI 需要引导并自动配置好 Cron Tab,以便每天晚上定时调用一个 Python 文件。因为此时 Python 环境已经就绪,该文件会自动执行 ASR 生成 CSV,再调用 Codex 语法完成后续工作。 * **安全备份与提示**:演讲者特别强调,AI 在配置 Cron Tab 的过程中,**必须先备份原有的 Cron Tab**,绝对不能删掉用户原有的内容,而是要使用 `append` 追加。同时,AI 还需要提醒用户保持电脑开机,并且必须一直开启语音备忘录,系统才能正常工作。
---
七步走执行计划与模型选择的插曲
为了将这个技能文件夹彻底搞好并发布到 GitHub 上,演讲者为 AI 梳理了一条清晰的七步走执行路径,并提出了严格的文档规范。他强调所有文档(包括 PRD 和 RFC)都必须按照要求用英文撰写。如果现有的 prompt 是中文的,AI 需要将其翻译成英文,且**绝对不能缩写**。因为这些 prompt 都是经过反复迭代、踩过很多坑才沉淀下来的,必须直接、完整地照译。
* **第一步**:进行相关调研,思考接下来的具体行动方案。 * **第二步**:创建好文件夹并进行脚手架初始化(scaffold),按照要求撰写英文的 PRD 和 RFC 文档。 * **第三步**:设计并开发好相关的命令行界面(CLI),跑通测试,并更新好 `working.md` 文件。 * **第四步**:利用 TTS(文字转语音)等工具生成一个 10 秒钟的示例音频文件放入仓库,并亲自跑一遍初始验证流程。 * **第五步**:完整写完 README 等说明文档。 * **第六步**:进行隐私与安全检查(privacy & security check),去掉敏感信息。 * **第七步**:初始化一个 GitHub 仓库,提交(commit)到 master 分支并 push 上去。
在交代的尾声,演讲者评估这个任务的难度是 AI 能够比较“comfortable(舒适)”完成的。中间发生了一段有趣的对话,演讲者随口说现在打算用 Deepseek,但紧接着又改变了主意决定还是用 GPT。旁人好奇地问他为什么要用 Deepseek,演讲者有些无奈地自嘲道,是因为自己之前“三大运营商都满了”(暗示其他主力模型的额度或并发限制已达上限),所以当时只能用 Deepseek。
## Notable quotes > [00:00](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=0s) 一边讲一边实时(real-time)
> [00:00](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=0s) GPT real-time whisper
> [00:35](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=35s) 100% 的音频输入都将直接来自语音备忘录(Voice Memos)
> [00:35](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=35s) intake_skill
> [02:29](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=149s) AI-oriented skill
> [02:29](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=149s) 你去给我装一下
> [03:48](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=228s) 必须先备份原有的 Cron Tab
> [04:27](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=267s) 绝对不能缩写
> [05:47](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=347s) comfortable(舒适)
> [05:47](https://www.youtube.com/watch?v=-s9Oj3koBTc&t=347s) 三大运营商都满了
## Mentioned OpenAI, GPT real-time whisper, Voice Memos, Codex, Gemini, GitHub, DeepSeek, Python, Cron Tab, ASR, TTS
[Source](https://www.youtube.com/watch?v=-s9Oj3koBTc)