描述
claude-video 是一个开源的 GitHub 仓库,旨在通过使 Claude 这一 AI 代理能够与视频内容互动和理解,从而扩展其功能。该项目提供了一个 `/watch` 技能,自动化了 Claude 的视频摄取整个过程。当提供一个视频 URL 时,该工具首先下载视频,然后提取关键帧,最后转录音频内容。
阅读更多
完成这些步骤后,所有提取的数据——视频帧和转录内容——都交给 Claude。这使得 Claude 能够有效地“观看”视频,分析其视觉和听觉信息,并根据对内容的全面理解作出响应。这一能力显著拓宽了 Claude 能够执行的任务类型,从仅限文本的交互扩展到丰富的多媒体分析。
该仓库被结构化为一个自包含的代理技能包,使开发者能够轻松集成到现有的 Claude 设置中。它包括各种组件,如不同代理的插件(如 `.agents/ plugins`、`.claude-plugin`、`.codex-plugin`)、文档、钩子和测试。该项目还支持最新的 `yt-dlp` 进行视频下载,并利用管理的 WhisperX 转录进行准确的音频到文本转换。
claude-video 非常适合希望构建更复杂的 AI 代理,能够处理和解释复杂多媒体输入的开发者和研究人员。它为将视频理解添加到 Claude 提供了一个强大的框架,为内容分析、摘要和互动 AI 体验的应用开辟了新的可能性。该项目的开源特性鼓励社区贡献和进一步开发。
- 类别AI 智能体构建工具
- 定价模式开源
- 部署云端
- 平台网页版
claude-video的核心功能
通过 `/watch` 技能进行视频下载
从视频中提取帧
使用 WhisperX 进行音频转录
将数据交给 Claude 进行分析
结构化为代理技能包
支持最新的 `yt-dlp`
包括 `.agents/ plugins`
具有 `.claude-plugin`
包含 `.codex-plugin`
全面的文档
包括会话管理的钩子
专用测试套件
管理的 WhisperX 转录
开源许可证(MIT)
活跃开发,最近有提交
claude-video入门
克隆仓库:使用 `git clone` 从 GitHub 下载 claude-video 项目。
安装依赖:按照 `docs/install` 目录中的安装说明设置所需的库和工具。
配置 Claude:将 claude-video 技能集成到您的 Claude 代理环境中,可能需要根据 `README.md` 中的建议修改配置文件。
执行 `/watch` 技能:在您的 Claude 代理中使用 `/watch` 命令提供视频 URL 进行处理。
查看 Claude 的输出:分析 Claude 基于其处理的视频内容所做的响应和见解。
贡献:探索代码库并为项目的发展做出贡献,遵循 `CONTRIBUTING.md` 中的指南(如果存在)。
claude-video的使用案例
- 视频内容分析
- 自动视频转录
- AI 代理多媒体理解
- AI 和视频研究
- 内容审核辅助
- 教育内容处理








