Babelfish.ai:浏览器运行的语音实时转录与翻译应用
일반 소개
Babelfish.ai 是一个基于 Huggingface 트랜스포머.js 和 Supabase Realtime 构建的实时转录和翻译应用。该应用可以在浏览器中加载大模型并在本地运行,实现实时的语音转文字和翻译功能。用户可以通过简单的设置和操作,快速将语音内容转录为文字,并翻译成多种语言,适用于多种场景,如会议记录、跨语言交流等。

기능 목록
- 实时语音转文字:使用 OpenAI Whisper 实现高效的语音转文字功能。
- 实时翻译:支持将转录的文字翻译成 200 种语言,使用 Meta 的 NLLB-200 模型。
- 多客户端广播:通过 Supabase Realtime 将转录和翻译内容实时广播给订阅的客户端。
- 本地运行:无需服务器支持,所有操作均在浏览器中本地完成。
- 简单部署:支持本地运行和部署到 GitHub Pages。
도움말 사용
安装与运行
- 로컬 운영::
- 복제 창고:
git clone https://github.com/supabase-community/babelfish.ai.git
- 프로젝트 카탈로그로 이동합니다:
cd babelfish.ai
- 复制环境变量文件:
cp .env.local.example .env.local
- 设置 Supabase 凭证:在
.env.local
文件中填写你的 Supabase 凭证。 - 종속성을 설치합니다:
npm install
- 运行开发服务器:
npm run dev
- 打开浏览器访问
http://localhost:3000
即可使用。
- 복제 창고:
- 部署到 GitHub Pages::
- 在 GitHub 仓库设置中配置你的 secrets。
- 将代码推送到
main
分支,GitHub Actions 会自动部署到 GitHub Pages。
使用功能
- 实时语音转文字::
- 打开应用后,点击“开始转录”按钮。
- 允许浏览器访问麦克风,开始说话。
- 语音内容会实时显示为文字。
- 실시간 번역::
- 在转录过程中,选择目标语言。
- 转录的文字会自动翻译成所选语言,并显示在界面上。
- 多客户端广播::
- 订阅客户端可以通过 Supabase Realtime 接收转录和翻译内容。
- 在不同设备上打开应用,登录相同的 Supabase 账户,即可同步接收内容。
고급 설정
- 사용자 지정 모델:可以在
translationWorker.js
中替换为其他支持的翻译模型。 - 界面定制:修改
index.html
노래로 응답src
目录下的文件,可以自定义应用界面和功能。
© 저작권 정책
이 글은 저작권이 있으며 무단으로 복제해서는 안 됩니다.
관련 문서
댓글 없음...