openwhispr-transcribe

openwhispr-transcribe

Provides tools for local meeting speaker analysis and hybrid cloud transcription, supporting resumable transcription and alignment.

Category
访问服务器

README

<p align="center"> <img src="micro-app/Assets/AppIcon.png" width="128" alt="OpenWhispr Transcribe icon"> </p>

<h1 align="center">OpenWhispr Meeting Transcriber</h1>

<p align="center"> Transcription de réunions longue durée sur macOS avec texte GPT, diarisation locale, identification assistée des intervenants et reprise sans double facturation. </p>

<p align="center"> <img alt="macOS 13+" src="https://img.shields.io/badge/macOS-13%2B-111111?logo=apple"> <img alt="Apple Silicon" src="https://img.shields.io/badge/Apple%20Silicon-arm64-6f42c1"> <img alt="Node 24" src="https://img.shields.io/badge/Node.js-24-339933?logo=nodedotjs&logoColor=white"> <a href="https://github.com/arnaudlopez/openwhispr-meeting-transcriber/actions/workflows/transcription-tests.yml"><img alt="Tests de transcription" src="https://github.com/arnaudlopez/openwhispr-meeting-transcriber/actions/workflows/transcription-tests.yml/badge.svg"></a> <a href="LICENSE"><img alt="Licence MIT" src="https://img.shields.io/badge/licence-MIT-2ea44f"></a> </p>

Adaptation open source de OpenWhispr, distribuée sous sa licence MIT. Ce dépôt n’est pas un produit officiel du projet amont.

Pourquoi ce projet ?

Les réunions réelles cumulent souvent plusieurs difficultés : enregistrements longs, écho, voix distantes, limites de taille des API et attribution incertaine des locuteurs. Cette adaptation sépare le travail en étapes contrôlables :

  1. FluidAudio détecte localement les groupes de voix et produit un extrait par groupe.
  2. L’utilisateur écoute les extraits et confirme les identités proposées.
  3. GPT‑Transcribe produit le texte final français, découpé en morceaux reprenables.
  4. Nemotron 3.5 ASR Streaming fournit les repères temporels locaux.
  5. L’alignement est effectué morceau par morceau pour éviter la dérive sur les réunions longues.
  6. Le résultat est écrit en Markdown et en JSON autonome, puis affiché dans le Finder.
flowchart LR
    A["Audio / vidéo"] --> B["FluidAudio local"]
    B --> C["Extraits de voix"]
    C --> D["Validation humaine"]
    A --> E["GPT‑Transcribe"]
    A --> F["Nemotron local"]
    D --> G["Diarisation validée"]
    E --> H["Alignement par morceaux"]
    F --> H
    G --> H
    H --> I["Markdown + JSON autonome"]

Fonctionnalités

  • micro‑app SwiftUI native avec icône et lanceur macOS ;
  • choix du fichier source et du dossier de destination ;
  • conservation exacte du nom source (Réunion client.mp4Réunion client.md) ;
  • détection automatique de 1 à 8 groupes acoustiques ;
  • extraits audio écoutables avant transcription ;
  • plusieurs groupes pouvant être rattachés à une même personne ;
  • profils vocaux locaux facultatifs, jamais écrits sans confirmation explicite ;
  • modèles gpt-transcribe, GPT‑4o Transcribe, GPT‑4o Mini, Whisper‑1 et modèle diarize ;
  • clé personnalisée conservée dans le Trousseau macOS ;
  • découpage près des silences, cache immédiat de chaque appel réussi et reprise après échec ;
  • alignement GPT ↔ Nemotron indépendant pour chaque morceau cloud ;
  • sortie Markdown lisible et sidecar JSON contenant toutes les preuves de reprise ;
  • nettoyage automatique des fichiers temporaires uniquement après réussite ;
  • affichage du fichier terminé dans le Finder, sans l’ouvrir avec une autre application ;
  • serveur MCP utilisable depuis Codex ou un autre client compatible.

Prérequis

  • macOS 13 ou supérieur sur Apple Silicon ;
  • Node.js 24 (.nvmrc fourni) ;
  • Xcode Command Line Tools / compilateur Swift ;
  • ffmpeg (brew install ffmpeg) ;
  • OpenWhispr installé dans /Applications/OpenWhispr.app pour ses runtimes natifs ;
  • une clé API OpenAI disposant de crédits ;
  • environ 1 Go libre pour FluidAudio, Nemotron et leurs caches locaux.

Installation rapide

git clone git@github.com:arnaudlopez/openwhispr-meeting-transcriber.git
cd openwhispr-meeting-transcriber

nvm use
npm ci

# Compile FluidAudio et installe l’export ONNX Nemotron vérifié.
npm run transcription:setup

# Construit, signe localement et installe la micro‑app.
npm run micro-app:install

open "$HOME/Applications/OpenWhispr Transcribe.app"

Le build enregistre le chemin absolu du clone dans le bundle de l’application. Après avoir déplacé le dépôt, reconstruisez la micro‑app ou définissez OPENWHISPR_TRANSCRIBE_ROOT pendant le développement.

Configurer la clé OpenAI

La méthode recommandée consiste à saisir la clé dans l’application : elle est alors stockée dans le Trousseau macOS, et non dans le dépôt.

Pour un usage en ligne de commande ou via MCP :

cp .env.example .env.local

Puis renseignez localement :

OPENAI_API_KEY=

.env.local, les clés, bases vocales, enregistrements, modèles, caches et builds sont ignorés par Git. Ne placez jamais une vraie clé dans .env.example.

Utilisation de la micro‑app

  1. Choisir l’enregistrement et le dossier de sortie.
  2. Lancer Analyser les voix — cette étape est locale et gratuite.
  3. Écouter les extraits, confirmer les noms ou laisser un groupe anonyme.
  4. Lancer la transcription.
  5. À la fin, le Finder affiche le Markdown sélectionné.

Après une réussite, l’application supprime l’analyse intermédiaire, les extraits et le cache cloud séparé. Le JSON final reste autonome. Après un échec, ces fichiers sont conservés afin de reprendre sans répéter les appels OpenAI déjà réussis.

Utilisation en ligne de commande

node scripts/transcribe-meeting.mjs "/chemin/Réunion client.mp4" \
  --participants 2 \
  --speaker-labels 'speaker_00=Alice,speaker_01=Bob' \
  --no-db-write \
  --open

Sans --output, les sorties seront créées à côté de la source :

Réunion client.md
Réunion client.json

Pour reprendre ou réaligner gratuitement depuis un résultat existant :

node scripts/transcribe-meeting.mjs "/chemin/Réunion client.mp4" \
  --openai-transcript-json "/chemin/Réunion client.json" \
  --diarization-json "/chemin/Réunion client.json" \
  --no-db-write

Serveur MCP

Le serveur expose deux outils :

  • analyze_meeting_speakers : analyse locale et extraits de voix ;
  • transcribe_meeting : pipeline hybride complet et reprise depuis JSON.

Exemple de configuration générique :

{
  "mcpServers": {
    "openwhispr-transcribe": {
      "command": "node",
      "args": [
        "/CHEMIN/ABSOLU/openwhispr-meeting-transcriber/scripts/openwhispr-transcription-mcp.mjs"
      ]
    }
  }
}

La clé est chargée depuis .env.local par le pipeline local ; elle n’a pas besoin d’apparaître dans la configuration MCP.

Validation

npm run transcription:test
npm run micro-app:build

Les tests couvrent notamment les valeurs par défaut MCP, la non‑persistance des profils, le nommage des sorties et l’alignement indépendant des morceaux cloud.

Arborescence utile

micro-app/                         Interface SwiftUI et build macOS
scripts/analyze-meeting-speakers.mjs
scripts/fluidaudio-diarization.mjs
scripts/local-diarized-markdown.mjs
scripts/openwhispr-transcription-mcp.mjs
scripts/setup-fluidaudio-diarizer.mjs
scripts/setup-nemotron-model.mjs
scripts/transcript-alignment.mjs
patches/                           Adaptation FluidAudio / Sortformer
docs/local-diarized-markdown.md    Référence technique détaillée

L’architecture détaillée est décrite dans docs/ARCHITECTURE.md. Le README original d’OpenWhispr est conservé dans docs/UPSTREAM_OPENWHISPR_README.md.

Données, coût et confidentialité

  • FluidAudio, Nemotron, les profils vocaux et l’alignement s’exécutent localement.
  • Seuls les morceaux audio nécessaires à la transcription sont envoyés à l’API choisie.
  • Chaque morceau OpenAI réussi est mis en cache immédiatement jusqu’à la réussite finale.
  • Le coût dépend de la durée facturée par le fournisseur, pas du nombre de segments locaux.
  • Le dépôt ne doit jamais contenir de réunions, extraits vocaux ou bases d’identités.

Limites connues

  • L’attribution exacte des locuteurs reste plus fragile que le texte sur les audios avec écho.
  • Les groupes acoustiques peuvent sur‑segmenter une même personne ; l’étape humaine existe pour cela.
  • Les faibles scores d’alignement par morceau doivent être vérifiés si les timestamps ou les noms sont critiques.
  • Le build de la micro‑app fourni cible actuellement arm64.

Modèles et licences

  • Code de base OpenWhispr : MIT, voir LICENSE.
  • FluidAudio : récupéré et compilé par le script de setup depuis son dépôt amont épinglé.
  • Nemotron : poids non inclus dans Git, téléchargés depuis l’export sherpa‑onnx épinglé ; consultez la licence Open Model Development and Weight License du modèle NVIDIA avant redistribution.

Contribuer

Les corrections, retours sur la qualité de transcription et améliorations de la diarisation sont bienvenus. Consultez CONTRIBUTING.md avant d’ouvrir une pull request. N’ajoutez jamais au dépôt de clé API, d’enregistrement de réunion ou de profil vocal réel.

Pour signaler une vulnérabilité, utilisez la procédure privée décrite dans SECURITY.md, et non une issue publique.

Remerciements

推荐服务器

Baidu Map

Baidu Map

百度地图核心API现已全面兼容MCP协议,是国内首家兼容MCP协议的地图服务商。

官方
精选
JavaScript
Playwright MCP Server

Playwright MCP Server

一个模型上下文协议服务器,它使大型语言模型能够通过结构化的可访问性快照与网页进行交互,而无需视觉模型或屏幕截图。

官方
精选
TypeScript
Magic Component Platform (MCP)

Magic Component Platform (MCP)

一个由人工智能驱动的工具,可以从自然语言描述生成现代化的用户界面组件,并与流行的集成开发环境(IDE)集成,从而简化用户界面开发流程。

官方
精选
本地
TypeScript
Audiense Insights MCP Server

Audiense Insights MCP Server

通过模型上下文协议启用与 Audiense Insights 账户的交互,从而促进营销洞察和受众数据的提取和分析,包括人口统计信息、行为和影响者互动。

官方
精选
本地
TypeScript
VeyraX

VeyraX

一个单一的 MCP 工具,连接你所有喜爱的工具:Gmail、日历以及其他 40 多个工具。

官方
精选
本地
graphlit-mcp-server

graphlit-mcp-server

模型上下文协议 (MCP) 服务器实现了 MCP 客户端与 Graphlit 服务之间的集成。 除了网络爬取之外,还可以将任何内容(从 Slack 到 Gmail 再到播客订阅源)导入到 Graphlit 项目中,然后从 MCP 客户端检索相关内容。

官方
精选
TypeScript
Kagi MCP Server

Kagi MCP Server

一个 MCP 服务器,集成了 Kagi 搜索功能和 Claude AI,使 Claude 能够在回答需要最新信息的问题时执行实时网络搜索。

官方
精选
Python
e2b-mcp-server

e2b-mcp-server

使用 MCP 通过 e2b 运行代码。

官方
精选
Neon MCP Server

Neon MCP Server

用于与 Neon 管理 API 和数据库交互的 MCP 服务器

官方
精选
Exa MCP Server

Exa MCP Server

模型上下文协议(MCP)服务器允许像 Claude 这样的 AI 助手使用 Exa AI 搜索 API 进行网络搜索。这种设置允许 AI 模型以安全和受控的方式获取实时的网络信息。

官方
精选