Whisper

Whisper

Whisperとは

Whisper(ウィスパー)は、OpenAIが開発したオープンソースの自動音声認識(ASR:Automatic Speech Recognition)モデルです。68万時間以上の多言語音声データで訓練されており、英語を含む99言語の音声認識に対応しています。高い認識精度と多言語対応力で、音声テキスト変換の分野で広く利用されています。

表:Whisperの要点まとめ
ひとことで言うとOpenAIが公開した、高精度な音声認識モデル。
どこで使う会議の文字起こし、動画の字幕作成、電話応対の記録、インタビューの書き起こし。
注意点オープンに公開されており、自社環境で動かせば音声が外に出ない。

高い認識精度

Whisperは、多様な音声環境(ノイズ、アクセント、方言など)においても高い認識精度を維持します。従来の音声認識システムが苦手としていた、専門用語や固有名詞の認識、複数言語が混在する音声の処理などにも優れた性能を示します。日本語の認識精度も高く、議事録作成や字幕生成などに活用されています。

図:Whisperによる文字起こし
1音声を用意録音ファイル
▶
2モデルを選ぶ精度と速度のバランス
▶
3文字起こし実行自社PCでも可能
▶
4人が校正固有名詞を修正
▶
5議事録に活用AIで要約も可能

オープンソースと利用方法

Whisperはオープンソースとして公開されており、ローカル環境で自由に利用できます。tiny、base、small、medium、largeの5つのモデルサイズが用意されており、処理速度と精度のバランスに応じて選択できます。OpenAI APIのAudio APIを通じてクラウドで利用することも可能です。

活用事例

Whisperは、議事録の自動作成、動画の字幕生成、ポッドキャストのテキスト化、カスタマーサポートの通話分析、アクセシビリティ向上など、多岐にわたる場面で活用されています。他のAIツールと組み合わせることで、音声から要約やタスク抽出を自動化するワークフローも構築可能です。