プロジェクト一覧に戻る
視覚障がい者向け音声メールシステム
【概要】視覚障がいのある方が、音声だけで操作できるメールクライアント。
- 役割
- AI開発インターン
- 期間
- 2023年1月〜6月
- 案件
- Digipodium, Inc.(インド・ラクナウ)
- 規模
- 1名
| ~90% | 音声認識の精度 |
| ~50% | 操作時間の削減 |
01課題とアプローチ
課題
一般的なメールクライアントは、画面を見てキーボードを使えることが前提です。
アプローチ
すべての手順を音声ガイダンスで案内し、話したコマンドをメール操作に変換します。
02処理の流れ
- 入力 音声ログイン メールIDとパスワードで、音声によりログイン。
- ステップ 02 音声 → テキスト SpeechRecognitionで音声コマンドをテキスト化。
- ステップ 03 操作を選択 作成・受信箱・送信済み・ゴミ箱を音声で選択。
- ステップ 04 Gmail API Gmail APIでメールを送受信。
- 出力 音声フィードバック 結果を読み上げ、次の操作を案内。
03担当した内容
- Google Speech・Gmail APIとDjangoで、音声によるメールの作成・送信・読み上げを開発。
- 音声ログインと、受信箱・送信済み・ゴミ箱の各画面を実装。
- ER図・機能設計書・画面設計書とテスト仕様書を作成。
04使用技術
- Python
- Django
- SpeechRecognition
- Gmail API
- JavaScript
- Bootstrap
- SQLite