「幼稚園児にもわかる」翻訳 × 説明アプリ
#アイデア #翻訳 #AIアプリ #プロダクト企画
hr.icon
コアシーンの定義
言語を変えるだけでなく、専門用語・難しい概念を誰でもわかる言葉に変換する。
専門用語が飛び交う場(会議・講義・カンファレンス)で、自分だけがこっそりリアルタイム平易化を受け取る
リアルタイムで物事が進行している時(例えばLT会、カンファレンス等)、平易化を受けて内容理解促進、質問準備をする、交流会に備えるなど。
登場人物
リスナー(主役)
その場で理解できていない人。翻訳機能を使うことで、スタートラインに立ちたい。
スピーカー(発信者)
専門用語を使って話す人。翻訳機能を使うことで、多くの人に聞いてもらいたい。合意が必要。
何がわからんかったなどのフィードバック等があるといいかも。
チーム管理者(B2Bの場合)
翻訳機能を使うことで、多くの人に参加してもらいたい。合意が必要。
AIエンジン
音声認識(STT)・平易化・翻訳を担うバックエンド。リアルタイム性のためレイテンシが重要。
機能一覧
入力系
テキスト入力 翻訳文章や単語を貼り付けて即時変換。専門用語を平易な言葉に置き換える
音声入力 話しかけるだけで変換。会議・講義・日常会話でハンズフリー利用
カメラ・画像翻訳 書類・看板・スクリーンショットを撮影して翻訳+平易化
会話モード(リアルタイム) 周囲の音声をマイクで拾い、リアルタイムで平易化して表示
学習
パーソナル学習機能 「もう知ってる単語」は強調が減っていく。使えば使うほど自分専用にチューニング
https://scrapbox.io/files/69c29e159ea0767ac85228cd.pnghttps://scrapbox.io/files/69c350b89ea0767ac852ef08.pnghttps://scrapbox.io/files/69c353569ea0767ac852f30a.png
cloud君便利〜
Nikoyaka9dd.iconカキーン
https://scrapbox.io/files/69c390079ea0767ac853752b.png
セッション後のサマリー
会議・講義終了後に「今日出てきた用語一覧+説明」をまとめて確認
保存はオプトイン(デフォルト保存なし)
Scrapboxやメモアプリへのエクスポート対応
録音中インジケーター
アプリ起動中は画面上部に「録音中」バッジを表示
スピーカーへの強制同意は不要だが、見えるところに表示するのは最低限の誠実さ
低遅延パイプライン
発話からテキスト表示まで2秒以内
用語検出・平易化を並列処理
STT候補:Whisper / Web Speech API / iOS・Android標準API
code:a
状況:
課題:
状況:LT. 質疑応答が素早く行われる場面
課題:難解な専門用語などのリアルタイムでの理解が難しい
状況:
課題:
導入
聞き手
その発表分野に対してどの程度の知識があるのかを知っておく必要がある
発表者(あるいは運営)
発表を録音できるようにしておく
発表者モードと聞き手モードを分ける
発表者が得たいもの
発表前→
発表中→
発表後→
結論→いらない!利他的で良いです!
聞き手のメリット→専門用語・話の理解度向上、
発表者のメリット→
単語をクリックする使用なら、、、 
聞き手の専門用語・内容理解度を知って次回以降の発表改善に活かせる、
リアルタイムで発表者にも理解度が示される使用なら、、、
発表者は聞き手の理解度を伺いながら発表できる
専門用語をクリックしてもらう解決策(?)
説明を半分だけ見せて、クリックしてもらう
付加価値(?)
リアルタイムで発表者にも理解度が示されるkoto.iconなしで
発表者の「あの単語なんだっけ、、」に対応koto.iconなしで
反応機能をつけるkoto.iconなしで
既存リアルタイム文字起こし(だけ)のサービス
サービス 特徴                         用語解説
Otter.ai   英語の会議・講義のリアルタイム文字起こし。学生に人気 なし
Notta   日本語対応。AI要約・ToDoリスト自動生成         なし
CLOVA Note LINE系。日本語に強い。話者識別あり           なし
ProVoXT 日本語リアルタイム文字起こし。議事録向け       なし
Rimo Voice 日本語特化。話し言葉を自然にテキスト化         なし
Wordly.ai 多言語リアルタイムキャプション。イベント向け     なし
Plaud.ai   カスタム用語辞書を登録して精度を上げる機能あり     辞書登録のみ(解説はしない)
既存用語解説(だけ)ツール
サービス         特徴
Jargon Buster(Word Studio) テキストを貼ると専門用語を検出し、平易な言葉に置き換える
ChatGPT等のLLM     手動で聞けば解説してくれるが、リアルタイムではない
名前候補
table:_
名前 由来                
Naruhodo(なるほど) 日本語の「なるほど」
Wakaru 日本語の「わかる」 直球。海外展開時にもユニークに響く
Clearhear Clear + Hear 「はっきり聞こえる」。音声サービスらしい
mofumo(モフモ) 「もふもふ」+ memo 難しい言葉をもふっと柔らかくしてくれる
mimitto(ミミット) 耳(ミミ)+ ちょっと 耳元でちょっと教えてくれる妖精みたいな存在
fumumu(フムム) 「ふむふむ」 理解していくときの擬音。考えてる顔が浮かぶ
ミミヨミ(MimiYomi) 耳で聞いて読める。文字起こし感が出る
キキワカル(KikiWakaru) 聞いてわかる。機能そのまま
コトバほどき 難しい言葉をほどいてくれる
HearClear 聞こえる + クリアになる。2つの機能が1語に
LiveSub+ ライブ字幕 + α(解説)。プラスが解説を示す
ナルホドAI 「なるほど!」が起きるAI。体験が名前
ことばクリア 言葉がクリアになる。日本語話者に直感的
ミミAI(MimiAI) 耳のAI。聞くことを助けるAIだとわかる
table:_
名前 意味 響き
LiveScript+ ライブ文字起こし + α プラスが用語解説を示す
LiveCaption+ ライブ字幕 + 解説 字幕を超えた存在
LiveNote ライブでノートが取れる 学生に刺さる。ノート代わり
価格帯
既存の文字起こしサービスの個人プラン相場は月額1,000〜2,000円
hr.icon
コメント欄
taiseiue.icon ざっとした理解ができて質疑応答ができる、はそんなに目指さなくていいのでは...
学習をスキップした人が質疑応答に参加するべきでないと思う
Nikoyaka9dd.iconそれはそう
Nikoyaka9dd.iconその場でにわかに理解された状態で質疑に参加されると発表者側もうーんとなるのでは
Nikoyaka9dd.iconいや、理解できてたらいいのか......?
taiseiue.icon 知識を偽って(?)質問されるとゴニョゴニョ
Nikoyaka9dd.icon要はこういうことでしょ?っていう状態で質問されるとゴニョゴニョ
hr.icon
宿題
必要最低限の機能
画面構成
機能要件(登場人物を全員出す必要がある)
技術選定?
taiseiue.icon 特に気持ちがなければ土台を今晩作ってしまいたいと思っているがどうか?
Nikoyaka9dd.iconよし
taiseiue.icon 時速200km出せる素地を作っておきます
githubもつくて
誰がどこの分野担当するか
NEXTACTION
画面構成考える > jigglypuff929.icon Nikoyaka9dd.icon
機能要件書き出す > koto.icon
↑上2つ目を通しておきましょう> みんな
開発を高速でできるようにしておく > taiseiue.icon
デザインメモ
ロゴは考える人(オレンジ&濃いグレー)予定<急ぎます
koto.iconff6b35の色を一旦使いました。
koto.iconタイトルフォント?ロゴフォント?
リスナー画面は背景に薄いクリーム色に右下考える人のシルエット
フォントはKosugi丸ゴシ
Nikoyaka9dd.iconリスナー側のUIデザイン
https://scrapbox.io/files/69c3f17c9ea0767ac853f6cc.png
https://scrapbox.io/files/69c3f1cf9ea0767ac853f71f.pnghttps://scrapbox.io/files/69c3f1df9ea0767ac853f734.png
NEXTNETXTACTION
UI/UXあたりをごねごねする > jigglypuff929.iconNikoyaka9dd.icon
リアルタイムで文字起こしできるかを試す > taiseiue.iconkoto.icon
リアルタイムで翻訳できるかを試す>taiseiue.iconkoto.icon
このアプリのペルソナとかや、アプリを使うことのメリットなどを考える > たき.icon
https://scrapbox.io/files/69c2c36d9ea0767ac8524a98.png