音翻訳NOWとは ?

こんなお悩みはありませんか？

・仕事で英語などの外国語で行われるWeb会議が増えたが、発言内容がわからない。
・議事録作成で手いっぱいで会話の内容に集中できない。
・流行りのVRChatなどのメタバースで、せっかくなら外国人ともコミュニケーションを楽しみたいが、外国語が不安。
・YouTubeやPodcastなどで外国語を勉強したいが、外国語字幕と日本語字幕の両方が見られる優良素材は少ない。

「音翻訳NOW」が お悩みを解決!!

PC内で流れている音声をリアルタイム翻訳 !!

・音声をリアルタイムにAI文字起こし ＆ 文字起こし結果を瞬時にAI翻訳
・Zoom, TeamsなどWeb会議はもちろん、VRChatなどのメタバースにも対応!
・煩わしい翻訳デバイスや翻訳システムとの連携不要!
・24ヶ国語に対応。翻訳言語の組み合わせは552通り
・文字起こし結果も翻訳結果も自動で議事録作成
・意味や発音をその場ですぐインターネット検索

さらに今後の機能アップデート !!

リターンお渡しまでに機能実装予定 !!

この機能のアップデートにより、リアルタイムで対面の同時翻訳も可能になります!
そのため、

PC内で流れているリアルタイムの音声 と 対面でのリアルタイムの会話
の両方がリアルタイム翻訳可能になります !!

すでに機能は完成しており、対面の会話でのリアルタイム翻訳を模擬した動作確認において、英語、中国語、フランス語、日本語での正常動作を確認済み。その他20言語での動作確認と、実使用での動作確認を残すのみです。

※PC内で流れている音声のリアルタイム翻訳は24ヶ国すべて動作確認済みです。紹介動画をご覧ください。

紹介動画をご覧ください !!

「音翻訳NOW」を起動して Start を押すだけ!!

Zoomの音声など、現在PC内で流れている音声を認識し、

・単語単位のAI認識結果
・文単位のAI文字起こし結果
・AI翻訳結果
がリアルタイムに表示されます。

24ヶ国語から翻訳したい言語を選択

24ヶ国語に対応。翻訳言語の組み合わせは552通り

外国語文字起こし結果も、翻訳結果も、全文テキストとして取り出せる !!

だから、web会議全体や、動画全体などの文字起こし結果と翻訳結果を自動で瞬時に得られる!

例えば会議の議事録作成に便利 !! 外国語学習にも使えます !!

↓ 実際に取り出せるテキスト。 全体の会話の長さに制限はありません。

実使用例・翻訳精度をご覧ください

※ 紹介動画内と同じものです。

実例1. Zoom x 英語

実例2. VRChat x 英語

実例3. YouTube x 中国語

便利な補助機能

画面を透かす機能

翻訳結果を DeepL ウェブ版 にボタン一つで転送、
単語の意味や発音を詳細に検索できます。
そのままシームレスにインターネット検索も可能

外国語学習にも !!

音声の外国語文字起こしと翻訳結果の両方が得られるから、
聞き取れなかったことをそのままにしないで、その場ですぐ調べられます。

会議でのネイティブの発言や、あなたのお好みの動画/音声が、その場ですぐ学習教材に早変わり !!

教材を探す時間を、勉強の時間に変えられます。

QA

PCソフトによらず、
スピーカーやイヤホンから聞こえている音 = 現在PC内で流れている音
を認識対象としています。このため様々な音声の翻訳に対応しています。

Zoom, Teams, Google Meet, YouTube, Netflix, VRChat, windowsメディアプレイヤーなどで動作を確認しています。

BGMなどが流れている状況でも、発言を聞き分けて認識できます。

一部の音源や、BGM等ノイズの状況によっては、正常に認識できない音源がある可能性はございます。
VRChat: デスクトップモードでは動作確認済みですが、VRモードでは未実施です。
Steam以外のPCゲーム, Cluster: 動作確認はしていませんが、設計原理上対応可能です。

世界中で使われている OK Google! の認識AIを開発している、Googleの認識AIを使用しています。

世界中で使われているから、認識性能はお墨付きです。

世界一の翻訳性能として有名なDeepLの認識AIを使用しています。

DeepLはその精度の高さと、自然な翻訳結果が得られることで好評です。

24カ国の言語を相互に翻訳可能です。

英語、日本語、中国語、ブルガリア語、チェコ語、デンマーク語、ドイツ語、ギリシャ語、スペイン語、エストニア語、フィンランド語、フランス語、ハンガリー語、イタリア語、リトアニア語、ラトビア語、オランダ語、ポーランド語、ポルトガル語、ルーマニア語、ロシア語、スロバキア語、スロベニア語、スウェーデン語

例えば中国語を英語に翻訳することも可能。翻訳組み合わせは24x23=552通り

GoogleおよびDeepLに対応言語が増え次第、音翻訳NOWでの対応言語も増やす予定です。

音翻訳NOWは、"GoogleおよびDeepLが日夜研究開発している「クラウド上の最新の認識AI」"を使用しています。
そのため、音翻訳NOWの認識性能はリターンお届け後も日々向上していくことが期待できます。

ソフトウェアは買い切りであり、使用期限は無く、更新費用等はかかりません。
※後述するGoogle AI 利用料金はかかります。

さらに今後はGoogleとDeepL以外の認識AIも選択可能にする機能アップ開発も別途計画しています。

「応援購入金額 (ソフト購入金額)」 + 「Google AI 利用料金 (1分当たり2.31円の従量課金制)」
※2022/10/13日時点の価格
毎月最初の1時間までGoogle AI 利用料金 無料。以降従量課金。

例えば、毎週2時間の英語会議に加え、毎週2時間VRChatや英語勉強で音翻訳NOWを使用するようなヘビーユーザーの場合でも、
月額利用料金は約2079円です。

Googleからの利用料金メール通知機能、利用料金上限設定機能を使うことができます。

また利用料金はGoogleに直接お支払いいただきます。Narrative Labは利用料金に中間マージン等を設けていないため最安値です。

他社の翻訳デバイス(ヴォイスレコーダー型など)は、Web会議などPC内の音声を上手く翻訳できないことが多く、さらにデバイスとPCのBluetooth接続や有線接続など連携も複雑です。

音翻訳NOWは、ソフトを起動してStartを押すだけで、PC内の音声を翻訳できます。(事前の初期設定は必要です。一度行った初期設定は保存され、次回以降の起動時には初期設定不要です。)

他社指定の特定のWeb会議ツール・Web会議システムだけで翻訳できるものでは、それ以外の音源はもちろん翻訳はできません。

また、法人契約が必要なものや、月額5万円~と高額なものもあります。

ありません。

はい、もちろんです。例動画をご覧ください。

かなりのハイスピードの会話や切れ目が不明確なものなどの場合、やや翻訳が不正確になるケースもあります。
音声認識に話しかけるつもりで会話してもらえるよう相談することで、より正確な翻訳結果を得ることができます。

実例1.の動画のように、通常の会話として想定される程度の発言の長さと間隔であれば、意識せずとも良好に翻訳可能です。

・対応言語数の拡充
・翻訳結果の読み上げ機能
・会話内容の録音機能
・翻訳のための専門用語登録機能
・自分が発言した内容の指定言語への翻訳
・Google, DeepL以外の認識AIの選択機能

具体的時期や実現可否は未定ですが、リリース後半年から1年を目安にアップグレード版を順次リリース予定です。

当Makuakeでの応援購入にて今後のアップグレード版を使用する権利も得られます。(追加料金なし)

今後別途開発予定の類似機能の別アプリでは、従量課金単価を上げる予定ですが、当ソフトは金額に変更なく使い続けることができます。

仕様

動作環境・対応OS

Windows 10, Windows 11, Mac OS *2

動作確認状況

Win10 PC : ASUS UX550VD, Lenovo ThinkPad, Microsoft Surface Pro FJU-00014 で動作確認済み。

動作確認済み機種の中で最も古く性能の低いPCのスペック
・Microsoft Surface Pro FJU-00014
・2017年 発売
・Core i5-7300U 2.60 GHz
・RAM 4 GB

比較的古く、性能の低いPCでも正常動作を確認済み。

動作確認機種は今後増やす予定です。活動レポートをご確認ください。

*2: 他のプロジェクトにてmac版ソフトウェアを開発リリースした経験がありますが、当Makuake掲載開始時点では当ソフトのmacでの動作確認はできておりません。リターンお届けまでには開発完了する予定です。活動レポートをご確認ください。

スケジュール

2022/3 企画・開発開始
2022/7 メイン機能開発完了
2022/8 Makuake 準備開始
2022/10/14 Makuake 開始
~2022/12/30 Makuake 終了
~2023/1/31 リターン 音翻訳NOW 配布完了
2023/2/1 皆様からのフィードバックを元に機能開発開始

リターン

完成版ソフトウェア 「音翻訳NOW」 を配布

・音翻訳NOW ダウンロードリンクをMakuakeメッセージにてご連絡
ダウンロード期限：2023年2月1日～2023年7月30日
・音翻訳NOW セットアップ手順・操作説明書を送付
・音翻訳NOW ユーザーネーム・パスワードを発行

備考
・1応援購入につき1アカウント発行。ユーザーネームとパスワードを発行します。
・同一人物が使うPCであれば複数のPCにインストール可能。
・GoogleとDeepLの使用にクレジットカードの登録が必要です。

実行者紹介

Narrative Lab 鷹野です。

本ソフトウェア「音翻訳NOW」は、3製品目の Makuake実施 となります。
第一弾のリモートBGMケーブルでは目標金額の1281%を達成、
第二弾のHHKMでは2921%を達成し、
約650名のお客様に製品を届けることができました。

また第二弾HHKMでは、本体のUSB機器加え、Windows版およびMac版ソフトウェアを併せてリリースした経験があります。
さらに、活動の実績が認められ、PC周辺機器メーカーと製造委託契約を結ぶことができました。

第三弾となる今回も、誠心誠意取り組ませていただきます。

得られた利益の一部は子どもの支援団体に寄付させていただきます。

皆様どうぞよろしくお願いいたします。