Galaxy Z Fold6のAI翻訳/通訳機能にびびる
すごい。発表会でAIによる通訳/翻訳機能が強化されているのは見て知っていたけど、こんなに使い勝手がいいとは思わなかった。
PDF丸ごと翻訳
仕事柄英語のマニュアルを読まざるを得ないことも多いです。数ページのPDFならChatGPTに食わせるか、全コピーしてdeeplへ分割ペーストしながら翻訳してもらうこともできます。
ただ、300ページとか400ページとなると面倒くさくてそんなことやってられない。
そこへGalaxyの翻訳機能。今まで使っていたS24 Ultraでもできたのだと思うけど使ってなかった。マジで後悔。Z Fold6で使ってみました。
使い方は簡単。対象のPDFをSamsung Notesに読み込ませ、画面右上にあるAIボタンを押す。要約と翻訳があるんだけど、まずは翻訳ボタンを押すと、開いているページのレイアウトを崩さずに日本語へ変換されていく。
このまま次のページへ行って、少し待つとまた日本語へ変換される。ボリュームや内容にもよるのだろうけど、だいたい5-6秒待つと日本語へ変換される。
これはすごい。これでもう英語のPDFを読むのも億劫にならなくていいかもしれない。
ついでに要約も試したけど、こちらは参考にはなる、程度かな。普段ChatGPTやPerplexityで要約してもらっていて、あの精度に慣れているので、それと比べると見劣りする感じ。
変換している様子を動画にしてみたので、どうぞ。目の前でレイアウト崩さず日本語に変換される様子には感動すらしました。
リアルタイム通訳
こちらも超便利。相手が喋っている言葉をリアルタイムに日本語変換してくれる機能です。
最近はyoutubeにも自動翻訳がついたので、意味が分かる程度の翻訳でいいならyoutubeの機能で十分。
しかしセミナー会場で同通がいない英語トーカーだったり、ましてや中国語や韓国語だとまったく手が出ないことも多い。
そこでZ Fold6(というかGalaxy)の通訳機能。最初この機能というかアプリがどこにあるのか分からなかったのだけど、画面上部からスワイプして出るクイックメニューに「通訳」というボタンがあり、そこから起動します。
このアプリには会話モードとリスニングモードがあり、プレゼンなどを通訳してほしい場合はリスニングモードで聞きます。
youtubeの英語動画で試してみました。英語の聞き取り精度はすごい。日本語翻訳は「意味は分かる」程度で、精度は高くない。けど、スマホ単体でできる(クラウドではない)ところがすごい。時代はここまで来たかと感動です。
Z Fold6なら画面分割して、リアルタイム通訳を見ながら、手書きメモなんてこともできる。最初リスニングモードがあるのを知らなくて、会話モードで取っていましたが、これができると考えただけで鳥肌立ちます。
デフォルトでインストールされている言語パックは英語と日本語だけだけど、追加ダウンロードすれば中国語や韓国語にも対応できます。一言語500MBぐらいのファイルサイズでした。
まじかー、クラウド経由でなく、デバイスだけで通訳/翻訳できる時代になったのかー。
個人的に中国語と韓国語は翻訳してほしいことがよくあるので、インストールしておきました。
確かめるために韓国の人のyoutube動画を見ながらリアルタイム翻訳してもらいました。ピントがyoutubeに合っちゃって、翻訳画面がぼやけてますが、リアルタイムに日本語翻訳されるのはまたしても鳥肌立ちました。
会話モードも普通に使える
通訳デバイスとかアプリって結構出てきましたが、使う機会がなかったし、あったとしてもデバイス越しに会話した時のラグが気になるなぁと思っていました。
しかし、試しにZ Fold6の通訳アプリの会話モードで試してみました。
例えば「こんにちは、ボクの名前は〇〇です。□□という会社でプロジェクトマネージャーをしています。本日は来年をターゲットにしている資本提携の契約書について話し合いたいと思います。よろしくお願いします。」と喋って、ここで言葉を止めると、流暢な英語でZが喋ってくれます。
うわ、これはすげぇわ。ボクでも聞き取れるきれいな英語で喋ってくれる。
これが10年前にあれば、あの時苦労しなかったのになぁ・・・という場面がたくさん思い返されます。
例えば北京の空港のレストランで昼食を取っていた時のこと。塩味が足りなかったので「塩を持ってきてもらえますか？」とウエイトレスに話しかけると、「はぁ？」みたいな顔をされました。
一応その会話を辞書で調べて、発音記号も調べて発音したんですが、四声が全然だめだったようです。
この時に今のZがあれば苦労しなかったのに・・・とか。
日本にいても道に迷ってる外国人がいれば、Zの通訳アプリを立ち上げた上で「どうしたの？」と話しかけられますね。相手が英語ダメで、ドイツ語だけしか喋れなくてもドイツ語パックをインストールすればいいだけだし。
いや、すごい時代になったもんです。Samsung、すげぇぞ。