グーグルのオープンソース機械学習システム「TensorFlow」--開発者が現状を報告

　Googleは1月13日、オープンソース提供している機械学習システム用ツールキット「TensorFlow」について、都内でメディア向け説明会を開催した。TensorFlowの開発者が概要を解説したほか、オープンソース化の目的や今後の展望を述べ、さまざまな質問に直接答えた。

TensorFlow開発者のMike Schuster氏

　説明を担当したのは、Googleエンジニアリング部門リサーチサイエンティストのMike Schuster氏。同氏は、奈良先端科学技術大学で工学博士号を取得し、NTTでニューラルネットワークや音声認識システムの研究開発に携わるなど、日本と縁の深い人物である。

　Googleでは音声認識システムの開発に取り組み、同社初の日本語および韓国語用の音声認識モデルを構築。その後、大規模ニューラルネットワークの実現を目指すプロジェクト「Google Brain」に参加し、現在はTensorFlowの開発を担当している。

　同氏の開発するTensorFlowは、Googleとして第2世代に相当する機械学習（マシンラーニング）システム。ニューラルネットワークに膨大なデータを与えて“学習”させ、新たなデータを適切に解析させる、というシステムだ。このところ深層学習（ディープラーニング）という用語をよく耳にするが、ニューラルネットワークとディープラーニングは変わりないそうだ。

　第2世代のシステムだけあり、TensorFlowは強力かつ高速になっている。複雑なモデルを構築でき、モデルの設定を動的に変えられる。しかも、モデルに設定可能なパラメータの数が、TensorFlowは数十億個レベルに増えた。学習用のデータは、数十億個も与えられる。機能がモジュール化されており、研究者が新たなアイデアを短時間でモデル化できるようになった。

　そして、マルチスレッドやマルチプロセッサ、マルチマシンの分散処理により、処理が初代システムに比べ2倍以上速くなった。その結果、膨大なデータを与えても高速に学習され、モデルが機能するまでにかかる期間が短縮された。

　TensorFlowで使うモデルは、大きく分けて「Dtataflow Graph（データフローグラフ）」と「Sequence Model（シーケンスモデル）」の2種類。

　前者は、写真の被写体がどのようなものであるか推測したり、写真内の看板から数字や文字を読み取ったりすることに使える。例えば、花の写真を大量に“学習”させておくと、新たに“見せられた”写真に写っているものが花である確率を数値で示す。現在は、単に花と別のものを区別するだけでなく、ハイビスカスやダリアといった花の種類まで見分けられるレベルに達した。

猫の写真を正しく猫と認識（出典：Google）

Google Photosでの応用例（出典：Google）

　後者のSequence Modelは、時系列に音が並んだ音声、文字が一列に並んだテキストなどを扱うモデル。音声に適用して音声認識、テキストに適用して機械翻訳といったことに応用可能。実際にTensorFlowで翻訳を実行させたところ、現行の機械翻訳と同じレベルの結果が得られたという。

　さらに、Dtataflow GraphとSequence Modelを組み合わせると、写真を画像認識し、その内容を文章で表現する、といった自動処理まで成功している。

写真の内容を文章で説明（出典：Google）

左下の写真のように誤認識も発生する（出典：Google）

　そんな驚くレベルの処理を自動実行できるTensorFlowをオープンソース化した理由について、Schuster氏は、多くの研究者が多彩なアイデアを手軽に実現できるツールを広く公開することで機械学習の知見を深めたい、と説明した。機械学習に関する特許も申請はしているが、それを振りかざして他者を排除するつもりはないとした。

　TensorFlowの技術はすでにGoogle内部で使われており、多くのユーザーが「Gmail」「Photos」「Maps」「YouTube」「Translation」といったサービスを介して恩恵を受けている。同様の応用がGoogle外部でも広まれば、TensorFlowの改善にもつながると期待する。

実際のサービスで使われる事例も増えている（出典：Google）

　今後は、メモリ使用量の削減や処理速度の向上はもちろん、現在のLinuxおよびOS Xに加えWindowsでも使えるようにして、利用可能なOSやデバイスを増やす考え。

　また、TensorFlowのマルチマシン処理はGoogleの社内システムでしか実行できず、現行オープンソース版は事実上マルチマシンに対応していない。この問題も、これから解決したいとした。