Made with Unity: AI シリーズでは、Unity の人工知能関連製品を使って、クリエイターが様々な目的をもって制作した Unity プロジェクトを紹介しています。今回は、OpenCV Spatial AI Competition に最近提出された作品の事例をご紹介します。このコンペティションに提出された数多くの印象的な事例を通して、Unity を使ったロボット工学、コンピュータービジョン、強化学習、および拡張現実を目にすることができます。

ML-Agents ツールキット は、研究者やゲーム開発者が強化学習（RL）を用いて Unity 環境でエージェントを構築し、訓練することを可能にします。RL は、エージェントがどのようにしてタスクを実行するかより、どのようなタスクを実行する必要があるかのほうをより簡単に指定できる場合に有効です。エージェントは、環境からの観測とタスクの報酬信号を用いて、タスクを完了するための行動を自ら選択することを学習します。この夏、インターン生が行った強化学習と ML-Agents の改善についてご紹介します。

Unity の AI 部門では、ロボット工学、コンピュータビジョン、機械学習の分野における素晴らしい研究や製品に取り組んでいます。今夏、Unity にやってきたインターン生も、実際の製品に影響を与える重要な AI 関連のプロジェクトに取り組みました。

Unity Computer Vision チームが開発した Perception Package は、Unity のリアルタイム 3D エンジンを使って合成データを作るユーザーを支援するパッケージです。合成データは、コンピュータービジョンの開発者が、機械学習に基づくビジョンアプリケーションにおいて、偏りの排除、エッジケースの生成、データの多様性の向上、画像の完全なラベリングなどを行って、実世界のデータセットを補完するために使われます。今夏、Unity にやってきたインターン生は、実際の製品に影響を与える AI プロジェクトに取り組みました。

Unity Robotics チームは、Unity エンジンのパワー、また Unity の持つアセットや統合のしやすさを活かし、ロボット工学のシミュレーションを可能にすることに注力しています。また、シミュレーション能力を拡張するロボット工学に特化したツールやパッケージの構築も並行して行っています。2021 年の夏、Unity にやってきたインターン生は熱心に働き、Unity の活動に貴重な貢献をしてくれました。以下のセクションでは、インターン生たちのプロジェクトや経験についてご紹介します。

Unity 2021.2 ベータ版では、物理演算機能のユーザビリティが改善され、新しいユースケースを実現可能にするとともに、ロボット工学分野でのオーサリングのしやすさとデバッグのしやすさを実現しています。