『Effectron』の概要

iPad Pro 2021から搭載されたLiDARセンサーを使い、取得した地形にエフェクトを描画することで3次元的なエフェクト演出ができます。

自宅を映画『TRON』の様なグリッドに覆われた空間にし、オフィスの廊下を洞窟にし探検することもできます。地形に描画するエフェクトは20種類から選択可能です。（ダウンロード: App store『Effectron』）

掲載メディア
テッククランチ:
iOSアプリ開発者に訊く：LiDARで空間を演出するアプリ「Effectron」 （アフェクション）

開発について

開発環境

• macOS 10.15.6
• Xcode 11.6
• Unity 2020.1.0f1
• ARFoundation 4.0.2
• ARKit 3.5
• Universal RP 8.2.0
• iOS(iPad) 14(preview)
• Amazon Lightsail

コアな機能

• LiDARセンサーを活用した地形メッシュの取得
• 取得した地形メッシュへのエフェクト描画
• 取得した地形メッシュのオクルージョン
• 人物シルエットの検出
• 人物のオクルージョン
• 人物シルエットへのエフェクトの描画
• 空間にパーティクル/オブジェクトの配置
• カメラの録画/写真アプリへの保存
• 課金システムの構築
  躓いた箇所のTips
  【Unity】LiDAR+ARFoundation+ShaderGraphで地形メッシュのエフェクトを作る

企画の意図

LiDARの可能性

ARアプリを使った際に、平面を検知するのに時間がかかったり、トラッキング不安定だったりとAR表示がうまくい経験が多くの方にあったかと思います。しかし、 LiDARセンサーがiOS端末に搭載されたことにより画像認識以外の方法ににより空間情報の取得が可能となり、上記の問題が大きく改善されました。また、地形情報が取得できることにより、地形のオクルージョン(前後関係の矛盾を解消するマスク処理のようなもの)が可能となり、ARKitにこれまであったピープルオクルージョンと組み合わせることで表現の幅が大きく広がりました。これらの機能を文字や言葉で表すことは難しいと感じ、多くの人に可能性を感じてもらいたく視覚的に分かるアプリを作りました。

👾👾アフェクションから👾👾

株式会社アフェクションはARアプリをはじめ、インタラクティブコンテンツ、WEBアプリの企画・制作を行っております。ご相談ございましたらお気軽にご連絡ください。

メール: cgmotion@affexion.jp