サイエンス
映像の質量と速度から完璧な音を作り出す次世代AIモデルをKAISTとSony AIが開発
映像の「見た目」だけで音を作る時代は終わった。KAISTとSony AIが共同開発した新技術『PAVAS』は、映像から物体の「質量」と「速度」を力学的に推定し、現実の物理法則に忠実なリアルな音響を生成する。映画やゲーム体験を変革する「Physical AI」の最前線に迫る。
Sony AIは、ソニーグループの持つ多様な事業領域においてAI技術による変革を推進するために設立された研究開発組織です。ゲーム、イメージング、センシング、ガストロノミーなどの分野で、AIを用いた新しい体験の創出を目指しています。本プロジェクトではKAISTらと共同で、映像の物理的特性を音響に変換するPAVASの開発に携わり、映画やゲーム制作における音響生成の自動化・高度化に寄与しています。