Sora2はなぜスムーズなアニメーションが得意なのか？

アニメーションの滑らかさという点で、Sora2の素晴らしいパフォーマンスを見て、私はずっと不思議に思っていた。ダンス中のサルの手足の自然な揺れや、スケーターのターンの滑らかな軌道など、Sora2が生成するアニメーションには独特の "マジック "がある。他のモデルと比べて、何がそんなにスムーズなのか？

動きの軌道を正確にモデリングする物理エンジン

Sora2のテクニカルドキュメントを注意深く読むと、動きの軌跡のモデリングに非常に力を入れていることがわかる。例えば、アイススケート選手の映像を生成する場合、人体の動きのパターンを考慮するだけでなく、氷の摩擦が動きに与える影響も正確に計算している。これは、他のツールでよく遭遇する「滑る」という問題を思い出させる。つまり、キャラクターが動くときに足が地面と一致しないのだが、Sora2はこのペインポイントを完璧に解決しているようだ。あるデータによると、軌道予測の精度が前作に比べて40%近く上がっているそうで、これがスムーズさの秘訣なのかもしれない。

フレーム間コヒーレンスのブレークスルー

私が最も驚いたのは、Sora2が速い動きに対応していることだ。バスケットボールのシーンで、プレイヤーがジャンプしてバスケットシュートを打つシーンをテストしたことを覚えているが、膝を曲げてから各中間フレームを空けるまでの移行が特に自然だった。これは、改良された時間的注意メカニズムによるものだと後で知った。要するに、いくつかのモデルのように「フレームごとに」ではなく、各フレームの前後にある複数のフレームの内容を参照するのだ。このグローバルな視点によって、まるで本物のアニメーターがキーフレームを描いているかのように、アクションに一貫性が生まれるのだ。

正直なところ、Sora2は完璧ではない。私のテストでは、シーンが特に複雑な場合（例えば、複数のオブジェクトが同時に動いている場合）、まだ時折わずかなばらつきがあることがわかった。しかし、他のツールと比べると、この問題はずっと少ない。業界の友人によると、これはトレーニングデータに含まれる高品質なアニメーション素材の割合が高いためではないかという。彼らのトレーニングセットには、プロのアニメーションスタジオの作品が多数含まれているという。

結局のところ、滑らかなアニメーションにおけるSora2の強みは、本質的に物理法則と動きの美学を深く理解していることにある。単に映像をつなげるだけでなく、動きの本質を「理解」しているのだ。もしかしたら、プロのスタジオと遜色のないアニメーションが作れるようになるかもしれない！