ドリームマシン(テキストからビデオへのモデル)

ドリームマシン
開発者ルマラボ
初回リリース2024年6月12日
タイプテキストからビデオへのモデル
Webサイトlumalabs.ai/ドリームマシン

Dream Machineは、Luma Labsによって開発され、2024年6月にリリースされたテキスト動画変換モデルです。ユーザーの指示や静止画に基づいて動画出力を生成します。Dream Machineは、リアルな動きを捉える能力で高く評価されていますが、一方で、トレーニングデータの透明性の欠如を指摘する批評家もいます。

歴史

Dream Machine が作成した映画予告編「Monster Camp」では、あるシーンの背景にモンスターズ・インクのキャラクター、マイク・ワゾウスキが登場します。

Dream Machineは、サンフランシスコに拠点を置く生成人工知能企業Luma Labsが作成した、テキストから動画を生成するモデルである。同社は以前に3Dモデル生成器のGenieを作成したことがある。2024年6月12日に一般公開され、同社は作成した動画の例とともにXの投稿で発表した。 [ 1 ]公開後まもなく、ソーシャルメディアのユーザーはMidjourneyで生成された画像の動画バージョンや、『真珠の耳飾りの少女』などの芸術作品の動く再現、 DogePicard facepalmSuccess Kiddetracted boysなどのミームを投稿した。[ 2 ] [ 3 ] [ 4 ] [ 5 ]架空のアニメ映画『 Monster Camp』の予告編である動画が、Luma LabsによってXアカウントに再投稿された。プラットフォーム上のユーザーは、この動画がモンスターズ・インクシリーズの美学を盗用していると批判し、同シリーズのキャラクターであるマイク・ワゾウスキが予告編に登場することも指摘した。 [ 6 ]エレノア・アルギロプロス監督が投稿した、ドリームマシンで制作したピクサー風の古代エジプトの少女アニメーションの別の動画もオンラインで話題になった。[ 7 ]

機能

2024年6月現在、ユーザーはGoogleアカウントでサインアップし、プロンプトを入力するか静止画像を使用することで、Dream Machineで5秒間、1360×752ピクセルの動画を作成できます。[ 8 ] Dream Machineは、独自の大規模言語モデルに基づいてプロンプトを変更します。ユーザーはDream Machineを使用して、1日に10本の動画を作成でき、無料で30本の動画を作成できます。このプログラムでは、Standard、Pro、Premierのサブスクリプションプランも提供されており、それぞれ120本、400本、2,000本の動画を作成できます。Dream Machineのウェブサイトでは、動画ではテキストや動きを描写するのが難しいと述べています。[ 9 ] Luma Labsは、Dream Machine向けに開発者に優しいAPIをリリースする予定であると発表しました。[ 2 ]リリースの翌週、Luma Labsは動画の拡張機能、発見機能、動画内編集機能を追加すると発表しました。[ 10 ]

受付

批評家たちは、Dream Machineのリリース時に、OpenAIが作成したテキスト変換モデルであるSoraや、別のテキスト変換モデルであるKlingと激しく比較した。 [ 2 ] [ 11 ] The VergeのCharles Pulliam-Mooreは、生成AIの「強気なファン」は「[Dream Machine]を斬新なイノベーションとすぐに呼んだ」が、そのトレーニングデータが一般に公開されていないことに言及した。[ 6 ] TechRadarのMark Wilsonも、Dream Machineのトレーニングデータが何であるかが不明であると指摘し、「個人使用やGIFゲームの改善以外の可能性は限られている可能性がある」と述べたが、Dream Machineは「今後登場するより高度な(そして間違いなくより高価な)AIビデオジェネレーターの試用版として、確かに楽しいツールである」と書いた。[ 9 ]トムズガイドのライアン・モリソンはドリームマシンを「これまでで最高のプロンプト追従および動作理解AIビデオモデルの1つ」であり、「生成AIビデオの印象的な次のステップ」と評したが、「まだ必要なものには達していない」とも述べた。[ 11 ]マッシャブルのチェイス・ディベネデットは、ソーシャルメディアで広まっているユーザー作成のドリームマシンビデオを「不気味に動く」と「ハリーポッター風」と評した。[ 2 ]

参考文献

  1. ^ LeClair, Dave (2024年6月12日). 「First look — Lumaの新型Dream Machineは、私たちがずっと望んでいたAI動画作成ツールになるかもしれない」 . Tom's Guide . 2024年6月17日時点のオリジナルよりアーカイブ。 2024年6月19日閲覧
  2. ^ a b c d DiBenedetto, Chase (2024年6月15日). 「Luma AI Dream Machine:概要と使い方」 . Mashable . 2024年6月19日閲覧
  3. ^ Curtis, Charles (2024年6月18日). 「Dream Machine AIが古典的なミームを動画に変換、その結果は予想外」 . For The Win . 2024年6月19日時点のオリジナルよりアーカイブ。 2024年6月19日閲覧
  4. ^ Stanley, Alyse (2024年6月17日). 「Luma Dream Machineを使ってミームをアニメ化する人々 — ベスト5の例」 . Tom's Guide . 2024年6月19日閲覧
  5. ^ Thalen, Mikael (2024年6月18日). 「AIの伝道師たちは、『Distracted Boyfriend』ミームが動画化されて驚き続けている」 . The Daily Dot . 2024年6月19日閲覧
  6. ^ a b Pulliam-Moore, Charles (2024年6月18日). 「AI動画ツールがローンチ、すでにディズニーのIPをコピー」 The Verge . 2024年6月18日時点のオリジナルよりアーカイブ。 2024年6月19日閲覧
  7. ^ Adarlo, Sharon (2024年6月15日). 「このAI生成ピクサー風アニメーションは、あなたの心を揺さぶるかもしれない」Futurism誌2024年6月19日時点のオリジナルよりアーカイブ2024年6月19日閲覧
  8. ^ Growcoot, Matt (2024年6月17日). 「このAIビデオジェネレーターは無料で利用可能、待機リストは不要」 . PetaPixel . 2024年6月19日閲覧
  9. ^ a b Wilson, Mark (2024年6月13日). 「AI動画向けのOpenAI Soraのライバルが登場 – 今すぐ無料で使える」 . TechRadar .オリジナルより2024年6月19日時点のアーカイブ。 2024年6月19日閲覧
  10. ^ Morrison, Ryan (2024年6月17日). 「Luma Dream Machine AIビデオジェネレーターが大規模アップデートを実施 — 今後の展開は?」 Tom 's Guide . 2024年6月19日時点のオリジナルよりアーカイブ。 2024年6月19日閲覧
  11. ^ a bモリソン、ライアン (2024年6月13日). 「Luma Dream Machineを7本のAI動画でテストしてみた — Soraとの比較」 . Tom's Guide . 2024年6月17日時点のオリジナルよりアーカイブ。 2024年6月19日閲覧