Name: ランウェイのGen 3がAIビデオ界に旋風を巻き起こす！ (Gen 3 by Runway takes the AI Video space by storm!)
Uploaded: 2024-06-21T11:30:00.000Z
Duration: 19 min 14 s

程度の副詞

So guys, just yesterday we saw what is perhaps the largest competition to OpenAI's incredible Sora video generator model yet.

つい昨日、オープンエイの驚異的なSoraビデオジェネレーターモデルに対する、おそらく最大の競合が登場した。

様態の副詞

A lot of you probably have already seen videos about it, but I want to bring you some new and interesting use cases and value propositions that you might not see in other places.

おそらく多くの人がすでにビデオで見たことがあると思うが、他の場所では見られないような新しく興味深い使用例や価値提案をお届けしたい。

基礎受動態

So for those of you who don't know, this is Gen 3, which is produced by RunwayML up here.

ご存じない方のために説明しておくと、これはRunwayMLがプロデュースするGen3だ。

Now, RunwayML is special in the AI video space because they were the first ones to make the actual first commercial video generation model.

さて、RunwayMLがAIビデオ分野で特別な存在なのは、彼らが実際の最初の商用ビデオ生成モデルを最初に作ったからだ。

And now they have Gen 3 Alpha, so the third iteration.

そして今、第3世代アルファが誕生した。

It's a step towards building general world models.

一般的な世界モデルを構築するための一歩だ。

And yeah, right off the bat, you can see this thing is damn impressive.

そして、そう、すぐに、これが非常に印象的であることがわかるだろう。

つまり、本当に、本当にいいんだ。

I think in the motion department, it does struggle a tad.

動きの部分では、少し苦戦していると思う。

But I mean, all of these examples are really, really quite impressive.

しかし、これらの例はどれも本当に、本当に素晴らしいものだ。

I think it doesn't have necessarily the same fidelity that Sora has, but it looks really, really cool and the motion is super impressive.

ソラのような忠実さは必ずしもないと思うけど、見た目はすごくクールだし、モーションもすごく印象的だ。

あるいはこんな感じでもいい。

This has a little bit better detail in my mind, and it's really cool to see how temporally consistent the buildings are as they pass by the camera.

私の中では、この方がディテールが少し良くなっていて、カメラが通り過ぎるときに建物が時間的に一貫しているのがとてもクールだ。

And I mean, you can do very special effect-esque style things as well.

つまり、特殊効果的なこともできるんだ。

The possibilities, as always with AI video, are truly endless.

AI映像の可能性は、いつものように本当に無限だ。

So apparently, it's been trained with highly descriptive, temporally dense captions, enabling imaginative transitions like, you know, a street being flooded with water.

そのため、非常に描写力が高く、時間的な密度が濃いキャプションで訓練されており、例えば、道路が水で溢れるといった想像的なトランジションが可能になっているようだ。

Not something you're going to see every day.

毎日見るようなものではない。

Or, you know, we have like this drone shot that moves through a castle.

あるいは、城の中を移動するドローンのようなショットもある。

つまり、これは本当に素晴らしいことなんだ。

Like, I would believe that that is an actual video, not some AI generated thing.

AIが生成したものではなく、実際の映像だと信じたい。

Here we can see some water glistening on a window through a train as it passes by.

列車が通り過ぎるとき、窓ガラスに水が光っているのが見える。

Again, wouldn't really be able to tell right off the bat that that is AI.

繰り返しになるが、それがAIだとすぐに判断することはできないだろう。

Here is another one that people found really, really impressive.

もうひとつ、人々が本当に、本当に印象的だと感じたものを紹介しよう。

This is clearly, you know, some more GoPro footage of someone walking through some tunnels, and then it pans over and you see a runway.

これは明らかに、誰かがトンネルを歩いているところをGoProで撮影したものだ。

Look at the effect of the flashlight as it moves over the graffiti on the runway.

滑走路の落書きの上を移動する懐中電灯の効果を見てください。

I mean, you can tell it's a different texture there.

つまり、そこで違う質感だとわかるんだ。

I mean, no doubt in my mind, all of these examples blow me away, and I cannot wait until we get access.

つまり、間違いなく、これらの例には圧倒される。

We still don't have access to this, but it appears that access is going to be coming to Gen 3 very, very soon.

我々はまだこれにアクセスできないが、Gen 3にはすぐにアクセスできるようになるようだ。

And I can imagine people are going to be willing to pay a lot for access to this thing because it is the closest thing to Sora that we've seen so far in terms of like prompt following, coherency, and temporal stability.

そして、プロンプトの追従性、一貫性、時間的安定性といった点で、これまで見た中で最もソラに近いものだからだ。

Photorealistic humans, that's obviously a really big deal when you're trying to tell stories.

フォトリアリスティックな人間、それは物語を伝えようとするとき、明らかに大きな意味を持つ。

Humans are most often a part of a lot of stories that are told in filmmaking, TV shows, etc.

人間は、映画製作やテレビ番組などで語られる多くの物語の一部であることがほとんどだ。

So there's some really great-looking humans in here, and obviously that is some bias in the training data there.

だから、この中には本当に見栄えのする人間もいるし、明らかにトレーニングデータに偏りがある。

They purposefully set out to make sure that it's going to be able to produce some pretty realistic-looking people.

彼らは意図的に、かなりリアルな人物を作り出すことができるようにした。

そして、彼らは絶対にそうしてきた。

I mean, look at how cinematic this scene looks, and look at the glare of the sun and everything.

つまり、このシーンがいかに映画的に見えるか、太陽のまぶしさなどを見てほしい。

One thing I will say that I am seeing a lot is pretty much every one of these videos, no matter what it is, if it's a person or like this over here, everything looks like it's being shot in slow motion, which isn't necessarily a downside because, think about it, you can always speed up a video.

ひとつだけ言えるのは、これらのビデオのほとんどすべてが、それが何であれ、人物であれ、こっちの写真のように、すべてがスローモーションで撮影されているように見えるということだ。

If for some reason it produces videos that look like they're in slow motion, well, we can always just speed up the video.

もし何らかの理由でスローモーションのような映像ができても、いつでも映像を速くすればいい。

Like, that totally looks like it's in slow motion, no?

スローモーションに見えるだろ？

Maybe they purposefully trained it on slow motion video?

わざとスローモーションで撮影したのだろうか？

Like, we could just download these videos and speed them up and they would look completely normal.

例えば、これらのビデオをダウンロードしてスピードアップすれば、まったく普通に見えるようになる。

I mean, shockingly realistic, but I just find that really intriguing.

つまり、ショッキングなほど現実的なんだけど、それがとても魅力的なんだ。

I mean, there we have like a monster walking around.

つまり、モンスターが歩き回っているんだ。

That looks like a shot from a movie legitimately.

正真正銘、映画のワンショットのようだ。

つまり、とても印象的なんだ。

The way that the light bounces and reflects off of the fur, it is so darn cool.

光が毛皮に反射して、とてもクールだ。

Here's like some, I don't know, rock person walking through the woods.

よくわからないけど、ロックな人が森の中を歩いている。

Like, this thing has an understanding of physics and the world in a way that reminds me of the Sora demos.

ソラのデモを思い起こさせるような、物理学と世界に対する理解がある。

This is a true competitor to Sora, I think, more so than anything else we've seen.

これはソラの真のライバルだと思う。

And that's really, I think, what is causing all of the stir around Gen 3.

それこそが、第3世代をめぐるすべての騒動の原因だと思う。

人々がこのことについて話しているのをずっと目にしてきた。

つまり、ええ、チェックしてみてください。

I mean, that's some, that's a pretty good understanding of physics and paper and how it's going to interact in this alleyway with the wind tunnel.

つまり、物理学と紙と、それがこの路地で風洞とどう相互作用するかについて、かなりよく理解しているということだ。

Here's another one that again looks like it's in slow motion.

これもまたスローモーションのようだ。

I mean, why does it look like it's so in slow motion?

というか、なんでこんなにスローモーションに見えるんだ？

But the way he like moves his thumb and everything, that just looks so legit.

でも、親指の動かし方とか、すごく正当に見えるんだ。

And these are obviously going to be cherry picked here.

そして、これらは明らかにここで選ばれたものである。

バクテリアの詳細なクローズアップ。

つまり、とても合法的に見えるんだ。

クレイジーでクレイジーなコンセプトだ。

エキサイティングなのは間違いない。

さまざまなスタイルをご覧ください。

Here's like an anime, animated film art style.

まるでアニメのようなアートスタイルだ。

They've really gotten close to solving motion at this point.

この時点でモーションの解決に近づいている。

I mean, it's just, again, here's another one that looks like it's in slow motion.

つまり、ここでもスローモーションのように見えるんだ。

I mean, what would you guys create if you had access to this?

つまり、もしこれにアクセスできたら、君たちは何を作るだろう？

It seems like access is going to be coming.

At least it was hinted in like a few days.

少なくとも、数日後にはほのめかされていた。

We're going to be able to get access to this.

アクセスできるようになるんだ。

So I'd love to do like a live stream, testing it out, hanging out with you guys, doing some prompts.

だから、ライブストリーミングのようなものをやって、テストしたり、みんなと一緒に遊んだり、プロンプトを出したりしたいね。

I don't mind paying for credits to use something like this because it's groundbreaking technology.

画期的な技術だから、こういうものを使うためにクレジットを払うのは構わない。

Like I said, biggest Sora competitor that we've seen so far, at least in my mind.

さっきも言ったように、少なくとも僕の中では、これまでで最大のソラのライバルだ。

Anyways, that's sort of the TLDR on Gen 3.

とにかく、これがGEN3に関するTLDRのようなものだ。

Now let's get into some of the more interesting use cases.

それでは、より興味深い使用例を見ていこう。

Some of the bigger value propositions that you might not see in other places.

他の場所では見られないような大きな価値提案もある。

So Cristobal here on Twitter brings up that there's a lot of unexplored latent horror to discover.

クリストバルはツイッターで、未解明の潜在的な恐怖がたくさんあると指摘している。

So the applications for horror movies or horror genres are very, very much already alive, as we can see by this terrifying generation.

つまり、ホラー映画やホラージャンルのアプリケーションは、この恐ろしい世代を見ればわかるように、とてもとてもすでに生きているのだ。

Like we've got a monkey here who is learning to play guitar on the street.

路上でギターを習っている猿がいるようにね。

And again, it's just a really nice smooth shot.

そしてまた、本当に素晴らしいスムーズなショットだ。

I don't know what it is with runway and the slow-mo stuff, but it's super weird.

滑走路とスローモーションの関係はよく分からないけど、超気持ち悪い。

Oh yeah, he works for runway, so that's why he's got access to it.

そうそう、彼はランウェイで働いているんだ。

そして、こちらで水を飲むことができる。

It's able to do like these animated things with text popping up on the screen.

画面上にテキストが飛び出すアニメーションのようなことができるんだ。

字幕リスト動画再生

ランウェイのGen 3がAIビデオ界に旋風を巻き起こす！ (Gen 3 by Runway takes the AI Video space by storm!)

stuff

weird

essentially

absolutely