(curious electronic music) - All right, let's play a game real quick. Is this next video real or AI-generated?

(timer ticking) Go ahead, take your time. (timer dings) So, that was a real video. That was a video from a YouTube channel.

Now, what about this video? Real or AI-generated? (soft electronic music) Okay, that one's AI-generated.

Not a lot of giveaways, unless you happen to have memorized the geographical landscape around Mount Fuji and hunted for inconsistencies.

But, okay, what about this one? And, yeah, you guessed it already. This one's AI-generated too.

Okay, what about this one? Pay really close attention. Did you catch it? See, no, okay, that one was real, but the fact that you thought about it... So I, for the last week, have had full access to the newest and most advanced version of Sora, which is the AI video generation tool from OpenAI.

And the results that I've gotten from it are both horrifying and inspiring at the same time.

The last time I looked at this, nine months ago, this was a very private tool that was just unveiled.

They were just starting to show its capabilities, and so we were looking at other people's prompts. Actually, basically, it was OpenAI's carefully hand-selected prompts for what they wanted to show us, and we could learn some stuff from that.

But this time I just get the controls myself.

It's just an open text box. My wish is Sora's command, and that's actually kind of a lot of pressure.

You can type whatever you want, but I did not take this responsibility lightly. I basically, over the past couple days, have been taking every possible angle of asking Sora to make things for me.

I've asked for cartoon things. I've asked for objects, people, signs, actions, text, still life, everything you can imagine.

And I feel like I've come away with a pretty good sense of what it's good at, what it's bad at, and what it could actually be used for today.

But this is a powerful tool that's about to be in the hands of millions of people.

So consider this the first ever Sora review: the good, the bad, and the ugly. Let's jump in.

So, first of all, this is the UI. On the left side, you can explore other prompts that people have recently made, and then some featured ones where I suppose OpenAI is still going to curate some of the best results to showcase what it can do.

And if you hit the bookmark button on any of these, they'll show up in your saved tab. And what I like about these, again, is anything you click on, you can see obviously who made it, but you can also read exactly what they typed into the prompt box to get this result.

And I'll get back to that in a second. So, then, underneath that you have your library of all the videos I've generated from Sora prompts, anything I've tagged as a favorite from my own creations, and then uploads, which is any of the files that I've uploaded to Sora for it to make videos out of, another crazy feature that I'll get to in a second.

But then, lastly, you have your folders, so you can organize things that you've created into different folders, maybe for different projects or different themes or whatever, just to keep it somewhat organized.

So, okay, right off the bat, Sora is a tool after all, and so this feature of being able to see what other people are typing and then the results that they create from those prompts is both for inspiration but also for education, because it is really interesting reading how simple or how detailed some of these prompts are and then looking at what Sora generated and what it took creative liberties with to add on its own.

And then if you really like someone else's results but wanna adjust it in just a slight way for your own use, there's the remix feature.

So, you hit that button, and then you can describe specific changes you want it to make to that video for it to then generate a new one.

So for this one, for example, I like this shot, and the house is pretty cool, but I kind of want there to be a golf course on those cliffs in the background, right?

So, I type that, and then I can also change the resolution, which, as you can see, it will take longer for higher resolutions.

And then you also can specify exactly how much of a remix it is, so if it's a subtle, mild, or strong remix, which dictates basically how much it's willing to change the results from the original.

And then you can even
dial that in on a slider from one to eight if you want to.

I think adding golf course would be nice, but I wanna keep those
cliffs and the house, so it's a mild change, right?

Click "remix", wait a bit, and then, boom, you have the new creation, a fresh, new, artificially-generated video with that same house
and those same cliffs, but now 1080p and with a golf
course in the background.

Wild. I've found that 360p
videos take, actually, very little time to generate. I do not want to use
the word "create" here.

These are artificially-generated
from source material, but basically, a five-second, 360p video will generally take less
than 20 seconds to generate.

And they're being generated
on OpenAI servers, so it has nothing to do with
the speed of my computer or even my internet connection.

Once I send off the prompt,
it just takes that time, and then when it's done, it shows up, and I can download it if I want to.

And then, something like
a 1080p, 10-second video, it looks significantly better, but it also takes much longer.

It can take a couple of minutes for a really detailed
prompt and a 1080p video. And that's also right now, when almost no one else is using it.

I kind of wonder how
much longer it'll take when this is just open for anyone to use.

But that's roughly how long they've taken. And there's also the storyboard feature, which kind of looks and acts
like an online video editor where you can string together several prompts.

And it works best for stringing together several different actions in a row.

Basically, I've noticed it's hard to get a video to do several different things in succession with a single prompt, but you can use their built-in editor to string several prompts together in a row, and then Storyboard can help you blend them all together into one longer video, and that actually can work better instead.

So I've been playing with this all week, and I've been throwing dozens and dozens and dozens of prompts at it with all sorts of characters, different styles, different unique things in the video.

And so here are some observations that may surprise you, or maybe not.

So, one, it seems like there is no object permanence. So, we had AI-generated images, right?

And they've gotten... You've seen the arc of them getting better and better and higher resolution and realistic over time.

Now that we're doing videos, basically they're stringing together a bunch of different AI-generated photos in a row with some sort of continuity.

But for a video to make sense to a human, the objects kind of have to move in certain ways and behave in certain ways in the real world.

And so one of the most common dead giveaways from a flaw of an AI-generated video, especially with this tool, is just errors in object permanence.

So you'll see things like objects passing in front of each other or behind each other in ways that don't make sense.

You'll see stuff disappear or reappear out of thin air, especially if objects pass in front of them, but even sometimes without any real reason at all.

They can also just materialize and then vanish, like the smartphone in this imaginary tech reviewer's hands.

Boop, just gone. And there's also another one that's really common. Anytime something with legs has to walk, if you just watch the legs for long enough, they almost guaranteed will mess up which leg is the front leg and which is the back.

Just look at this one. Just try to watch one of the legs, and you'll see it happens. It switches back and forth from the front leg to the back leg.

This is super common. It happens all the time in these. And that brings me to another one of my biggest observations, which is it just struggles with physics in general, the way things move, which actually makes perfect sense, because physics would seem to require some understanding of what you're making a video about.

So, in the same way that large language models can struggle with hallucinations or putting together sentences that are technically incorrect or don't quite make sense, these video models will also struggle with putting together videos where the movement of the objects, since it doesn't know that they're objects, sometimes also doesn't really make sense.

Pretty much anytime I try anything remotely photorealistic, basically, you instantly notice that the movements don't look right.

It tends to look kind of slow motiony, actually, but then other parts won't be in slow motion, which our eye picks up on right away.

I was playing with making like CCTV-style footage, 'cause in my head, that's gonna be the easiest thing to fake.

People are gonna get their hands on this, they're gonna fake security camera footage all the time.

But even in this, you can see the movement of the humans is just slightly off. First it's a little slow, then it's fast for no reason.

It's just weird. Now, it seems to be decent sometimes at fluid dynamics for whatever reason. I've been very impressed with some examples of water rippling or crashing in waves, or moving in realistic waves.

It does happen sometimes. It can be actually pretty good-looking.

And same thing also with fire. Sometimes it can look pretty realistic, even if the smoke isn't. But, yeah, physics in general is definitely a weakness.

So then, if you know this, you can mess more with claymation or cartoon style, and then those irregularities and movement or physics become a lot easier to palate, because it feels more like a stylistic choice or an artistic choice.

But I'll get to the stuff that it actually does really well in a second.

But there is another feature that you might have seen around the internet a little bit with some other tools like this that takes a source image and can turn it into a video with a prompt.

So, people have been bringing memes to life and imagining what would happen right after some iconic image, just by typing into the AI video generator and asking Sora what it would look like, and Sora can do that too.

The difference with Sora, I've found, is it's way less likely to try anything that it recognizes as having any copyrighted or intellectual property whatsoever.

It's pretty picky. It actually does reject a lot of stuff.

Anything with any public figures or recognizing characters in general, or logos, it actually refuses to do it. It will also refuse if it thinks any subject you upload in the image is under 18 years old.

Makes sense. But I did upload this AI-generated image, which Dolly made, and asked it to make them all singing and dancing, and hit "generate", and it totally did it.

Again, it helps a lot that they are cartoon styled and not some super realistic scene, but this is a totally AI-generated video.

I also tried a few other images from my camera roll, and these just... It just gets weird. It just doesn't know the context of what direction any object was moving in the photo.

Again, it doesn't know physics, and so things just get really wonky.

It's impressive that it's AI-generated video, but you can tell pretty quickly that it's AI-generated video. So, all that being said, we've seen what it's good at, we've seen what it's not so good at, and you might be wondering, what is this tool actually for?

And I actually found a few things that are not so scary that are actually pretty good at. So, these are the things that I found, as of right now, that Sora can be used for: abstracts.

So, you can be as descriptive as you want and create all sorts of textures and colors and gradients to make an abstract shape move around in a way that essentially looks like it could be a screensaver or just some background piece or whatever you want.

I'm sure there's a world where someone's gonna make an NFT out of this stuff. Also totally weird.

But you can do abstract stuff for sure. I noticed it's getting better at reproducing text, especially when you ask it for specific text.

So, there are sometimes background garbled text in these videos, and that's gonna continue to happen, but I've found that, if I asked it for an individual title slide in a style, it actually could give me the correct text on that slide.

This animation it gave me of sketching the Empire State Building, this would make a killer title slide or even an intro to a documentary about the building, or Manhattan, or something like that.

I was very impressed. And then stop motion or cartoon-style characters.

Again, like I said before, cartoons don't necessarily have to have realistic movements or physics, so the errors in those things don't hit the eye as much, and so the characters still look like, dare I say, art.

They're characters, especially in scenes like this one.

The graffiti doesn't have to actually say real words for this to look normal. The bear doesn't have to have the correct number of fingers or toes.

It just looks like some album art come to life, basically, which I'm sure someone would find useful on social media somewhere.

And while we're at it, here's a couple other random prompts that impressed me.

I asked for Santa fighting Frosty the Snowman in the style of "Mortal Kombat", and it built a readable scoreboard.

I didn't ask for the scoreboard, but it built all that, with the names and everything, which is pretty crazy.

Immediately, again, the details are weird when you start looking at it, but this could be a good inspirational starting point.

And then I also asked for a video of a tech reviewer sitting at a desk, and I said, nothing about this fake plant, but Sora took the liberty of adding this exact fake plant here, which I said nothing about in my prompt.

And that is a convenient reminder of the other side of the tools like this, the unknown behind a lot of the tools.

Clearly we already know that these are AI-generated videos that have to come from some source material.

Are my videos in that source material? Is this exact plant part of the source material?

Is it just a coincidence? I don't know. OpenAI has talked about using publicly available media and data, and it's always, to me, been kind of a sketchy definition.

We don't know if it's everything. We don't know if it's too late to opt out, if we wanted to opt out.

And also, I have no idea how much energy this uses or if it is significantly more than the LLMs or Dolly we're using.

But still, the craziest part of all of this is the fact that this tool, Sora, is going to be available to the public, I guess around the time of this video publish, to everyone, to millions of people all at once.

And I mean, yes, it does a pretty good job with guardrails of refusing to do anything photorealistic, refusing to use actual people's likenesses or any dangerous or harmful acts.

And, yes, it does watermark every single generated video with this little animation here in the corner. But you can still crop watermarks.

And it's still an extremely powerful tool that directly moves us further into the era of not being able to believe anything you see online.

This Video is AI Generated! SORA Review

Marques Brownlee

🤖 Sora 소개: OpenAI의 새로운 AI 비디오 생성 도구

Marques Brownlee는 OpenAI의 최신 AI 비디오 생성 도구인 Sora에 대한 독점적인 접근 권한을 얻어, **그 결과가 끔찍하면서도 영감을 준다고** 밝혔습니다. 과거에는 OpenAI가 신중하게 선택한 프롬프트만 볼 수 있었지만, 이번에는 직접 제어할 수 있게 되었습니다.

🎨 Sora의 사용자 인터페이스 및 기능

Sora의 UI는 다른 사용자들이 만든 프롬프트를 탐색하고, **OpenAI가 선별한 최고의 결과물을 Showcase하는 기능**을 제공합니다. 마음에 드는 결과물을 북마크하여 저장할 수도 있습니다.

다른 사용자의 프롬프트와 결과물을 보면서 영감을 얻을 수 있으며, 필요에 따라 리믹스 기능을 사용하여 약간의 변경을 가할 수도 있습니다. **해상도 변경 및 리믹스 강도 조절도 가능**합니다.

스토리보드 기능을 통해 여러 프롬프트를 연결하여 더 긴 비디오를 만들 수 있습니다. **내장된 비디오 편집기처럼 작동하여 액션을 연결하는 데 유용**합니다.

⚠️ Sora의 한계: 물체 영속성 및 물리 법칙 오류

Sora는 물체 영속성에 어려움을 겪습니다. **물체가 갑자기 사라지거나 나타나는 현상이 자주 발생**합니다. 특히 다리가 있는 물체가 걸을 때 다리 움직임이 부자연스러운 경우가 많습니다.

물리 법칙을 제대로 반영하지 못하는 것도 단점입니다. **움직임이 부자연스럽고, 슬로우 모션처럼 보이는 부분**이 있습니다. CCTV 스타일의 영상에서도 사람의 움직임이 어색하게 느껴집니다.

하지만 유체 역학은 비교적 잘 구현하는 편입니다. **물결이나 파도, 불 등의 표현은 꽤 현실적**일 때가 있습니다.

✨ Sora의 강점: 추상적인 표현 및 텍스트 생성

Sora는 추상적인 표현에 강점을 보입니다. **다양한 텍스처와 색상을 사용하여 독특한 추상적 형태**를 만들 수 있습니다. 텍스트 생성 능력도 향상되어 특정 스타일의 제목 슬라이드를 만들 때 유용합니다.

스톱 모션이나 만화 스타일의 캐릭터도 잘 생성합니다. **비현실적인 움직임이나 물리 법칙 오류가 예술적인 선택처럼 보일 수 있기 때문**입니다.

🤔 Sora의 활용 가능성 및 우려 사항

Sora는 추상적인 배경 화면이나 소셜 미디어 콘텐츠 제작에 유용하게 사용될 수 있습니다. **가짜 식물을 추가하는 등 예상치 못한 디테일을 생성**하기도 합니다.

하지만 Sora가 학습한 데이터에 대한 우려도 제기됩니다. **어떤 데이터를 사용했는지, 옵트 아웃이 가능한지 등에 대한 정보가 부족**합니다. 또한, 에너지 소비량에 대한 정보도 부족합니다.

🔒 Sora의 안전 장치 및 미래 전망

Sora는 현실적인 묘사나 유명인의 이미지 사용을 거부하는 등 안전 장치를 갖추고 있습니다. **생성된 모든 비디오에 워터마크를 표시**하지만, 워터마크는 쉽게 제거될 수 있습니다.

Sora는 강력한 도구이지만, 온라인에서 보는 것을 믿을 수 없게 만드는 시대에 더욱 가까워지게 합니다. **현재는 짧은 비디오만 생성 가능하지만, 앞으로 더욱 발전할 것**입니다.

(신나는 전자 음악) - 좋아요, 게임 하나 빨리 해보죠. 이 다음 영상이 진짜일까요, 아니면 AI가 만든 걸까요?

(타이머 작동) 자, 시간 충분히 가지세요. (타이머 울림) 자, 이건 실제 영상이었어요. 유튜브 채널에서 가져온 영상이었죠.

자, 그럼 이 영상은 어떨까요? 진짜일까요, AI가 만든 걸까요? (잔잔한 전자 음악) 좋아요, 이건 AI가 만든 거죠.

단서가 많지는 않아요. 후지산 주변의 지리적 풍경을 외우고 모순점을 찾아다니지 않는 이상은요.

자, 그럼 이건 어떨까요? 네, 예상하셨겠지만, 이것도 AI가 만든 겁니다.

좋아요, 이건 어때요? 정말 집중해서 보세요. 눈치채셨나요? 아니요, 좋아요, 이건 진짜였어요. 하지만 잠깐이라도 고민했다는 사실이... 그러니까 저는 지난 일주일 동안 OpenAI의 AI 영상 생성 도구인 Sora의 최신 버전과 가장 발전된 버전을 완전히 사용할 수 있었습니다.

그리고 제가 얻은 결과는 끔찍하면서도 동시에 영감을 줍니다.

제가 마지막으로 봤을 때가 9개월 전이었는데, 그때는 매우 비공개적인 도구로 막 공개되었을 때였습니다.

그들은 막 그 기능들을 보여주기 시작했고, 그래서 우리는 다른 사람들의 프롬프트를 보고 있었습니다. 사실, 기본적으로 OpenAI가 우리에게 보여주고 싶어하는 것들을 신중하게 선택한 프롬프트였고, 우리는 그것으로부터 몇 가지를 배울 수 있었습니다.

하지만 이번에는 제가 직접 제어할 수 있습니다.

그냥 열린 텍스트 상자일 뿐입니다. 제 소원이 곧 Sora의 명령이고, 그건 사실 부담이 큽니다.

원하는 건 무엇이든 입력할 수 있지만, 저는 이 책임을 가볍게 여기지 않았습니다. 기본적으로 지난 며칠 동안 Sora에게 가능한 모든 각도에서 무언가를 만들어 달라고 요청했습니다.

저는 실사 같은 것들을 요청했습니다.

만화 같은 것들, 사물, 사람, 표지판, 행동, 텍스트, 정물 등 상상할 수 있는 모든 것을 요청했습니다.

그리고 저는 그것이 무엇을 잘하고, 무엇을 못하고, 오늘날 실제로 무엇에 사용될 수 있는지에 대한 꽤 좋은 감각을 얻었다고 생각합니다.

하지만 이것은 수백만 명의 손에 들어갈 강력한 도구입니다.

그러니 이것을 최초의 Sora 리뷰: 좋은 점, 나쁜 점, 추한 점이라고 생각해주세요. 바로 들어가 보시죠.

자, 우선 이게 UI입니다. 왼쪽에서는 다른 사람들이 최근에 만든 프롬프트를 탐색할 수 있고, OpenAI가 여전히 일부 최고의 결과를 선별하여 보여줄 만한 추천 프롬프트도 있습니다.

그리고 이러한 프롬프트에서 북마크 버튼을 누르면 저장된 탭에 표시됩니다. 제가 이 프롬프트에서 좋아하는 점은, 다시 말하지만, 클릭하는 모든 항목에서 누가 만들었는지 명확하게 볼 수 있을 뿐만 아니라, 이 결과를 얻기 위해 프롬프트 상자에 정확히 무엇을 입력했는지 읽을 수 있다는 것입니다.

이 부분은 잠시 후에 다시 설명하겠습니다. 그 아래에는 소라 프롬프트에서 생성한 모든 비디오 라이브러리, 제가 만든 창작물 중에서 즐겨찾기로 태그한 모든 항목, 그리고 업로드가 있습니다. 업로드는 소라가 비디오를 만들도록 업로드한 모든 파일이며, 이 또한 잠시 후에 설명할 또 다른 놀라운 기능입니다.

하지만 마지막으로 폴더가 있어서 만든 항목을 다양한 프로젝트나 테마별로 정리하여 어느 정도 체계적으로 관리할 수 있습니다.

자, 좋습니다. 우선 소라는 결국 도구이고, 다른 사람들이 입력하는 내용과 그 프롬프트에서 생성되는 결과를 볼 수 있는 이 기능은 영감을 얻기 위한 것이기도 하지만 교육용이기도 합니다. 왜냐하면 이러한 프롬프트 중 일부가 얼마나 간단하거나 얼마나 자세한지 읽어보고, 소라가 생성한 결과와 창의적인 자유를 발휘하여 무엇을 추가했는지 살펴보는 것이 정말 흥미롭기 때문입니다.

그리고 다른 사람의 결과가 정말 마음에 들지만 자신의 용도에 맞게 약간만 조정하고 싶다면 리믹스 기능이 있습니다.

이 버튼을 누르면 해당 비디오에 대해 변경하고 싶은 특정 사항을 설명하여 새로운 비디오를 생성할 수 있습니다.

예를 들어, 이 장면이 마음에 들고 집도 꽤 멋지지만 배경의 절벽에 골프 코스가 있으면 좋겠습니다.

그래서 그렇게 입력하고 해상도를 변경할 수도 있는데, 보시다시피 해상도가 높을수록 시간이 더 오래 걸립니다.

그리고 리믹스 정도를 정확히 지정할 수도 있습니다. 미묘한, 약한 또는 강한 리믹스인지 설정하여 원본에서 결과를 얼마나 변경할지 결정할 수 있습니다.

원하는 경우 슬라이더에서 1에서 8까지 조절할 수도 있습니다.

골프 코스를 추가하면 좋겠지만 절벽과 집은 그대로 두고 싶으니 약한 변화를 주는 거죠.

"리믹스"를 클릭하고 잠시 기다리면 짜잔, 새로운 창작물이 나옵니다. 같은 집과 절벽이 있지만 이제 1080p이고 배경에 골프 코스가 있는 신선하고 새로운 인공적으로 생성된 비디오입니다.

정말 놀랍습니다. 360p 비디오는 실제로 생성하는 데 시간이 거의 걸리지 않습니다. 여기서 "만들다"라는 단어를 쓰고 싶지는 않습니다.

이것들은 소스 자료에서 인공적으로 생성된 것이지만 기본적으로 5초짜리 360p 비디오는 일반적으로 20초 이내에 생성됩니다.

그리고 OpenAI 서버에서 생성되므로 내 컴퓨터 속도나 인터넷 연결 속도와는 아무런 관련이 없습니다.

프롬프트를 보내면 시간이 걸리고 완료되면 나타나고 원하는 경우 다운로드할 수 있습니다.

그리고 1080p, 10초 비디오와 같은 것은 훨씬 더 좋아 보이지만 시간도 훨씬 더 오래 걸립니다.

정말 자세한 프롬프트와 1080p 비디오의 경우 몇 분 정도 걸릴 수 있습니다. 그리고 지금은 거의 아무도 사용하지 않을 때이기도 합니다.

이것이 누구에게나 공개되면 시간이 얼마나 더 걸릴지 궁금합니다.

하지만 대략 그 정도 시간이 걸렸습니다. 그리고 스토리보드 기능도 있는데, 여러 프롬프트를 연결할 수 있는 온라인 비디오 편집기처럼 보이고 작동합니다.

기본적으로 여러 가지 다른 작업을 연속으로 연결하는 데 가장 적합합니다.

기본적으로 단일 프롬프트로 비디오가 여러 가지 다른 작업을 연속으로 수행하도록 하기가 어렵다는 것을 알았습니다. 하지만 내장된 편집기를 사용하여 여러 프롬프트를 연속으로 연결할 수 있으며 스토리보드를 사용하면 모두 하나의 더 긴 비디오로 혼합할 수 있으며 실제로 더 나은 효과를 얻을 수 있습니다.

그래서 저는 이번 주 내내 이걸 가지고 놀면서 온갖 종류의 캐릭터, 다양한 스타일, 비디오에서 볼 수 있는 여러 가지 독특한 것들을 넣어 수십, 수십, 수십 개의 프롬프트를 던져봤습니다.

그래서 여러분을 놀라게 할 수도 있고, 아닐 수도 있는 몇 가지 관찰 결과를 말씀드리겠습니다.

자, 첫째, 물체 영속성이 없는 것 같습니다. AI가 생성한 이미지가 있었죠?

그리고 점점 더 나아지고, 해상도가 높아지고, 시간이 지날수록 현실적으로 변해가는 것을 보셨을 겁니다.

이제 비디오를 만들고 있는데, 기본적으로 연속성을 가진 여러 개의 AI 생성 사진을 연속으로 연결하고 있습니다.

하지만 비디오가 사람에게 이해되려면 물체가 특정 방식으로 움직이고 현실 세계에서 특정 방식으로 행동해야 합니다.

그래서 AI 생성 비디오의 가장 흔한 결함 중 하나는, 특히 이 도구를 사용할 때 물체 영속성 오류입니다.

그래서 물체가 서로 앞이나 뒤로 지나가는 방식이 말이 안 되는 것을 보게 될 것입니다.

특히 물체가 앞을 지나갈 때, 심지어 아무런 이유 없이도 물건이 사라지거나 갑자기 나타나는 것을 볼 수 있습니다.

가상의 기술 리뷰어의 손에 있는 스마트폰처럼 갑자기 나타났다가 사라지기도 합니다.

뿅 하고 사라졌습니다. 그리고 또 다른 흔한 오류가 있습니다. 다리가 달린 것이 걸어야 할 때, 다리를 오랫동안 지켜보면 앞다리와 뒷다리가 뒤바뀌는 경우가 거의 확실합니다.

이것을 보세요. 다리 하나만 지켜보려고 하면 그런 현상이 일어나는 것을 볼 수 있을 겁니다. 앞다리와 뒷다리가 앞뒤로 바뀝니다.

이것은 매우 흔합니다. 이런 현상은 항상 발생합니다. 그리고 이것은 제가 가장 크게 관찰한 것 중 하나로 이어지는데, 그것은 물리학, 즉 사물이 움직이는 방식에 어려움을 겪는다는 것입니다. 이는 실제로 비디오를 무엇에 대해 만드는지 이해해야 하는 것처럼 보이기 때문에 완벽하게 이치에 맞습니다.

따라서 대규모 언어 모델이 환각을 보거나 기술적으로 부정확하거나 말이 안 되는 문장을 조합하는 데 어려움을 겪을 수 있는 것과 마찬가지로, 이러한 비디오 모델도 물체의 움직임이 물체인지 알 수 없기 때문에 때로는 말이 안 되는 비디오를 조합하는 데 어려움을 겪을 것입니다.

거의 모든 포토리얼리스틱한 시도를 할 때마다, 기본적으로 움직임이 제대로 보이지 않는다는 것을 즉시 알 수 있습니다.

실제로 약간 슬로우 모션처럼 보이는 경향이 있지만, 다른 부분은 슬로우 모션이 아니기 때문에 우리 눈은 즉시 알아챕니다.

저는 CCTV 스타일의 영상을 만드는 것을 가지고 놀고 있었는데, 제 생각에는 그것이 가장 쉽게 속일 수 있는 방법일 것 같았습니다.

사람들이 이걸 손에 넣으면 보안 카메라 영상을 항상 조작할 겁니다.

하지만 이것에서도 인간의 움직임이 약간 어긋나 있다는 것을 알 수 있습니다. 처음에는 약간 느리다가 아무 이유 없이 빨라집니다.

정말 이상하죠. 그런데 이상하게도 유체 역학에서는 때때로 괜찮은 것 같습니다. 저는 물결이 일거나 파도가 치거나 현실적인 파도로 움직이는 몇 가지 예에 깊은 인상을 받았습니다.

가끔 그런 일이 일어납니다. 실제로 꽤 보기 좋을 수 있습니다.

그리고 불도 마찬가지입니다. 연기가 나지 않더라도 때로는 꽤 현실적으로 보일 수 있습니다. 하지만, 네, 일반적으로 물리학은 확실히 약점입니다.

따라서 이걸 알고 있다면 클레이메이션이나 만화 스타일로 더 많이 실험할 수 있고, 그러면 그러한 불규칙성과 움직임 또는 물리학이 더 스타일적인 선택이나 예술적인 선택처럼 느껴지기 때문에 훨씬 더 쉽게 받아들여집니다.

하지만 실제로 잘하는 것들에 대해서는 잠시 후에 말씀드리겠습니다.

하지만 소스 이미지를 가져와 프롬프트와 함께 비디오로 바꿀 수 있는 이와 유사한 다른 도구들과 함께 인터넷에서 조금 보셨을 수도 있는 또 다른 기능이 있습니다.

그래서 사람들은 밈을 현실로 만들고 AI 비디오 생성기에 입력하고 소라에게 어떻게 보일지 물어봄으로써 일부 상징적인 이미지 직후에 일어날 일을 상상해 왔고, 소라도 그렇게 할 수 있습니다.

꽤 까다롭습니다. 실제로 많은 것을 거부합니다.

공인 인물이 있거나 일반적인 캐릭터 또는 로고를 인식하는 것은 무엇이든 실제로 거부합니다. 또한 이미지에 업로드한 피사체가 18세 미만이라고 생각되면 거부합니다.

말이 되죠. 그런데 제가 Dolly로 만든 AI 생성 이미지를 업로드해서 모두 노래하고 춤추게 해달라고 요청하고 '생성'을 눌렀더니 완전히 그렇게 만들었습니다.

다시 말하지만, 만화 스타일이고 초현실적인 장면이 아니라는 점이 큰 도움이 되지만, 이것은 완전히 AI가 생성한 비디오입니다.

제 카메라 롤에서 다른 이미지 몇 장도 시도해 봤는데, 이건 그냥... 이상해집니다. 사진 속 물체가 어느 방향으로 움직였는지에 대한 맥락을 모르는 것 같아요.

다시 말하지만, 물리학을 모르기 때문에 상황이 정말 이상해집니다.

AI가 생성한 비디오라는 점은 인상적이지만, AI가 생성한 비디오라는 것을 금방 알 수 있습니다. 자, 지금까지 잘하는 것과 잘 못하는 것을 살펴봤으니, 이 도구가 실제로 무엇을 위한 것인지 궁금하실 텐데요.

사실 저는 그다지 무섭지 않고 꽤 괜찮은 것들을 몇 가지 발견했습니다. 그래서 제가 현재 Sora를 사용할 수 있는 것으로 찾은 것들은 추상적인 것들입니다.

원하는 만큼 자세하게 설명하고 온갖 종류의 질감과 색상, 그라데이션을 만들어 추상적인 모양이 움직이게 하여 본질적으로 스크린세이버나 배경 조각처럼 보이게 할 수 있습니다.

분명 누군가가 이 물건으로 NFT를 만들 세계가 있을 거라고 확신합니다. 그것도 완전히 이상하죠.

하지만 추상적인 것은 확실히 할 수 있습니다. 특히 특정 텍스트를 요청할 때 텍스트 재현이 더 나아지고 있다는 것을 알았습니다.

그래서 이 비디오에는 배경에 엉망인 텍스트가 있는 경우가 있는데, 그런 일은 계속 일어날 것입니다. 하지만 스타일을 지정하여 개별 제목 슬라이드를 요청하면 실제로 해당 슬라이드에 올바른 텍스트를 제공할 수 있다는 것을 알았습니다.

엠파이어 스테이트 빌딩을 스케치하는 이 애니메이션은 킬러 제목 슬라이드나 건물, 맨해튼 또는 그와 관련된 다큐멘터리 인트로로 만들 수 있습니다.

This Video is AI Generated! SORA Review

스크립트