【Adobe Firefly】英語解説を日本語で読む【2023年4月28日｜@TheAIGRID】

『Adobe Firefly』の8つの新機能について語っています。
公開日：2023年4月28日
※動画を再生してから読むのがオススメです。

---

Adobe just released a new update for their new AI program which is Adobe Firefly.

Adobeは、新しいAIプログラムであるAdobe Fireflyの新しいアップデートをリリースしました。

This time Adobe Firefly is going to be for video which is going to introduce a range of effects and let's get into it.

今回のAdobe Fireflyはビデオ用で、様々なエフェクトを導入する予定です。

So let's take a look at this trailer and break everything down step by step.

では、この予告編を見て、ステップバイステップですべてを分解してみましょう。

So one of the first things that I do think many people did actually miss from this trailer, which is a key part and honestly this is going to change the way the entire video industry is, is this right here.

最初に多くの人が見逃したと思われるこのトレーラーの重要な部分は、正直に言って、ビデオ業界全体の方法を変えることになるでしょう。

In the first couple of seconds from the trailer, you can see it says "bright adventurous cheerful music" okay, and there's a button to generate that.

予告編の最初の数秒で、「明るい冒険的な陽気な音楽」と書かれているのがわかりますが、それを生成するボタンがあります。

So this is very different than if you had a music sound effect generator which is what we have in a couple of seconds after which is right here you can see this one generates sound effects but this one is a background music generator guys.

これは、数秒後に持っている音楽効果音ジェネレータとは非常に異なりますが、こちらが効果音を生成するのに対して、こちらはバックグラウンドミュージックジェネレータです。

Now how many of you fellow creators and people who make content on YouTube or people who make content for whatever agency it might be have trouble finding the right music.

さて、クリエイター仲間やYouTubeでコンテンツを作っている人、あるいはどんな機関であれコンテンツを作っている人の中で、適切な音楽を見つけるのに苦労している人はどれくらいいることでしょう。

With this, okay, it seems that Adobe has some new AI software where they can literally generate music based on a few text prompts.

このソフトは、アドビが開発した新しいAIソフトで、いくつかのテキストプロンプトをもとに、文字通り音楽を生成することができるようです。

So, if this is really effective, even if it is just for basic background music, this is going to solve many different issues.

もしこれが本当に効果的なら、たとえ基本的なBGMであっても、さまざまな問題を解決できるはずです。

For example, it might solve copyright issues on YouTube.

例えば、YouTubeの著作権問題を解決できるかもしれません。

It might solve, you know, I guess you could say some music ownership issues.

例えば、YouTubeの著作権問題を解決できるかもしれませんし、音楽の所有権問題を解決できるかもしれません。

There are just honestly a ton of different applications for this because I know many people run through many different sites to find royalty-free music.

ロイヤリティフリーの音楽を探すために、さまざまなサイトにアクセスする人も多いと思うので、正直なところ、さまざまな用途が考えられます。

But if you can just simply generate bright, adventurous, cheerful music, and then it simply just adds it to the background, that is going to be a complete game changer.

しかし、明るく、冒険的で、陽気な音楽を生成し、それをバックグラウンドに追加するだけなら、完全にゲームチェンジャーになります。

And you can see right here, it generates, and it's added to the background, and it does sound pretty amazing.

このように、音楽が生成され、背景に追加され、とても素晴らしいサウンドになっているのがお分かりいただけると思います。

Now, what's also interesting is the sound effect generator, which is very, very important.

さて、効果音ジェネレーターも非常に重要です。

I mean, there are some people who do have pre-made sound effects, of course.

もちろん、プリメイドのサウンドエフェクトを持っている人もいます。

There are different packs that you can download online, but being able to simply just click and then get, you know, a simply entire library of free sound effects that you can use is definitely going to change the way that people do edit.

オンラインでダウンロードできる異なるパックがありますが、クリックするだけで無料の効果音のライブラリ全体を手に入れることができるのは、編集の仕方を変えることでしょう。

And I think this is going to be really good because, you know, let's say you're editing a program.

例えば、プログラムを編集する場合、これはとても良いことだと思います。

What's also cool about this is that you don't need to search for the sound effects.

また、効果音を検索する必要がないのも魅力です。

Now, you might be a bit confused here, but think about this, okay?

ここでちょっと混乱するかもしれませんが、よく考えてみてください。

What we just saw was someone click sound effects.

今見たのは、誰かがサウンドエフェクトをクリックしたところです。

They didn't type in ocean sound effects.

海の効果音と入力したわけではありません。

They clicked find sound effects, which means that Adobe software is recognizing that, okay, this is a wave, this is a beach.

つまり、Adobeのソフトウェアが「これは波だ、これは浜辺だ」と認識したのです。

So, when you click find sound effects, what that software is doing is it's realizing what's in the actual video, and then it's going to find that and then match that with that.

つまり、「サウンドエフェクトを探す」をクリックすると、実際の映像の中に何があるのかを認識し、それを見つけてマッチングさせるのです。

You can see right here, it says ocean wave, beach ambiance, ocean foam.

ここでは、Ocean wave、Beach ambiance、Ocean foamと表示されています。

So, you can see that whatever Adobe is working on, it's also a video identification system.

このように、Adobeが取り組んでいるものは、ビデオ識別システムでもあるのです。

So, whatever you're video editing, it's going to be able to identify what you're video editing and then suggest the right background music for that or the sound effects, which is honestly pretty insane, and I didn't realize that at first.

つまり、あなたがビデオ編集しているものを認識し、それに適したバックグラウンドミュージックや効果音を提案してくれるので、正直かなり驚異的で、最初はそれに気付きませんでした。

But when I kept re-watching the trailer, I was like, okay, that is really, really cool.

しかし、予告編を何度も見返すうちに、「これは本当に、本当にクールだ。

The nukes right there, it adds it at the perfect time and syncs it up.

核兵器は、完璧なタイミングで追加され、同期しています。

And then, with this one, it also does have some background music that's, I guess you could say, trees.

そして、この作品には、木々をイメージしたBGMも入っています。

So, it identifies this is a nature shot.

つまり、これは自然を撮影したものであることがわかるのです。

I'm not exactly sure how, there are many different AI tools that actually can do that now, especially with GPT4.

特にGPT4では、さまざまなAIツールでそれができるようになっています。

Maybe that's what Adobe is using in their product.

たぶん、Adobeの製品ではそれを使っているのでしょう。

And if you don't know what that is, essentially, GPT4 is multimodal, which means it can identify what's going on in pictures.

GPT4は、マルチモーダル、つまり、写真の中で何が起こっているかを識別することができるのです。

And I think maybe there might be some kind of video version that they haven't released yet that Adobe is using to, I guess you could say, identify what's going on in the scene.

もしかしたら、まだ公開されていないビデオバージョンがあるかもしれませんが、アドビはそれを使って、シーンで何が起こっているのかを識別しています。

Now, what's also cool here is that this is something that we did see previously from another software app called Runway.

また、「Runway」と呼ばれる別のソフトウェアアプリでも、このような機能を見ることができましたが、こちらもクールです。

Essentially, where you're able to just use natural language to essentially change what you're seeing on screen.

自然言語を使って、画面に表示されているものを変えることができるのです。

You can see right here, it says change to a cool morning.

この画面では、「涼しい朝に変えてください」と表示されているのがわかります。

So, essentially, what you're doing here is you click this prompt and then once you click generate, you can see that instantly changes the entire color scheme.

このプロンプトをクリックして、「生成」をクリックすると、瞬時に全体のカラースキームが変更されるのがわかります。

And this is honestly going to be really cool because this is something that we honestly do need.

これは、本当に必要なことなので、本当に素晴らしいことだと思います。

If you've ever used Adobe Premiere Pro or some of the programs, you'll know that color grading is not easy.

Adobe Premiere Proを使ったことがある人なら、カラーグレーディングが簡単でないことはわかるでしょう。

Okay, it's something that is really, really hard to do and so time-consuming.

カラーグレーディングは、本当に、本当に難しく、時間がかかるものです。

I mean, changing the colors, changing the dials, it's honestly something I've done before, but something that I've always had to outsource or able to get in Premiere Pro.

色を変えたり、ダイヤルを変えたりするのは、正直なところ、以前にもやったことがありますが、いつも外注するか、Premiere Proでできるようにする必要がありました。

And this is something that I struggled with before because sometimes you do have multiple speakers and you don't want multiple pieces of text on screen.

また、複数のスピーカーがある場合、画面に複数のテキストを表示させたくないこともあるので、以前は苦労したものです。

But you can see right here that you're able to get two different pieces of text transcribed on screen, which is really, really cool.

しかし、ここでは2つの異なるテキストを画面上に書き出すことができ、とても素晴らしいことです。

And this is obviously going to be more effective because it's going to be able to create auto captions, as you know, many software programs are able to do.

また、ご存知のように多くのソフトウェアが自動キャプションを作成できるため、より効果的であることは明らかです。

So it's going to be something that is going to expedite the video creation process and something that is really, really interesting for people who are making these videos.

ですから、ビデオ制作のプロセスを加速させるものであり、ビデオを作る人々にとって本当に、本当に興味深いものになるでしょう。

Now, here, what's also cool is that you can see right here it says 3D molten iron.

3D溶鉄と書いてあるのが目印です。

Now, remember, this is for video editing.

これはビデオ編集のためのものです。

So, I'm guessing that what this is, this is basically just a 3D text kind of animation.

つまり、これは基本的に3Dテキストのようなアニメーションなのでしょう。

So, essentially, this is going to be some kind of video where you can essentially just input the text that you want to create, which is 3D molten iron, and then you can simply generate a video based on that text.

つまり、本来は、3D溶鉄という作りたいテキストを入力するだけで、そのテキストを元に単純に動画を生成できるような、ある種の動画になりそうです。

You can see right here, the text is typed in first, and then whatever kind of style that you wanted the text in Premiere Pro goes in, and then it animates that for you.

まずテキストを入力し、Premiere Proでテキストをどのようなスタイルにするか、そしてそれをアニメーション化します。

So, that is going to be something that is also very, very effective.

これは、非常に効果的な方法です。

Now, remember, Premiere Pro is literally one of the best video editing softwares out there, and it's literally based on every single large platform.

Premiere Proは、ビデオ編集ソフトの中でも特に優れたソフトであり、あらゆるプラットフォームに対応しています。

So, this is going to be truly, truly expedited, and I think Adobe are going to win this when it does come to combating the other things.

ですから、これは本当に、本当に迅速なものであり、他のものと戦うことになれば、アドビが勝つと思います。

Now, this is something also that is very, very crazy that is going to just save so much time.

また、これは非常にクレイジーなことですが、非常に多くの時間を節約することができます。

So, you can click right here, and you can find B-roll.

ここをクリックすると、B-rollを見つけることができます。

So, I'm guessing, okay, what they're doing is they're analyzing the transcript.

つまり、彼らはトランスクリプトを解析しているのだと思います。

So, essentially, whatever you've said in the video, they're just analyzing the transcript based on what you said, and then essentially they find the footage that's most relevant.

つまり、あなたがビデオで何を言ったとしても、彼らはあなたが言ったことに基づいてトランスクリプトを分析し、最も関連性の高い映像を見つけるのです。

Remember, previously in the video, we discussed how the software has video image identification software.

以前、ビデオで、このソフトウェアにはビデオ画像識別ソフトウェアが搭載されていることを説明したのを覚えています。

So, you can see right here what it's able to do is say okay, shoes, then it's able to say chalk, and then say wall.

このソフトでできることは、靴、チョーク、壁ということです。

Okay, so that's what the software is going to do.

では、このソフトは何をするのかというと、「靴」です。

So, it's going to say, "I'm putting on my shoes, I'm talking up, I'm excited to get on the wall."

つまり、「靴を履いて、おしゃべりして、壁の上に立つのが楽しみです」と表示されるわけです。

So, what it's going to do is it's going to find software that has chalk in it; it's going to find software that has shoes in it; then it's going to find software that has maybe a wall in it.

つまり、チョークが入ったソフトウェアを見つけたり、靴が入ったソフトウェアを見つけたり、壁が入ったソフトウェアを見つけることができます。

And then, when you click play, you're going to see that it's able to immediately put in the right footage right there.

そして、再生をクリックすると、その場ですぐに正しい映像を入れることができることがわかります。

So, based on your transcript, it's going to be able to basically edit the video for you, which is absolutely insane.

つまり、あなたの原稿をもとに、あなたのためにビデオを編集してくれるのです。

Now, I don't know if that's going to be based on the files that are in your, I guess you could say, bin at the moment, which and your bin is essentially just the files in your project.

今、あなたのビンにあるファイルに基づいて行われるかどうかはわかりませんが、ビンは基本的にあなたのプロジェクトのファイルだけです。

So, if it is able to do that, that is going to be absolutely incredible and that is going to save people so much time.

だから、もしそれができるのであれば、それは本当に素晴らしいことで、人々の時間を大幅に節約することになるでしょう。

Like, honestly, it's going to save people a ridiculous amount of time.

正直なところ、とんでもない時間の節約になります。

So, you can see right here it's able to find and identify the chalk, and then able to identify, of course, the wall, which is just going to save people so much time.

このように、チョークを見つけて識別し、もちろん壁も識別することができます。

So, you can see right here, as well, this one is going to save filmmakers a lot of time as well, you know, amateur filmmakers.

このように、この製品は、映画制作者の時間を大幅に節約してくれます。

This is going to save you so much time or people trying to become professional filmmakers.

プロの映画監督になろうとする人たちの時間を大幅に節約することができます。

I mean, look at this, okay?

つまり、これを見てください。

We've got analyze script, okay?

分析用の台本がありますね。

So, for example, you can say new import media, then you have a script.

例えば、新しいメディアを取り込むと、スクリプトができます。

Okay, and remember, many videos are scripted out, so essentially what you have is you have a script.

多くのビデオはスクリプトで作られているので、基本的にはスクリプトがあることになります。

So, for example, maybe you've got a movie, maybe you've got a short film, and then when you put the short script in, it's going to generate the storyboard so you can see it gives you what kind of shots that you should be taking.

例えば、映画や短編映画があるかもしれませんが、短い脚本を入れると、ストーリーボードを生成して、どのようなショットを撮るべきかを示してくれます。

So, for example, this is so useful if you're creating a short film and you don't know which kind of shots to take.

例えば、ショートフィルムを作るときに、どのようなショットを撮ればいいのかわからないときにとても便利です。

You can see right here it says golden hour, and this is really cool because this is giving you the color grading that you're going to need to do.

ここにゴールデンアワーと書いてありますが、これは本当に素晴らしいことで、カラーグレーディングを行う必要があります。

And remember, with the recent software that was just recently announced within this, you're going to be able to just simply get one prompt and simply change it to that.

そして、最近発表されたソフトウェアでは、1つのプロンプトを取得するだけで、そのプロンプトに変更することができるようになったことを忘れないでください。

You can see right there it's able to give you every single kind of shot that you need: a close-up, this kind of shot.

このように、クローズアップやこのようなショットなど、あらゆる種類のショットを提供することができます。

And here, this is really, really effective.

そして、これが実に効果的なのです。

I mean, people who are not going to be that great at making films and visualizing stuff, this is going to be simply easy because you can simply click and you can simply make your previews just like that.

映画やビジュアルを作成するのが得意でない人でも、クリックするだけで簡単にプレビューを作成できるので、簡単です。

I mean, that is absolutely incredible.

つまり、これは本当にすごいことなのです。

So, I mean, there's a lot to discover and there's a lot to discuss.

というわけで、まだまだ発見があり、議論すべきことがたくさんあります。

I mean, Adobe Firefly for video is absolutely insane, and I want to show you guys some of the stuff.

ビデオ用のAdobe Fireflyは本当に素晴らしいもので、皆さんにその一部をお見せしたいと思います。

A lot of people have compared this to Midjourney, but I do think that this is honestly going to be game-changing software.

多くの人がこれをMidjourneyと比較していますが、私は、これは正直言って、ゲームを変えるようなソフトウェアになると思っています。

I think that anyone who does use this is honestly going to be very impressed because I don't think that there's any other software on the market right now that is going to even shoot for what Adobe is going to be capable of doing.

このソフトウェアを使う人は、正直感銘を受けると思います。なぜなら、今市場に出ている他のソフトウェアは、Adobeができることを目指すものはないからです。

Let's take a look at some of the comparisons between Midjourney and Adobe because, of course, Adobe is still in beta.

MidjourneyとAdobeの比較を見てみましょう。もちろん、Adobeはまだベータ版です。

I want to show you exactly how powerful Adobe is compared to some of the narrow AI-specific tools for certain things.

Adobeが、ある特定の事柄について、狭いAI専用ツールと比較してどれほど強力なのか、正確にお見せしたいと思います。

So, one of the key things that Adobe have added is image generation, and you can see on the left, this is Adobe's, and on the right is Midjourney's.

そこで、Adobeが追加したポイントのひとつが画像生成で、左がAdobeのもの、右がMidjourneyのものであることがわかります。

And take a look at these two examples here.

そして、この2つの例を見てください。

You can see that Adobe is currently struggling with certain aspects of the AI race simply because they are trying to not plagiarize work.

アドビがAI競争で苦戦しているのは、単に盗作をしないようにするためだということがおわかりいただけると思います。

So, all of the work that Adobe uses in their image generation software is essentially royalty-free, meaning that they didn't take any artist's work into, you know, training the model.

つまり、アドビが画像生成ソフトウェアで使用している作品はすべて、基本的にロイヤリティフリーです。つまり、モデルのトレーニングにアーティストの作品を使用していないのです。

I guess some artists would actually like this because, of course, you wouldn't like your work to be taken without your credit and then, of course, being used and sold on without your knowledge.

一部のアーティストは、もちろん、自分の作品がクレジットなしで使われたり、知らないうちに売られたりするのは嫌だと思うでしょう。

And then, of course, here, you can see that this is a samurai robot with an Adobe Firefly image prompt.

そしてもちろん、これはAdobe Fireflyのイメージプロンプトでサムライロボットであることがわかります。

I do honestly want to say that the Adobe Firefly software is easier to use than Midjourney's confusing prompts that you can see right here.

正直なところ、Midjourneyの分かりにくいプロンプトよりも、Adobe Fireflyのソフトの方が使いやすいと言いたいです。

They are not that confusing, but they just don't bode well in the sense that they're trying to create a very nice image generation program.

それほど分かりにくいわけではないのですが、せっかく素敵な画像生成プログラムを作ろうとしているのに、これでは意味がありません。

Now, you can see right here, this is what Midjourney was able to create with the same prompt, and honestly, it's just out of this world.

さて、同じプロンプトでMidjourneyが作成したものをご覧いただきたいのですが、正直言って、この世のものとは思えない出来栄えです。

This is breathtaking.

息をのむような美しさです。

So, I mean, I think that we are at a stage where it's actually good for us to have this competition.

つまり、このような競争があることは、私たちにとって良いことだと思います。

Adobe, of course, is still working ethically on things which, of course, is what they should do and is what these companies should do.

もちろん、アドビは倫理的に取り組んでいますし、それはアドビがすべきことであり、こうした企業がすべきことでもあります。

But I find that it's going to be interesting to see how they're going to get these models even better.

しかし、このようなモデルをどのようにしてより良いものにしていくのか、興味深いところです。

If we take a look at what Midjourney is able to do with a simple prompt and then if we take a look at what Adobe is doing with the same prompt, we can see that Adobe is a little bit behind.

Midjourneyがシンプルなプロンプトでできることを見て、同じプロンプトでAdobeがやっていることを見てみると、Adobeは少し遅れていることがわかりますね。

Now, I think in the future, all of these.

さて、将来的には、これらすべてだと思います。