Point-E: テキストから 3D モデルを作成できる新しい AI

人工知能が 2023 年を支配するようになり、現在の年が終わる直前に、 OpenAI は、XNUMX 次元でアートを扱うアーティストを支援できるリリースを作成しました。 ザ 点 テキストを入力して 3D モデルを作成できるため、クリエイティブ プロセスのいくつかの段階が加速されます。

実際の使用法はまだ不明ですが、ツールは存在し、公開リリースが行われると、クリエイティブの専門家に任されるようになりました. 詳細情報を今すぐチェックしてください。

Point-E は 3D モデルでポイントのクラスターを作成します

の支援を受けて NVIDIA V100 GPU、新しい人工知能 OpenAI (DALL-E と ChatGPT の同じ作成者) は、「その親戚」と同じように機能します。ユーザーは、コマンドをテキストで入力してプロジェクトを受け取るだけです。 おそらく最大のマイナス点は、最初の段階のように、Point-E はまだソリッド モデルを作成できず、3D 形状を表現するためになんとか統一されたポイントのセットを作成できないことです。

名前は次のように説明できます。 ポイント クラスター化されたポイントと「E」 によると、効率について語っています。 OpenAI、人工知能は現在 3D オブジェクトの作成に使用されているツールよりも高速です。

ポイント クラウドは合成が容易ですが、オブジェクトの最終的な形状やテクスチャをキャプチャしないことを覚えておくことが重要です。 すべては、3D で見ることができる単なる点の集まりです。 この問題を回避する方法は、 ポイントE、 ポイントのセットをポリゴン メッシュに変換できます。

開発の最初の段階にあるため、専門家は、この適応を行っても、デザインに特定の部分が欠けている可能性があり、不規則な形状になることに気付きました。

プロジェクトを作成するためのデュアル テンプレート

彼の新しいプロジェクトの記事によると、 OpenAI は、ユーザーが要求したものを提供するために XNUMX つのモデルを使用します。 これらの最初のものは、テキストの変換と理解に関するもので、 DALL-E2 e 安定した拡散、入力されたコマンドと視覚的な概念を理解できます。 3 つ目は 3D モデリングに焦点を当てたもので、XNUMXD オブジェクトとペアになった一連の画像を使用してトレーニングされ、XNUMX つのオブジェクト間で効果的に変換する方法を学習しました。

実際の動作は次のとおりです。テキスト コマンドを受け取ると、テキスト読み取りモデルがレンダリングされた合成オブジェクトを生成し、それが 3D モデリング ツールに送信されて点群を作成できるようになります。

開発者自身は、Point-E は完全ではないと主張しており、一部のテストでは、AI は一部のテキスト コマンドとプロジェクトの作成を理解できず、ユーザーが期待したとおりに配信できませんでした。 しかし、開発者は、開発プロセスをスピードアップできると指摘しています。

この評価では、私たちの方法は最先端の手法よりもパフォーマンスが劣りますが、わずかな時間でサンプルを生成します。 これにより、特定のアプリケーションでより実用的になったり、より高品質の 3D オブジェクトを検出したりできます。

AI はどこで使用できますか?

の用途を挙げるのは時期尚早かもしれません。 点-そして、しかし OpenAI 必要な調整を行うことで、点群プロジェクトを 3D 製品の製造に使用できることが実証されました。 もう XNUMX つの興味深い要素として、AI がさらに改善されると、ゲームやアニメーションが作成されます。 人工知能を実際に使用することはまだ不可能であり、今のところ、開発者はその存在を発表しただけです.

覚えておくことが重要です。 点 テキストを 3D モデルに変換する AI はこれが初めてではありません。 ザ グーグル の改良版をリリースしました 夢の野原の名前をとった ドリームフュージョン 事前のトレーニングは不要で、3D データなしでオブジェクトの 3D 表現を生成します。

多くの建築会社は 3D オブジェクトを使用してプロジェクトを提示しています。テレビや映画の映画やシリーズに加えて、この分野での人工知能ツールの成長は興味深い現象です。

発生する可能性のある大きな問題の XNUMX つは著作権の問題です。人工知能は既存のプロジェクトに基づいて、要求されたものを提供できるからです。 しかし、少なくとも今のところ、これはすぐに解決される問題です。 OpenAI 著作権については何も言及されていませんでした。 次の章しか見ることができません。

どう思いましたか 点？ 教えてください コメント!

また見なさい

しゃべるAIを知っていますか？ ChatGPT 現象を理解する

情報付き： TechCrunchの l OpenAI l インスマートズ