openai/shap

Shap-E の概要

Shap-E は、テキストまたは画像に条件付けられた 3D イミュライト関数を生成するための公式コードとモデルのリリースです。

コア機能

• テキストに基づいて 3D モデルを生成できます。
• 合成ビュー画像に基づいて 3D モデルを生成することも可能です。

基本的な使用方法

• pip install -e. でインストールします。
• 例を始めるには、次のノートブックを参照してください。
  • sample_text_to_3d.ipynb：テキストプロンプトに基づいて 3D モデルをサンプリングします。
  • sample_image_to_3d.ipynb：合成ビュー画像に基づいて 3D モデルをサンプリングします。入力画像の背景を削除すると最良の結果が得られます。
  • encode_model.ipynb：3D モデルまたはトライメッシュを読み込み、マルチビューレンダーとポイントクラウドのバッチを作成し、潜在空間にエンコードして再レンダリングします。これを動作させるには、Blender バージョン 3.3.1 以上をインストールし、環境変数 BLENDER_PATH を Blender 実行可能ファイルのパスに設定してください。