openai/shap

Shap-E : Générer des objets 3D en fonction du texte ou des images

Shap-E est l'outil officiel de génération d'objets 3D conditionnés par du texte ou des images. Il offre une solution innovante pour créer des formes tridimensionnelles basées sur des descriptions textuelles ou des images.

Vue d'ensemble : Shap-E permet aux utilisateurs de transformer des idées en formes 3D concrètes. Il ouvre de nouvelles perspectives dans le domaine de la création numérique.

Fonctionnalités principales :

• Peut générer des objets 3D en fonction d'un texte donné. Par exemple, il peut créer une chaise qui ressemble à un avocat ou un avion qui ressemble à une banane.
• Peut également fonctionner en fonction d'une image synthétique de vue.

Utilisation de base :

• Pour l'installer, utilisez pip install -e...
• Pour commencer avec des exemples, consultez les notebooks suivants :
  • sample_text_to_3D.ipynb : permet d'échantillonner un modèle 3D en fonction d'un prompt texte.
  • sample_image_to_3D.ipynb : permet d'échantillonner un modèle 3D en fonction d'une image de vue synthétique.
  • Pour obtenir le meilleur résultat, il est conseillé de supprimer l'arrière-plan de l'image d'entrée.
  • encode_model.ipynb : charge un modèle 3D ou un trimesh, crée un lot de rendus multivues et un nuage de points, les code en un latent et le rend de nouveau. Pour que cela fonctionne, installez Blender version 3.3.1 ou supérieure et définissez la variable d'environnement BLENDER_PATH sur le chemin de l'exécutable Blender.