openai/shap

Eh bien, openai/shap-e, c'est le truc de ouf en matière de génération 3D alimenté par l'IA. Il permet de fabriquer des objets en fonction du texte ou des images, c'est incroyable! Pour l'installer, c'est simple, il suffit de faire un pip install -e... Pour commencer à s'amuser avec des exemples, y a plein de notebooks sympas. Par exemple, le sample_text_to_3d.ipynb pour échantillonner un modèle 3D en fonction d'un prompt texte. Ou encore le sample_image_to_3D.ipynb pour créer un modèle 3D en fonction d'une image de vue synthétique. Pour obtenir un résultat de malade, il vaut mieux enlever l'arrière-plan de l'image d'entrée. Le encode_model.ipynb, c'est aussi super pratique. Il charge un modèle 3D ou un trimesh, crée un tas de rendus multivues et un nuage de points, les encode en un latent et les re-rend. Pour que ça marche, il faut installer Blender version 3.3.1 ou plus, et définir la variable d'environnement BLENDER_PATH vers le chemin de l'exécutable Blender. Le projet propose aussi des exemples de modèles textuels conditionnels, genre un fauteuil qui ressemble à un avocat, un avion qui ressemble à une banane, un vaisseau spatial, un gâteau d'anniversaire, un fauteuil qui ressemble à un arbre, une botte verte, un pingouin, un cornet de glace à l'ube et un bol de légumes. C'est vraiment génial!