腾讯开源:3D素材生成模型、最大 MoE 模型,兼容 OpenAI SDK 方式调用

科技   2024-11-05 18:47   广东  

长话短说

今天,腾讯发布了点好东西:


  • 【非常重要】混元现已兼容 OpenAI SDK 方式调用(之前不行)

  • 最大的开源 MoE:混元 Large

    • 总参数量389B,激活参数量52B,上下文长度256K

    • 在绝大多数指标上,领先于 LLama3.1-405B 以及 DeepSeek 2.5

    • 支持商用,可在腾讯云TI平台一键精调部署

    • https://github.com/Tencent/Tencent-Hunyuan-Large

    • https://huggingface.co/tencent/Hunyuan3D-1

  • 开源首个文生/图生3D模型:混元3D 1.0

    • 支持文字和图像双模态生成3D内容

    • 仅需10秒即可生成高质量3D资产(轻量版)

    • 在GSO与OmniObject3D数据集上超越主流开源模型

    • 已应用于腾讯地图3D导航车标

    • 已上架到腾讯云HAI

    • 后面我会附上如何调用

    • https://github.com/Tencent/Hunyuan3D-1

    • https://huggingface.co/tencent/Hunyuan3D-1


混元 Large

性能足够强大


总参数量389B、激活参数52B,具备256K上下文。

在CMMLU、MMLU、CEval等多学科综合评测集、中英文NLP任务、代码和数学等9大维度领先,处于行业领先水平。


开源


Git

https://github.com/Tencent/Tencent-Hunyuan-Large

Hugging Face

https://huggingface.co/tencent/Hunyuan3D-1


资源需求

全量微调:最少需要32张H20 

LoRA微调:最少需要8张H20


兼容 OpenAI SDK 方式调用


这套东西,目前已上架腾讯云TI平台,并支持一键精调

然后,这东西现在兼容 OpenAI SDK 的方式调用了(如上图)

再来个可复制版,如下:

from openai import OpenAI
client = OpenAI( api_key="API_Key", base_url="https://api.hunyuan.cloud.tencent.com/v1")
# 发送请求params = { "model": "hunyuan-large", "messages": [{ "role": "user", "content": "你好" }]}
# 获取响应并打印response = client.chat.completions.create(**params)print(response.choices[0].message.content)



混元3D 1.0

遥遥领先


首个同时支持文字、图像的3D生成开源模型

解决了现有的3D生成模型在生成速度和泛化能力上存在不足

帮助3d创作者和艺术家自动化生产3d资产


开源地址

https://github.com/Tencent/Hunyuan3D-1

https://huggingface.co/tencent/Hunyuan3D-1


支持文生、图生


支持快速单图生3D,10s内完成端到端生成,包括mesh,texture提取



文生

这是一片绿色的叶子,背景为白色。构图方式为特写、平视和居中构图,呈现出真实摄影风格。它蕴含了植物文化并展现了平静的氛围。



图生




模型上手



获取代码

git clone https://github.com/tencent/Hunyuan3D-1 cd Hunyuan3D-1



配置环境

conda create -n hunyuan3d-1 python=3.9conda activate hunyuan3d-1bash env_install.sh


配置模型

python3 -m pip install "huggingface_hub[cli]"
mkdir weightshuggingface-cli download tencent/Hunyuan3D-1 --local-dir ./weights
mkdir weights/hunyuanDiThuggingface-cli download Tencent-Hunyuan/HunyuanDiT-v1.1-Diffusers-Distilled --local-dir ./weights/hunyuanDiT


使用模型

## 文生3dpython3 main.py \    --text_prompt "一只可爱的兔子" \    --save_folder ./outputs/test/ \    --max_faces_num 90000 \    --do_texture_mapping \    --do_render

## 图生3dpython3 main.py \ --image_prompt "/path/to/your/image" \ --save_folder ./outputs/test/ \ --max_faces_num 90000 \ --do_texture_mapping \ --do_render




最后

以上,就是本次速递


以及...OpenAI,要加油了



赛博禅心
拜AI古佛,修赛博禅心
 最新文章