Janus是DeepSeek开源的多模式自回归框架,统一了多模态理解和生成,既可以理解图片内容又可以生成图片。

Janus的核心创新是将视觉编码分为两个独立的部分:一个用于多模态理解,一个用于图像生成。

Janus,DeepSeek开源的多模式自回归框架,统一了多模态理解和生成插图

Github地址:https://github.com/deepseek-ai/Janus

论文地址:https://arxiv.org/abs/2410.13848

模型下载地址:https://huggingface.co/deepseek-ai/Janus-1.3B



微信扫描下方的二维码阅读本文

Janus,DeepSeek开源的多模式自回归框架,统一了多模态理解和生成插图1

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。