DeepSeek最新多模态大模型:Janus-Pro-7B本地部署完全指南

专题:DeepSeek为何能震动全球AI圈   来源:小蔡AI实验室   最近DeepSeek王炸不断,刚刚出了火爆全球的R1大模型,但还有大招没放!   就在刚刚,准备在多模...

专题:DeepSeek为何能震动全球AI圈

  来源:小蔡AI实验室

  最近DeepSeek王炸不断,刚刚出了火爆全球的R1大模型,但还有大招没放!

  就在刚刚,准备在多模态大模型正掀起新一轮技术革命浪潮!

  DeepSeek新出的Janus-Pro-7B系列作为业界首个理解-生成一体化架构的尖端模型,实现了:

  🔥 五大颠覆性优势 ✅ 视觉问答准确率超越GPT-4V ✅ 文生图质量超越DALL·E3、Stable Diffusion 3 ✅ 单卡即可运行的高效推理 ✅ 企业级数据隐私安全保障

  本教程将带您完成15分钟极速部署,R1大模型只要你机器够,理论上也可以部署哦。

项目地址:https://github.com/deepseek-ai/Janus?tab=readme-ov-file#simple-inference-example-1 

模型地址:https://huggingface.co/deepseek-ai/Janus-Pro-7B/discussions

  环境要求

操作系统: Linux/Windows (推荐 Ubuntu 20.04+)

Python: 3.8+

CUDA: 11.7+ (需与PyTorch版本匹配)

GPU: 显存 ≥16GB (Janus-Pro-7B需≥24GB)

存储空间: ≥30GB 可用空间

  快速部署

  1. 克隆代码库

  git clone https://github.com/deepseek-ai/Janus.gitcd Janus

  2. 创建虚拟环境

  conda create -n janus python=3.8 -yconda activate janus// 这一步也可以使用pycharm代替

  3. 安装依赖

  pip install torch==2.0.1+cu117 --index-url https://download.pytorch.org/whl/cu117pip install -r requirements.txtpip install -e .[gradio]  # 安装Gradio扩展

  安装完成后如下:

DeepSeek最新多模态大模型:Janus-Pro-7B本地部署完全指南

  模型下载

  方法一:使用 huggingface-cli 工具

  安装下载工具

  pip install huggingface_hub

  下载完整模型(推荐)

  # 下载7B版本到指定目录huggingface-cli download deepseek-ai/Janus-Pro-7B \    --local-dir ./models/Janus-Pro-7B \    --resume-download \    --cache-dir ./cache

  下载指定文件

  # 下载配置文件huggingface-cli download deepseek-ai/Janus-Pro-7B config.json --local-dir ./models# 下载核心模型文件huggingface-cli download deepseek-ai/Janus-Pro-7B pytorch_model.bin --local-dir ./models

  下载参数说明

  |     |     |     | | --- | --- | --- | | 参数  | 说明  | 示例  | | --local-dir | 指定下载目录 | --local-dir ./models | | --cache-dir | 设置缓存路径 | --cache-dir ./cache | | --resume-download | 断点续传 | 自动续传中断的下载 | | --revision | 指定版本分支 | --revision main |

  方法二:代码自动下载

  from transformers import AutoModelForCausalLM# 自动下载到缓存目录model = AutoModelForCausalLM.from_pretrained(“deepseek-ai/Janus-Pro-7B”)# 指定本地路径(需先通过huggingface-cli下载)model = AutoModelForCausalLM.from_pretrained(“./models/Janus-Pro-7B”)

  使用示例

  加载本地模型

  model_path = “./models/Janus-Pro-7B”  # 指向下载目录processor = VLChatProcessor.from_pretrained(model_path)model = MultiModalityCausalLM.from_pretrained(model_path).to(“cuda”)

  常见问题

  下载速度慢

使用国内镜像源:

  HF_ENDPOINT=https://hf-mirror.com huggingface-cli download...

开启多线程下载:

  huggingface-cli download ... --workers 8

  文件校验失败

  执行完整性校验:

  huggingface-cli download ... --force-redownload

  技术说明

模型文件结构:

Janus-Pro-7B/├── config.json├── pytorch_model.bin├── tokenizer_config.json└── special_tokens_map.json

缓存机制:默认缓存路径为 ~/.cache/huggingface/hub,可通过 --cache-dir 自定义

  手动下载

访问HuggingFace仓库

下载Janus-Pro-7B模型文件

解压到本地目录 ./models/Janus-Pro-7B

  使用示例

  多模态理解

  # inference_demo.pyimport torchfrom janus.models import MultiModalityCausalLM, VLChatProcessormodel_path = “./models/Janus-Pro-7B”processor = VLChatProcessor.from_pretrained(model_path)model = MultiModalityCausalLM.from_pretrained(model_path).to(“cuda”)# 构建对话conversation = [    {        “role”: “<|User|>”,        “content”: “\n描述这张图片的内容”,        “images”: [“sample.jpg”]    },    {“role”: “<|Assistant|>”, “content”: “”}]# 处理输入并生成响应inputs = processor(conversations=conversation)outputs = model.generate(**inputs)print(processor.decode(outputs[0]))

  文生图功能

  # generate_image.pyfrom janus.utils import generate_imageprompt = “夕阳下的雪山,山脚下有蓝色的湖泊”generate_image(    model_path=“./models/Janus-Pro-7B”,    prompt=prompt,    output_dir=“./outputs”,    num_images=4)

  Gradio 本地演示

  # 启动文本交互界面python demo/app_text.py --model-path ./models/Janus-Pro-7B# 启动多模态界面python demo/app_multimodal.py \    --model-path ./models/Janus-Pro-7B \    --port 7860

  访问 http://localhost:7860 使用交互界面

DeepSeek最新多模态大模型:Janus-Pro-7B本地部署完全指南

  常见问题

  显存不足

尝试减小max_new_tokens参数(默认512)

使用低精度模式:model = model.half()

  图像生成质量不佳

检查模型版本(推荐Janus-Pro-7B)

调整CFG权重(5-7范围)

增加并行采样数量(parallel_size=16)

  依赖冲突

  建议使用官方指定版本:

  pip install torch==2.0.1+cu117 pip install transformers==4.33.2

本文来自作者[admin]投稿,不代表吹吹讯立场,如若转载,请注明出处:https://cc199.top/bm/202501_2047.html

(34)

文章推荐

  • 预计连亏3年,正业科技全体高管自愿降薪20%!

      每经记者陈鹏丽    每经编辑陈鹏丽      1月20日晚,正业科技(300410.SZ)发布2024年度业绩预告。公司预计去年实现归属于上市公司股东的净利润亏损1.9亿元至2.35亿元。导致公司亏损的原因有:公司整体营业收入、毛利总额未达预期,光伏新能源板块甚至出现负毛利;公司对应收款

    2025年01月21日
    23
  • 年内首只触发强赎的银行转债诞生 今年转股比例或增加

      [记者注意到,截至1月23日,Wind数据显示,目前市场上13只存续的银行转债中,有8只转债的未转股比例超过90%。这些转债包括浦发转债、青农转债、上银转债、兴业转债、常银转债、紫银转债、重银转债和杭银转债。]  [去年年末,成都银行的可转债“成银转债”触发强制赎回条件,成为当年首只触发

    2025年01月24日
    31
  • 华安证券:2024年营业总收入达到45.62亿元 同比增长24.93%

    来源:Gangtise投研华安证券 发布2024年度业绩快报,显示公司经营业绩实现双增长。2024年,公司营业总收入达到45.62亿元,同比增长24.93%。归属于上市公司股东的净利润为14.84亿元,同比增长16.48%。公司总资产和归属于上市公司股东的所有者权益也分别增长29.87%和7.02

    2025年02月21日
    20
  • 乘客打车18公里被收取581元,广州交通执法人员调取大量监控查获涉事司机

    专题:《5D调查》315消费者守护计划  2月25日,广州交通运输局通报,有乘客反映“18公里路程被司机收取581元”,交通执法人员大量调取视频监控锁定嫌疑车辆,成功查获涉事车辆和涉事司机劳某某。

    2025年02月25日
    15
  • 美国政府举办峰会支持加密货币

      美国白宫7日首次举办加密货币峰会。总统特朗普在峰会上表示,美国联邦政府将支持以比特币为代表的加密货币以及数字资产市场的发展。  大约30名政府高级官员、国会议员和企业高管参加此次活动。特朗普在会上表示,上届政府对整个加密货币行业的“战争”已经结束,他支持国会通过立法为加密货币和数字资产市场

    2025年03月08日
    11
  • 科思创何照元:汽车智能化对汽车设计提出新挑战,也对材料和工艺提出新挑战

    专题:中国电动汽车百人会论坛(2025)  中国电动汽车百人会论坛(2025)于3月28日至3月30日在北京举行,主题为“夯实电动化推进智能化实现高质量发展”。科思创亚太区应用开发副总裁何照元出席并演讲。  何照元在演讲中表示,汽车智能化对汽车的设计提出了新的挑战,同时也对材料和工艺提出了

    2025年03月30日
    8
  • 上海学车网(暑期迎来学车热上海最快26天可考取驾照)

    中新网上海8月1日电(张践)每年暑期都是学车旺季,2022年也不例外。连日来,上海松江各大驾校报名量骤增,其中,大学生和“准大学生”是驾考“主力军”。且最快26天可考取驾照。7月31日,记者前往驾校实地探访。当天上午11点左右,在小昆山驾校业务办理大厅内,仍有不少学员前来咨询、报名。训练场地上,学

    2025年04月05日
    4
  • 杭萧钢构股票杭萧钢构股票行情

    亚运会概念股票是哪些?亚运会概念股票主要包括以下几款:杭州亚运会龙头股:莱茵体育(000558):定位为布局杭州,辐射长三角的区域地产开发商,主要业务集中在杭州。宏润建设(002062):作为杭州亚运会的基础设施建设参与者,有望受益于相关项目的推进。体育与地产相关股票:莱茵体育:作为杭州亚运会龙头

    2025年04月06日
    4
  • 电信宽带套餐(300元不到2000M低价宽带来了电信终于良心了一回)

    4月7日,通信人家园的一位网友表示,近期中国电信推出了全新宽带套餐,内含一张天翼手机主卡+2000M宽带+1路广东IPTV,其中宽带的基础速率为1000M,开通前两年可以享受2000兆网速,但到期后会恢复成1000M,套餐起售价为299元/月,最贵429元/月。值得一提的是,该套餐还有一个229元档

    2025年04月06日
    3
  • 号码大全(收藏100个超实用电话号码)

    东西丢了怎么办?遇到消费纠纷,怎么投诉?出门在外遇到紧急情况,怎么求助?100个超实用电话转发收藏,有备无患!(图源:人民日报)来源:四川观察

    2025年04月11日
    3

发表回复

本站作者后才能评论

评论列表(4条)

  • admin
    admin 2025年01月28日

    我是吹吹讯的签约作者“admin”!

  • admin
    admin 2025年01月28日

    希望本篇文章《DeepSeek最新多模态大模型:Janus-Pro-7B本地部署完全指南》能对你有所帮助!

  • admin
    admin 2025年01月28日

    本站[吹吹讯]内容主要涵盖:国足,欧洲杯,世界杯,篮球,欧冠,亚冠,英超,足球,综合体育

  • admin
    admin 2025年01月28日

    本文概览:专题:DeepSeek为何能震动全球AI圈   来源:小蔡AI实验室   最近DeepSeek王炸不断,刚刚出了火爆全球的R1大模型,但还有大招没放!   就在刚刚,准备在多模...

    联系我们

    邮件:吹吹讯@sina.com

    工作时间:周一至周五,9:30-18:30,节假日休息

    关注我们