【大模型】蓝耘智算云平台快速部署DeepSeek R1/R3大模型详解

目录

一、前言

二、蓝耘智算平台介绍

2.1 蓝耘智算平台是什么

2.2 平台优势

2.3 应用场景

2.4 对DeepSeek 的支持

2.4.1 DeepSeek 简介

2.4.2 DeepSeek 优势

三、蓝耘智算平台部署DeepSeek-R1操作过程

3.1 注册账号

3.1.1 余额检查

3.2 部署DeepSeek-R1

3.2.1 获取DeepSeek-R1模型

3.2.2 应用介绍与说明

3.2.3 应用部署

3.2.4 启动应用

3.2.5 效果体验

3.2.6 模型切换

3.3 文档对接

四、写在文末


一、前言

近期随着DeepSeek的热度持续走高,让AI圈也变得异常热闹,而DeepSeek-R1模型凭借其卓越技术优势,成为众多开发者和研究者的探索焦点。DeepSeek 作为一款强大的语言模型,在文本生成、知识问答等领域展现出了卓越的性能。各大厂商也纷纷开始推出便捷快速的与DeepSeek的接入方案,从而降低使用DeepSeek的成本,缩短应用开发者与DeepSeek的距离。而在这些对接的平台中,蓝耘智算平台则为我们提供了便捷、高效的计算资源,让我们能够轻松地使用 DeepSeek 进行各种任务的处理,本文将详细介绍如何在蓝耘智算平台上使用 DeepSeek的完整过程。

二、蓝耘智算平台介绍

2.1 蓝耘智算平台是什么

蓝耘智算平台是一个现代化的、基于Kubernetes的云平台,专为大规模GPU加速工作负载而构建。该平台旨在为工程师、创新者和科研工作者提供无与伦比的计算解决方案,其速度可比传统云服务提供商快35倍,成本降低30%,快速入口:lanyun.net

针对大模型训练场景,蓝耘算力云平台将运行环境、模型、 训练框架等打包到容器中,并通过定制化Kubernetes容器 、编排工具进行容器调度、管理和扩展,可以解决开发环境设置以及运维和管理问题,让算法工程师能够使用统一 的环境模板进行开发,免除了初期大量的开发环境设置, 以及在新的环境中管理新的算力资源的问题,为用户提供 开箱即用的大模型训练、推理平台。 除此之外,针对大模型训练中遇到的容器进程死机、大规 模分布式训练中GPU驱动丢失、GPU硬件损坏、甚至是计 算节点宕机等难题,都做了定制化设计,为以上难题提供 了自动化调度和强大的自愈能力,实现了更高的开发和训 练效率以及整体资源利用率。

2.2 平台优势

蓝耘智算平台的核心优势包括:

  • 高性能计算能力:

    • 平台基于行业领先的灵活基础设施和大规模GPU算力资源,能够提供开放、高性能、高性价比的算力云服务

  • 基础设施灵活

    • 平台基于行业领先的灵活基础设施构建,用户可以根据实际需求动态调整资源,实现资源的高效利用和成本的合理控制。

  • 全场景覆盖:

    • 从数据准备、代码开发、模型训练到推理部署等全场景覆盖,支持从AI开发到部署的全流程

  • 生态体系完善:

    • 平台集应用市场、预训练大模型、数据集管理、AI开发工具、模型镜像等功能于一体,致力于构建一个充满活力的AI社区平台;

  • 现代化的云平台架构

    • 蓝耘智算平台采用Kubernetes作为核心容器编排技术,构建了一个现代化的云平台架构。这确保了平台的高可用性、可扩展性和易管理性

  • 易于使用和管理

    • 平台提供直观的用户界面和强大的管理工具,使得用户可以轻松地进行资源申请、任务调度和监控管理,降低了使用门槛和管理成本。

  • 丰富的服务选项

    • 蓝耘智算平台提供多种服务选项,包括计算服务、存储服务、网络服务等,用户可以根据实际需求选择合适的服务组合,满足多样化的应用场景需求。

  • 安全性高

    • 蓝耘智算平台注重数据安全,采用多种安全措施保障用户数据的安全性和隐私性,包括数据加密、访问控制、安全审计等。

2.3 应用场景

蓝耘智算平台的应用场景包括但不限于:

  • 机器学习:提供高性能计算资源,加速模型训练和推理过程。

  • 视觉渲染:支持复杂的图形处理任务,如电影特效、建筑设计可视化等。

  • 批处理:处理大量数据和计算任务,适用于大数据分析和科学计算。

  • 科研创新:为科研工作者提供高性能计算环境,加速科研项目的进展。

蓝耘智算平台的注册使用流程简单直观,用户可以根据需求选择公有云、私有化部署或按年度订阅的服务模式。对于中小型商业客户和AIGC开发者,平台提供弹性算力服务,用户按需购买或订阅资源;对于大型企业用户,平台支持内部私有化部署,确保数据安全和性能要求

2.4 对DeepSeek 的支持

2.4.1 DeepSeek 简介

DeepSeek 是字节跳动旗下云雀模型团队基于 Transformer 架构开发的新一代开源大语言模型,以其强大的语言理解与生成能力在自然语言处理领域崭露头角。快速入口:DeepSeek

  • 在模型架构上,DeepSeek 创新性地优化了 Transformer 架构,大幅提升了模型的学习效率和性能表现。它能够更高效地处理和分析大规模文本数据,从而为各类自然语言处理任务提供坚实的基础。在预训练阶段,DeepSeek 在海量的文本数据上进行了深度训练,涵盖新闻资讯、学术论文、文学作品、社交媒体等丰富多样的数据源,使其具备了广泛的知识储备和强大的语言理解能力。

  • 在多种自然语言处理任务中都展现出卓越的性能。在文本生成方面,无论是创作故事、撰写文章还是生成对话,它都能生成连贯、富有逻辑且语义准确的文本;在智能问答任务中,DeepSeek 能快速理解问题含义,并从海量知识中提取准确答案;在文本分类、情感分析等任务中,也能凭借其精准的理解能力给出可靠的结果。

  • 此外,DeepSeek具备高度的可定制性和扩展性。开发者可以根据自身需求对模型进行微调,使其更好地适应特定领域或任务,从而为不同行业的应用提供了极大的便利。凭借这些优势,DeepSeek 在智能客服、内容创作、智能写作辅助、信息检索等领域有着广泛的应用前景,正助力各行业在自然语言处理领域取得新的突破 。

2.4.2 DeepSeek 优势

DeepSeek 与其他大语言模型相比,具有以下独特优势:

  • 技术架构方面

    • 混合专家架构优势:

      • 采用混合专家(MoE)架构,如 DeepSeek-V3 能通过路由机制按需激活专家处理任务。相比传统大模型,避免了不必要的计算,减少了计算量和内存消耗4。还可根据输入数据特性和不同任务,动态选择最合适的专家,灵活分配计算资源,优化处理效率4。

    • 指令集创新:

      • 采用 PTX 指令集,与 NVIDIA 的 CUDA 不同,PTX 可与 GPU 驱动函数直接交互,开发者能进行更深层次的硬件操作和定制,极大提高运行效率。

  • 性能表现方面

    • 推理与计算能力突出:

      • 在编程任务中,DeepSeek-V3 的通过率较高,在数学推理任务中,超过了大部分开源和闭源模型,展示出强大的问题解决能力。

    • 多语言理解出色:

      • 作为中国团队开发的模型,更符合中文语言习惯和文化背景5。在中文多语言理解测试中得分较高,远超 Llama 3.14。

    • 生成速度快:

      • DeepSeek-V3 支持多单词预测,生成效率提升了 3 倍,从原本每秒 20 个 token 的生成速率提升至 60 个 token,能更迅速高效地处理大规模文本生成任务。

    • 多模态处理能力强

      • DeepSeek-VL 能够在不丢失语言能力的情况下处理多种类型的数据,包括逻辑图、网页、公式识别、科学文献、自然图像等,还能接受高达 1024x1024 的大尺寸分辨率图片输入,提高了对细节的识别能力。

  • 成本与资源利用方面

    • 训练成本低

      • DeepSeek-V3 的训练成本仅为 557 万美元,远低于 GPT-4 的约 1 亿美元以及 Meta 的 Llama 3.1 的 5 亿美元,在计算资源和硬件资源上的利用效率更高。

    • 推理成本优势

      • DeepSeek 的使用成本为 0.0012 美元 / 千 token,成本效益优势明显,对于资源有限的企业或研究团队更具吸引力。

  • 开源与生态方面

    • 开源与商用授权

      • 提供开源商用授权政策,允许开发者自行部署、训练、微调和应用模型,为开发者和研究者提供了技术支持。

    • 对开发者友好

      • 开源使开发者能够根据自己的需求调整和改进模型,在大规模分布式系统上部署时,能更好地掌控资源和计算效率,有效吸引开发者参与优化和定制,利于形成活跃的开发社区和丰富的应用生态。

三、蓝耘智算平台部署DeepSeek-R1操作过程

如何基于蓝耘智算平台快速使用DeepSeek呢,接下来看详细的操作过程。

3.1 注册账号

注册/登录入口:蓝耘元生代智算云平台

登录之后进入到下面的主页

3.1.1 余额检查

新用户首次注册并登录之后,平台默认会赠送一定额度的代金券,代金券可用于使用平台进行大模型的部署使用,跟其他类似的平台做法类似,如果代金券的额度消耗完毕,则需要充值。

3.2 部署DeepSeek-R1

3.2.1 获取DeepSeek-R1模型

进入应用市场之后,可以看到展现在首页第一个就是deepseek-r1模型,们这里以第一个模型deepseek-r1_1.5b_7b_8b进行举例,当然左侧还有很多其他类型的大模型,可以根据自己的需要进行选择。

3.2.2 应用介绍与说明

DeepSeek在R1模型的基础上,使用Qwen和Llama蒸馏了几个不同大小的模型,适配目前市面上对模型尺寸的最主流的几种需求。Qwen和Llama系列模型架构相对简洁,并提供了高效的权重参数管理机制,适合在大模型上执行高效的推理能力蒸馏。蒸馏的过程中不需要对模型架构进行复杂修改 ,减少了开发成本。【默认账号:lanyunuser@lanyun.net 密码:lanyunuser】

3.2.3 应用部署

进入当前模型的应用详情之后,点击右侧的部署

弹出下面的参数选择框

这里选择按量计费,用多少算多少,GPU的型号选择默认的RTX 4090,由于是云上部署,就算自己的电脑配置不是这个,我们依旧可以在这个平台来体验这个4090显卡,选择好之后点击这个立即购买就行了

然后跳转到下面的实例创建页面

创建完成后,注意保管好下面这两个配置信息,后续可能用得上

如果开启的应用实例暂时不用了,可以点击关机,避免一直消耗账户的额度费用

3.2.4 启动应用

上述部署完成之后,点击右侧的快速启动应用,跳转到下面的登录页面,使用上文中的账号和密码进行登录

  • 账号:lanyunuser@lanyun.net

  • 密码:lanyunuser

登录成功后,来到下面的页面,即可视化对话页面

3.2.5 效果体验

到上面这一步,应用就算搭建完成后,下面来问几个问题,体验下效果如何。

问题1:

  • 你是一个资深导游,在预算不超过2000的情况下,为我设计一个桂林3日游攻略

问题2:

  • 写一篇AI技术发展的文章,面向的群体为大学生,不超过500字

问题3:

  • 你是一个DBA专家,为我提供mysql常用的优化技巧

体验小结

总的来说,使用这种方式部署deepseek在提问来看,回答的流畅性、回答质量来说还是基本可以满足使用者要求的,比起本地直接部署大模型高昂的配置成本,值得一试

3.2.6 模型切换

在当前的web体验控制台顶部,还可以根据实际需要手动切换模型,如下

3.3 文档对接

如果你要基于你部署的deepseek应用进行本地的代码开放,平台也提供了相应的文档可以参考使用,入口:快速入门 | GPU智算云平台文档中心

四、写在文末

本文通过操作演示详细介绍了如何基于蓝耘智算平台快速部署DeepSeek-R1大模型的完整步骤,当然,更多的功能还可以解锁,有兴趣的同学可以在此基础上继续深入研究,本篇到此结束,感谢观看。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/975630.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

ai-financial-agent - 为金融投资打造的AI代理

探索人工智能在投资研究中的应用。本项目仅用于**教育**目的,不用于真实交易或投资。 作者声明: 本项目仅用于教育和研究目的。 不用于真实交易或投资不提供任何保证或担保过去的表现并不代表未来的结果Creator 对经济损失不承担任何责任咨询财务顾问…

基于keepalived的Nginx高可用架构

一、概述 Keepalived 是一个基于 VRRP(Virtual Router Redundancy Protocol)协议 的高可用性解决方案,为了解决静态路由器出现的单点故障问题,它能偶保证网络的不间断、稳定的运行。 二、核心功能 IP 漂移(VIP&…

学术论文项目网站搭建教程【Github】

本教程使用的是linux系统,ubuntu20.04版本进行学术项目网站搭建 一:创建github的个人组织 我个人习惯使用自己的github组织【Your organizations】来进行学术项目网站的创建: New一个organization,点击Free中的Create a free o…

postman调用ollama的api

按照如下设置,不需要设置key 保持长会话的方法 # 首次请求 curl http://localhost:11434/api/generate -d {"model": "deepseek-r1:32b","prompt": "请永久记住:110,1-12,之后所有数学计算必…

【Linux】多线程 -> 线程同步与基于BlockingQueue的生产者消费者模型

线程同步 条件变量 当一个线程互斥地访问某个变量时,它可能发现在其它线程改变状态之前,它什么也做不了。 例如:一个线程访问队列时,发现队列为空,它只能等待,直到其它线程将一个节点添加到队列中。这…

ChatGPT各模型版本对比分析

文章目录 1. GPT-3.5(2022年11月)2. GPT-4(2023年3月)3. GPT-4o(2024年5月)4. GPT-4o mini(2024年7月)5. o1系列(2024年9月至12月)6. o3-mini(202…

萌新学 Python 之自定义函数

函数主要用来封装功能,具有独立功能的代码块,可以提高代码重复利用率,便于模块管理 函数的定义: def 函数名(形参): 函数体,独立功能的代码 return ‘函数的返回值’ 函数注意事项: 1.函数的命名通常使…

【工作流】Spring Boot 项目与 Camunda 的整合

【工作流】Spring Boot 项目与 Camunda 的整合 【一】Camunda 和主流流程引擎的对比【二】概念介绍【1】Camunda 概念:【2】BPMN 概念 【三】环境准备【1】安装流程设计器CamundaModeler【画图工具】(1)下载安装 【2】CamundaModeler如何设计…

【Linux】基于UDP/TCP套接字编程与守护进程

目录 一、网路套接字编程 (一)基础概念 1、源IP地址与目的IP地址 2、端口号 3、TCP与UDP 4、网络字节序 (二)套接字编程接口 1、socket 常见API 2、sockaddr结构 (三)UDP套接字 1、UDP服务器创建…

【图像处理】:两幅图中相同区域的相似度比较

两幅图中相同区域的相似度比较 1.OpenCV和Python实现的两幅图相似度衡量方法1. 均方误差(MSE)2. 结构相似性指数(SSIM)图像协方差能显示结构特征的原因 3. 直方图相似度4. 特征点匹配5. 相关系数(Pearson Correlation&…

[python脚本]论文1.(一)CPU/内存数据分析和分组

CPU 收集到的CPU数据,格式如下: 由于这里6个数据为一组来收集latency的数据以及各个分位值的数据,而本质上每一行都是一次完整的测试,因此这里将这个csv文件分为两个文件,第一个是和latency相关的,将6条数…

綫性與非綫性泛函分析與應用_1.例題(下)-半母本

第1章 實分析與函數論:快速回顧(下) 五、基數;有限集和無限集相關例題 例題1:集合基數的判斷 判斷集合和集合B=\{a,b,c,d,e\}的基數關係。 解析: 可以構造一個雙射,例如,,,,。 所以,兩個集合具有相同的基數。 例題2:可數集的證明 證明整數集是可數集。 解析: …

MQTT实现智能家居------3、源码分析(超详细)

一、连接服务器 1、初始化: mqtt_log_init();是一个空函数,自己定义宏 client mqtt_lease();//创建一个client结构体,从此以后client代表客户端 platform_memory_alloc();//是一个分配内存的总函数,可以适用于Linux、FreeRTos…

Qt常用控件之日历QCalendarWidget

日历QCalendarWidget QCalendarWidget 是一个日历控件。 QCalendarWidget属性 属性说明selectDate当前选中日期。minimumDate最小日期。maximumDate最大日期。firstDayOfWeek设置每周的第一天是周几(影响日历的第一列是周几)。gridVisible是否显示日历…

智慧废品回收小程序php+uniapp

废品回收小程序:数字化赋能环保,开启资源循环新时代 城市垃圾治理难题,废品回收小程序成破局关键 随着城市化进程加速与消费水平提升,我国生活垃圾总量逐年攀升,年均增速达5%-8%,其中超30%为可回收物。然…

SkyWalking集成Kafka实现日志异步采集经验总结

SkyWalking日志异步采集架构 【重点知识】 1、【Agent】kafka-reporter-plugin-x.x.x.jar包放plugins目录后必走kafka(kafka没有正确配置就会报错) 2、【Agent】异步如不开启数据压缩,日志数据较大,pod多、业务大时容易造成网络…

C++第十六讲:红黑树

C第十六讲:红黑树 1.什么是红黑树1.1红黑树的特点 2.MyRBTree实现2.1红黑树的结构2.2红黑树的插入2.2.1插入的总体逻辑2.2.2情况一:变色2.2.3情况二:单旋 变色2.2.4情况三:双旋 变色2.2.4插入代码总结 2.3红黑树的检查2.4完整代…

KubeKey一键安装部署k8s集群和KubeSphere详细教程

目录 一、KubeKey简介 二、k8s集群KubeSphere安装 集群规划 硬件要求 Kubernetes支持版本 操作系统要求 SSH免密登录 配置集群时钟 所有节点安装依赖 安装docker DNS要求 存储要求 下载 KubeKey 验证KubeKey 配置集群文件 安装集群 验证命令 登录页面 一、Ku…

Java 值传递

1 形参&实参 方法的定义可能会用到参数,参数在程序语言中分为: 实参:用于传递给函数/方法的参数,必须有确定的值。 形参:用于定义函数/方法,接收实参,不需要有确定的值。 String hello …

开源一款I2C电机驱动扩展板-FreakStudio多米诺系列

总线直流电机扩展板 原文链接: FreakStudio的博客 摘要 设计了一个I2C电机驱动板,通过I2C接口控制多个电机的转速和方向,支持刹车和减速功能。可连接16个扩展板,具有PWM输出、过流过热保护和可更换电机驱动芯片。支持按键控制…