【InternLM 实战营第二期笔记04】XTuner微调LLM:1.8B、多模态、Agent

一、微调的原因

大模型微调（Fine-tuning）的原因主要有以下几点：

  1. 适应特定任务：预训练的大模型往往是在大量通用数据上训练的，虽然具有强大的表示学习能力，但可能并不直接适用于特定的下游任务。通过微调，可以使模型针对特定任务的数据分布进行调整，从而提高在该任务上的性能。
  2. 利用预训练知识：预训练的大模型已经学习到了大量的通用知识，这些知识对于很多任务来说都是有益的。通过微调，可以保留这些预训练的知识，并在此基础上进行特定任务的调整，从而实现知识的迁移和复用。
  3. 减少训练时间和计算资源：从头开始训练一个大型模型需要大量的时间和计算资源。而微调一个预训练模型通常只需要较少的数据和计算资源，就可以达到较好的性能。这大大降低了应用深度学习技术的门槛和成本。
  4. 提高模型性能：通过微调，可以优化模型在特定任务上的性能。微调过程中，模型会根据特定任务的数据进行参数调整，使其更好地适应任务需求，从而提高性能。
  5. 解决过拟合问题：在某些情况下，直接应用预训练模型到特定任务可能会导致过拟合问题。通过微调，可以对模型进行正则化，减少过拟合的风险，提高模型的泛化能力。

综上所述，大模型微调是一种有效的方法，可以使模型更好地适应特定任务，提高性能，并降低训练成本和时间。

二、两种微调范式

两种微调范式主要包括增量预训练微调和指令跟随微调。这两种范式在LLM（大型语言模型）的下游应用中经常被用到，各有其独特的使用场景和所需训练数据。

  1. 增量预训练微调

    • 使用场景：该范式主要用于让基座模型学习到一些新知识，这些知识可能是某个特定垂类领域内的常识或专业知识。通过这种方式，模型能够在原有基础上进行扩展，增强其对特定领域的理解和处理能力。
    • 训练数据：增量预训练微调通常需要大量的文章、书籍、代码等作为训练数据。这些数据能够提供丰富的领域知识和上下文信息，帮助模型更好地理解和吸收新知识。

  2. 指令跟随微调

    • 使用场景：这种微调模式主要用于让模型学会对话模板，并能够根据人类的指令进行对话。通过这种方式，模型能够更好地理解人类的意图和需求，从而提供更为准确和有用的回应。
    • 训练数据：指令跟随微调通常需要高质量的对话、问答数据作为训练素材。这些数据能够提供丰富的对话场景和指令类型，帮助模型学会如何根据不同的指令进行回应。

这两种微调范式各有其优势和适用场景。增量预训练微调更适合于那些需要模型具备特定领域知识的应用，而指令跟随微调则更适用于那些需要模型与人类进行自然交互的场景。在实际应用中，可以根据具体需求选择合适的微调范式，以达到最佳的模型性能和应用效果。

 三、一条数据的一生

原始数据以标准格式进入系统，这些数据可能包括各种形式的信息，如文本、图像等。在Llama 2部分，用户输入数据，系统根据这些数据生成报告，并与用户进行互动。在这个过程中，系统还会对数据添加对话模板和标签，以便更好地理解和处理用户的请求。

接下来，在InternLM部分，数据会经历系统上下载、系统下打包和Llama 2训练等步骤。系统下载和上传数据，进行数据打包处理，然后利用这些数据对Llama 2进行训练，提升模型的性能和准确性。

最后，通过InternLM生成阶段，系统会根据用户的指令和对话模板，生成包含对话模板的助理回复。这个回复不仅回答了用户的问题，还遵循了特定的对话格式和规则，使得整个交互过程更加自然和流畅。

 四、LoRA & QLoRA

LoRA和QLoRA为我们提供了一种高效且灵活的方式来优化大型语言模型的性能，而无需对整个模型进行全面的改动。它们通过引入低秩适应和量化技术，成功降低了模型微调的显存消耗，为模型的部署和应用提供了更大的便利性和可能性。

LoRA主要是通过添加一个小型的线性层（支路）到原有的大型线性层旁边，来降低模型微调的显存消耗。这个新增的支路通常被称为Adapter，其参数量远小于原有的线性层，因此能够显著减少训练时所需的显存。通过这种方法，LoRA允许我们在不改变原有模型结构的情况下，对其进行有效的微调，以适应不同的任务或数据集。

而QLoRA是LoRA的一种改进版本，它引入了量化技术来进一步压缩Adapter的参数量。这种量化方法可以将Adapter的权重表示为低精度的数值，从而进一步减少显存消耗。即使只有有限的计算资源，QLoRA也能帮助我们有效地改造和优化大型语言模型。

五、XTuner简介

XTuner是一款功能强大的软件，其设计旨在提供灵活且高效的微调策略与算法，以满足各类场景下的应用需求。其主要功能亮点体现在多个方面：

首先，XTuner支持多种微调算法，无论是InternLM、Llama、Gemma，还是Mistral等，都能找到相应的优化策略。这种多样化的算法支持使得XTuner可以覆盖更广泛的场景，从而为用户提供更多的选择。

其次，XTuner能够适配多种开源生态，如HuggingFace和ModelScope等。这意味着用户可以轻松加载各种模型或数据集，进行快速的微调操作，提高工作效率。

此外，XTuner在任务类型、数据格式以及训练引擎等方面也提供了丰富的支持。无论是Alpaca、QLoRA微调，还是增量预训练等任务，XTuner都能提供相应的优化加速方案。

在硬件适配方面，XTuner展现出了出色的兼容性。它支持从消费级显卡到数据中心级显卡的广泛选择，包括但不限于NVIDIA的20系、30系、40系显卡，以及A10、A100、H100等高端显卡。这使得用户可以根据自身的硬件条件，选择最适合的配置进行微调操作。

 六、8GB显存玩转LLM

DeepSpeed ZeRQ和FlashAttention都是XTuner框架中针对深度学习模型训练过程中的显存消耗和计算效率问题而设计的优化技巧。它们通过不同的方式，有效地提升了模型训练的性能和速度，使得在有限的硬件资源下，能够更有效地进行深度学习模型的训练和部署。

DeepSpeed ZeRQ是DeepSpeed框架中的一个分布式训练技术，它通过优化模型参数的共享和内存使用，提高了深度学习模型训练的效率和速度。具体来说，ZeRQ实现了零总和压缩算法，这种算法通过减少同步操作中传输的数据量来降低通信开销。此外，ZeRQ还提供了ZeRO-2（Zero Redundancy Optimizer-2）的内存优化技术，这种技术将大型模型参数分割成多个小块，每个小块独立存储于不同的设备上，从而减少了内存使用量。每个分块都可以被独立地更新和同步，进一步提高了训练速度和可扩展性。因此，使用DeepSpeed ZeRQ可以在保持模型性能的同时，显著降低训练时的显存消耗，从而使得更大规模、更复杂的模型训练成为可能。

而FlashAttention则主要关注于提高深度学习模型中Attention机制的计算效率。传统的Attention机制在计算过程中需要频繁地读写内存，这会导致显著的延迟。FlashAttention通过优化内存访问模式，减少了这种延迟。它利用高效的数据布局和访问模式，将Attention计算并行化，从而避免了计算过程中Attention Score NxN的显存占用。这种优化使得FlashAttention在处理大规模数据时，能够显著提高计算效率，加快训练速度。

 七、InternLM2 1.8B 模型

InternLM2 1.8B模型是一款高质量、高适应灵活性的基础模型，它是为了响应社区用户强烈的呼声而开发的，并已经正式开源。这款模型提供了三个不同版本供用户选择，满足不同需求。它能够为下游深度适应提供良好的起点，并且拥有较低的硬件门槛，使得初学者也能轻松进行大模型的全链路操作。此外，该模型还表现出优秀的指令跟随、聊天体验和函数调用能力，非常推荐在下游应用程序中使用。具体来说，在FP16精度模式下，InternLM2-1.8B仅需4GB显存的笔记本显卡即可顺畅运行，而拥有8GB显存的消费级显卡即可轻松进行模型的微调工作。

 八、多模态LLM

1.多模态LLM简介

多模态LLM，即多模态大语言模型（Multimodal Large Language Model），是一种能够处理多种模态输入（如文本、图像、语音等）的语言模型。相比于传统的单模态语言模型，多模态LLM能够更好地理解和生成与多模态输入相关的自然语言。

多模态LLM通过模态对齐和多模态融合技术，能够实现对不同模态信息的有效整合和处理。这使得多模态LLM在智能客服、智能助手、文本生成和创作辅助、智能搜索和信息推荐、智能编程和代码生成等多个领域具有广泛的应用前景。

2.LLaVA方案简介

LLaVA方案是一种创新的文本与图像结合的处理方案。它主要利用了GPT-4V项目对图像数据进行描述生成，进而构建出大量包含问题文本、图像和答案文本的数据对。这些数据对为后续的模型训练提供了丰富的资源。

在训练阶段，LLaVA方案通过利用已有的文本单模态LLM（大语言模型）和训练出的ImageProjector（图像投影器），共同构建成一个完整的LLaVA模型。这个模型不仅能够处理文本数据，还能够处理图像数据，实现了文本与图像的多模态融合。

在LLaVA训练阶段示意图中，我们可以看到图像数据经过预处理后，被送入ImageProjector进行特征提取，然后与文本数据一起，通过文本单模态LLM进行处理。在这个过程中，模型学习到了如何将图像特征与文本信息进行有效的结合，从而提高了对图像的理解和生成文本的质量。

到了测试阶段，LLaVA模型可以接收新的图像输入，通过ImageProjector提取图像特征，并结合文本单模态LLM生成相应的文本输出。这种能力使得LLaVA模型在智能客服、图像描述生成、图像问答等多个领域具有广泛的应用前景。

3.快速上手

在【InternLM 实战营第二期作业04】XTuner微调LLM:1.8B、多模态、Agent中会详细展示【InternLM 实战营第二期作业04】XTuner微调LLM:1.8B、多模态、Agent-CSDN博客：

九、XTuner多模态训练与测试

快速上手

1.环境准备

XTuner安装
# 如果你是在 InternStudio 平台，则从本地 clone 一个已有 pytorch 的环境：
# pytorch    2.0.1   py3.10_cuda11.7_cudnn8.5.0_0

cd ~ && studio-conda xtuner0.1.17
# 如果你是在其他平台：
# conda create --name xtuner0.1.17 python=3.10 -y

# 激活环境
conda activate xtuner0.1.17
# 进入家目录 （~的意思是 “当前用户的home路径”）
cd ~
# 创建版本文件夹并进入，以跟随本教程
mkdir -p /root/xtuner0117 && cd /root/xtuner0117

# 拉取 0.1.17 的版本源码
git clone -b v0.1.17  https://github.com/InternLM/xtuner
# 无法访问github的用户请从 gitee 拉取:
# git clone -b v0.1.15 https://gitee.com/Internlm/xtuner

# 进入源码目录
cd /root/xtuner0117/xtuner

# 从源码安装 XTuner
pip install -e '.[all]' && cd ~

 假如速度太慢可以 Ctrl + C 退出后换成 pip install -e '.[all]' -i https://mirrors.aliyun.com/pypi/simple/

 2.Pretrain阶段

Pretrain阶段训练完成后，此时的模型已经有视觉能力了！但是由于训练数据中都是图片+图片标题，所以此时的模型虽然有视觉能力，但无论用户问它什么，它都只会回答输入图片的标题。即，此时的模型只会给输入图像“写标题”。

NPROC_PER_NODE=8 xtuner train llava_internlm2_chat_1_8b_clip_vit_large_p14_336_e1_gpu8_pretrain --deepspeed deepspeed_zero2

NPROC_PER_NODE=8 xtuner train llava_internlm2_chat_1_8b_qlora_clip_vit_large_p14_336_lora_e1_gpu8_finetune --deepspeed deepspeed_zero2

3. Finetune阶段

训练数据构建
格式
[
    {
        "id": "随便什么字符串",
        "image": "图片文件的相对位置。相对谁？相对你后面config文件里指定的image_folder参数的路径。",
        "conversation": [
            {
                "from": "human",
                "value": "<image>\n第1个问题。"
            },
            {
                "from": "gpt",
                "value": "第1个回答"
            },
            {
                "from": "human",
                "value": "第2个问题。"
            },
            {
                "from": "gpt",
                "value": "第2个回答"
            },
            # ......
            {
                "from": "human",
                "value": "第n个问题。"
            },
            {
                "from": "gpt",
                "value": "第n个回答"
            },
        ]
    },

    # 下面是第2组训练数据了。

    {
        "id": "随便什么字符串",
        "image": "图片文件的相对位置。相对谁？相对你后面config文件里指定的image_folder参数的路径。",
        "conversation": [
            {
                "from": "human",
                "value": "<image>\n第1个问题。"
            },
            # ......
            {
                "from": "gpt",
                "value": "第n个回答"
            }
        ]
    }
]

 注意：每组训练数据的第1个来自human的问题前，要加上图片占位符，即<image>

 制作
[
  {
    "id": "<random_number_string>",
    "image": "test_img/oph.jpg",
    "conversations": [
      {
        "from": "human",
        "value": "<image>\nDescribe this image."
      },
      {
        "from": "gpt",
        "value": "<answer1>"
      },
      {
        "from": "human",
        "value": "<question2>"
      },
      {
        "from": "gpt",
        "value": "<answer2>"
      },
      {
        "from": "human",
        "value": "<question3>"
      },
      {
        "from": "gpt",
        "value": "<answer3>"
      }
    ]
  }
]
 生成示例图片的问答对数据
cd ~ && git clone https://github.com/InternLM/tutorial -b camp2 && conda activate xtuner0.1.17 && cd tutorial

python /root/tutorial/xtuner/llava/llava_data/repeat.py \
  -i /root/tutorial/xtuner/llava/llava_data/unique_data.json \
  -o /root/tutorial/xtuner/llava/llava_data/repeated_data.json \
  -n 200
 准备配置文件
创建配置文件
# 查询xtuner内置配置文件
xtuner list-cfg -p llava_internlm2_chat_1_8b

# 拷贝配置文件到当前目录
xtuner copy-cfg \
  llava_internlm2_chat_1_8b_qlora_clip_vit_large_p14_336_lora_e1_gpu8_finetune \
  /root/tutorial/xtuner/llava
 修改配置文件

修改llava_internlm2_chat_1_8b_qlora_clip_vit_large_p14_336_lora_e1_gpu8_finetune_copy.py文件

# Model
- llm_name_or_path = 'internlm/internlm2-chat-1_8b'
+ llm_name_or_path = '/root/share/new_models/Shanghai_AI_Laboratory/internlm2-chat-1_8b'
- visual_encoder_name_or_path = 'openai/clip-vit-large-patch14-336'
+ visual_encoder_name_or_path = '/root/share/new_models/openai/clip-vit-large-patch14-336'

# Specify the pretrained pth
- pretrained_pth = './work_dirs/llava_internlm2_chat_1_8b_clip_vit_large_p14_336_e1_gpu8_pretrain/iter_2181.pth'  # noqa: E501
+ pretrained_pth = '/root/share/new_models/xtuner/iter_2181.pth'

# Data
- data_root = './data/llava_data/'
+ data_root = '/root/tutorial/xtuner/llava/llava_data/'
- data_path = data_root + 'LLaVA-Instruct-150K/llava_v1_5_mix665k.json'
+ data_path = data_root + 'repeated_data.json'
- image_folder = data_root + 'llava_images'
+ image_folder = data_root

# Scheduler & Optimizer
- batch_size = 16  # per_device
+ batch_size = 1  # per_device


# evaluation_inputs
- evaluation_inputs = ['请描述一下这张图片','Please describe this picture']
+ evaluation_inputs = ['Please describe this picture','What is the equipment in the image?']
 开始Finetune
cd /root/tutorial/xtuner/llava/
xtuner train /root/tutorial/xtuner/llava/llava_internlm2_chat_1_8b_qlora_clip_vit_large_p14_336_lora_e1_gpu8_finetune_copy.py --deepspeed deepspeed_zero2

 4.对比Finetune前后的性能差异

  Finetune前

加载 1.8B 和 Pretrain阶段产物(iter_2181) 到显存。

# 解决小bug
export MKL_SERVICE_FORCE_INTEL=1
export MKL_THREADING_LAYER=GNU

# pth转huggingface
xtuner convert pth_to_hf \
  llava_internlm2_chat_1_8b_clip_vit_large_p14_336_e1_gpu8_pretrain \
  /root/share/new_models/xtuner/iter_2181.pth \
  /root/tutorial/xtuner/llava/llava_data/iter_2181_hf

# 启动！
xtuner chat /root/share/new_models/Shanghai_AI_Laboratory/internlm2-chat-1_8b \
  --visual-encoder /root/share/new_models/openai/clip-vit-large-patch14-336 \
  --llava /root/tutorial/xtuner/llava/llava_data/iter_2181_hf \
  --prompt-template internlm2_chat \
  --image /root/tutorial/xtuner/llava/llava_data/test_img/oph.jpg
效果图

Finetune前：只会打标题 

 Finetune后

加载 1.8B 和 Fintune阶段产物 到显存

# 解决小bug
export MKL_SERVICE_FORCE_INTEL=1
export MKL_THREADING_LAYER=GNU

# pth转huggingface
xtuner convert pth_to_hf \
  /root/tutorial/xtuner/llava/llava_internlm2_chat_1_8b_qlora_clip_vit_large_p14_336_lora_e1_gpu8_finetune_copy.py \
  /root/tutorial/xtuner/llava/work_dirs/llava_internlm2_chat_1_8b_qlora_clip_vit_large_p14_336_lora_e1_gpu8_finetune_copy/iter_1200.pth \
  /root/tutorial/xtuner/llava/llava_data/iter_1200_hf

# 启动！
xtuner chat /root/share/new_models/Shanghai_AI_Laboratory/internlm2-chat-1_8b \
  --visual-encoder /root/share/new_models/openai/clip-vit-large-patch14-336 \
  --llava /root/tutorial/xtuner/llava/llava_data/iter_1200_hf \
  --prompt-template internlm2_chat \
  --image /root/tutorial/xtuner/llava/llava_data/test_img/oph.jpg
效果图 

Finetune后：会回答问题了

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/565470.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

京东商品详情数据采集API接口|附京东商品数据返回PHP多语言高并发

京东商品详情数据采集API接口|附京东商品数据返回PHP多语言高并发

京东获得JD商品详情 API 返回值说明 item_get-获得JD商品详情 API测试 注册开通 jd.item_get 公共参数 名称类型必须描述keyString是调用key&#xff08;必须以GET方式拼接在URL中&#xff09;secretString是调用密钥api_nameString是API接口名称&#xff08;包括在请求地址…
阅读更多...
接收区块链的CCF会议--SecureComm 2024 截止5.10 附录用率

接收区块链的CCF会议--SecureComm 2024 截止5.10 附录用率

会议名称&#xff1a;SecureComm CCF等级&#xff1a;CCF C类会议 类别&#xff1a;网络与信息安全 录用率&#xff1a;2022年录用率33%&#xff08;43/130) Topics Security and privacy in computer networks (e.g., wired, wireless, mobile, hybrid, sensor, vehicular,…
阅读更多...
【Flutter】自动生成图片资源索引插件二：FlutterAssetsGenerator

【Flutter】自动生成图片资源索引插件二：FlutterAssetsGenerator

介绍 FlutterAssetsGenerator 插件 &#xff1a;没乱码&#xff0c;生成的图片索引命名是小驼峰 目录 介绍一、安装二、使用 一、安装 1.安装FlutterAssetsGenerator 插件 生成的资源索引类可以修改名字&#xff0c;我这里改成R 2. 根目录下创建assets/images 3. 点击image…
阅读更多...
react学习（一）之初始化一个react项目

react学习（一）之初始化一个react项目

React 是一个用于构建用户界面&#xff08;UI&#xff09;的 JavaScript 库&#xff0c;用户界面由按钮、文本和图像等小单元内容构建而成。React 帮助你把它们组合成可重用、可嵌套的 组件。从 web 端网站到移动端应用&#xff0c;屏幕上的所有内容都可以被分解成组件&#xf…
阅读更多...
JMeter性能测试系列一初识JMeter

JMeter性能测试系列一初识JMeter

1.JMeter介绍 Apache组织的Stefano Mazzocchi是JMeter项目的创始人。编写JMeter最初的目的是为了测试server的性能(后期被Tomcat替代)。随后&#xff0c;JMeter在Apache组织内部开始被其他项目所使用&#xff0c;并最终推广出来&#xff0c;成为独立的软件项目并不断更新&…
阅读更多...
【vue3】插件@tsparticles/vue3、tsparticles实现粒子特效

【vue3】插件@tsparticles/vue3、tsparticles实现粒子特效

文章目录 一、安装依赖二、全局引入三、使用 一、安装依赖 npm i tsparticles/vue3 npm i tsparticles二、全局引入 // main.js import Particles from tsparticles/vue3 import { loadFull } from tsparticlesconst app createApp(App) app.use(Particles, {init: async (e…
阅读更多...
YOLO算法改进Backbone系列之MogaNet：

YOLO算法改进Backbone系列之MogaNet：

卷积神经网络&#xff08;ConvNets&#xff09;一直是计算机视觉的首选方法。受灵长类视觉系统的启发&#xff0c;卷积层可以对具有区域密集连接和平移等方差约束的观测图像的邻域相关性进行编码。通过交错分层&#xff0c;ConvNets获得了被动增加的感受野&#xff0c;并善于识…
阅读更多...
java接口自动化测试

java接口自动化测试

&#x1f525; 交流讨论&#xff1a;欢迎加入我们一起学习&#xff01; &#x1f525; 资源分享&#xff1a;耗时200小时精选的「软件测试」资料包 &#x1f525; 教程推荐&#xff1a;火遍全网的《软件测试》教程 &#x1f4e2;欢迎点赞 &#x1f44d; 收藏 ⭐留言 &#x1…
阅读更多...
组合模式【结构型模式C++】

组合模式【结构型模式C++】

1.概述 组合模式又叫部分整体模式属于结构型模式&#xff0c;是用于把一组相似的对象当作一个单一的对象。组合模式依据树形结构来组合对象&#xff0c;用来表示部分以及整体层次。 2.结构 组件&#xff08;Component&#xff09;:定义了组合中所有对象的通用接口&#xff0c…
阅读更多...
面试题

面试题

jdk自带的线程池 newFixedThreadPool 固定大小线程池 同时可运行的线程数量是固定的。当提交新任务时&#xff0c;如果线程池中已有线程正在执行任务且数量达到上限&#xff0c;则新任务将被放入队列中等待&#xff0c;直到有线程空闲出来。适用于处理长期存在且可以并行执行的…
阅读更多...
TFTLCD原理硬件介绍

TFTLCD原理硬件介绍

介绍 TFT LCD&#xff08;薄膜晶体管液晶显示器&#xff09;是一种广泛使用的显示技术&#xff0c;它结合了薄膜晶体管&#xff08;TFT&#xff09;和液晶显示&#xff08;LCD&#xff09;技术。TFT LCD的主要特点是使用TFT矩阵来控制施加到每个像素的电压&#xff0c;从而实现…
阅读更多...
财务管理困扰外贸公司？软件解决方案大揭秘！

财务管理困扰外贸公司？软件解决方案大揭秘！

本文将探讨外贸公司在财务管理中遇到的难题&#xff0c;提出可能性的解决方案&#xff0c;并概述理想的外贸财务管理软件应具备哪些必备功能。 一、外贸公司财务管理难题 1、交易币种多样化 如何准确记录不同货币的财务活动&#xff0c;是外贸公司必须面对的问题。外贸公司的…
阅读更多...
【昇腾产品应用】英码科技EA500I基于昇腾Mind SDK实现实时人体关键点检测

【昇腾产品应用】英码科技EA500I基于昇腾Mind SDK实现实时人体关键点检测

在教育、体育、安防、交通、医疗等领域中&#xff0c;实时人体关键点检测应用发挥着至关重要的作用&#xff0c;比如在体育训练时&#xff0c;实时人体关键点检测可以精确、实时地捕捉运动员的动作&#xff0c;从而进行动作分析和优化&#xff1b;在安防应用场景中&#xff0c;…
阅读更多...
web前端框架设计第五课-计算属性与监听属性

web前端框架设计第五课-计算属性与监听属性

web前端框架设计第五课-计算属性与监听属性 一.预习笔记 1.计算属性 computed split():拆分 reverse():倒序 join():拼接 计算属性与方法&#xff0c;两者效果一致&#xff0c;但是computed 是基于它的依赖缓存&#xff0c;只有相关依赖发生改变时才会重新取值。而使用 met…
阅读更多...
openGauss学习笔记-268 openGauss性能调优-TPCC性能调优测试指导-网络配置-网卡多中断队列设置

openGauss学习笔记-268 openGauss性能调优-TPCC性能调优测试指导-网络配置-网卡多中断队列设置

文章目录 openGauss学习笔记-268 openGauss性能调优-TPCC性能调优测试指导-网络配置-网卡多中断队列设置268.1 中断调优268.2 网卡固件确认与更新 openGauss学习笔记-268 openGauss性能调优-TPCC性能调优测试指导-网络配置-网卡多中断队列设置 本章节主要介绍openGauss数据库内…
阅读更多...
多项式相关题（）

多项式相关题（）

D - S老师的虚树 值得一提的是如何求这个 a i a_i ai​&#xff0c;可以考虑按dfs序考虑同一种边&#xff0c;运用树状数组即可统计&#xff08;注意不要加重了&#xff0c;不需要打区间覆盖&#xff0c;这样可以不用打线段树&#xff09; F(i, 1, n) {ll sz d[i].size() - 1…
阅读更多...
PLC_博图系列☞P_TRIG：扫描 RLO 的信号上升沿

PLC_博图系列☞P_TRIG：扫描 RLO 的信号上升沿

PLC_博图系列☞P_TRIG&#xff1a;扫描 RLO 的信号上升沿 文章目录 PLC_博图系列☞P_TRIG&#xff1a;扫描 RLO 的信号上升沿背景介绍P_TRIG&#xff1a; 扫描 RLO 的信号上升沿说明参数示例 关键字&#xff1a; PLC、 西门子、 博图、 Siemens 、 P_TRIG 背景介绍 这是一…
阅读更多...
Python 数据库简化操作：dataset 库介绍

Python 数据库简化操作：dataset 库介绍

文章目录 Python 数据库简化操作&#xff1a;dataset 库介绍第一部分&#xff1a;背景介绍第二部分&#xff1a;库是什么&#xff1f;第三部分&#xff1a;如何安装这个库&#xff1f;第四部分&#xff1a;库函数使用方法第五部分&#xff1a;场景应用第六部分&#xff1a;常见…
阅读更多...
AB5 点击消除

AB5 点击消除

AB5 点击消除 可以用栈来解决。 当栈为空的时候&#xff0c;直接将字符入栈当栈非空的时候 当前字符与栈顶字符相同 出栈 当前字符与栈顶字符不同 入栈 重复上述2步即可。 栈在输出的时候不能从栈底开始输出&#xff0c;需要先把栈顶元素弹出并保存下来&#xff0c;在进行输…
阅读更多...
力扣HOT100 - 104. 二叉树的最大深度

力扣HOT100 - 104. 二叉树的最大深度

解题思路&#xff1a; class Solution {public int maxDepth(TreeNode root) {if (root null) return 0;return Math.max(maxDepth(root.left), maxDepth(root.right)) 1;} }
阅读更多...
最新文章

Copyright @ 2022~2023