Daily Plan

更新: 5/3/2025 字数: 0 字 时长: 0 分钟

#todo

• [ ]
• [ ]

Daily Study

更新: 5/3/2025 字数: 0 字 时长: 0 分钟

go的多行输入

#go 使用bufio库，获取一行输入，这里的 Text() 返回的是一个string字符串，然后再使用strings.Split(line, " ") 按照空格分割成一个数组 。

import (
    "fmt"
    "os"
    // "strings"
    "bufio"
    // "strconv"

)

    scanner := bufio.NewScanner(os.Stdin)

    scanner.Scan()

    line := scanner.Text()

    nums := strings.Split(line, " ")

    fmt.Println(nums)

大模型告告警降噪研判系统

告警数据集的构建

首先引入BELLE 1.5M 然后根据安全领域的书籍知识库论文和安全社区的文章，漏洞数据库的内容，构建了一个安全领域数据集，SFT数据集，其中采用知识蒸馏构建特定任务（如告警解读）的数据集

大模型选项与微调

大模型：baichuan2-7b，对中文支持出色，开源，显存资源占用较小，FP16半精度运算时，LoRA微调过程大约需要23GB，推理过程需要16GB，我们用的两张3090进行微调和部署

知识点

LoRA（Low-Rank Adaptation）是一种针对大型语言模型的微调技术，旨在降低微调过程中的计算和内存需求。其核心思想是通过引入低秩矩阵来近似原始模型的全秩矩阵，从而减少参数数量和计算复杂度。

Daily Problem

更新: 5/3/2025 字数: 0 字 时长: 0 分钟