大模型实战笔记04——XTuner 大模型单卡低成本微调实战

article2024/5/9 14:13:48/文章来源:https://blog.csdn.net/qq_29787929/article/details/135532991

大模型实战笔记04——XTuner 大模型单卡低成本微调实战

1、Finetune简介

在这里插入图片描述

2、XTuner

在这里插入图片描述

3、8GB显存玩转LLM

在这里插入图片描述

4、动手实战环节

注：

笔记内容均为截图
课程视频地址：https://www.bilibili.com/video/BV1yK4y1B75J/?spm_id_from=333.788&vd_source=2882acf8c823ce0ee6d8cdf7f3819da3

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mfbz.cn/a/317283.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

Flink（十二）【容错机制】

前言最近已经放假了，但是一直在忙一个很重要的自己的一个项目，用 JavaFX 和一个大数据组件联合开发一个功能，也算不枉我学了一次 JavaFX，收获很大，JavaFX 它作为一个 GUI 开发语言，本质还是 Java&#xff…

嵌套的CMake

hehedalinux:~/Linux/multi-v1$ tree . ├── calc │ ├── add.cpp │ ├── CMakeLists.txt │ ├── div.cpp │ ├── mult.cpp │ └── sub.cpp ├── CMakeLists.txt ├── include │ ├── calc.h │ └── sort.h ├── sort │ ├── …

Spring之AOP源码（一）

文章目录一、动态代理1. 概念2. Cglib动态代理的使用3. JDK动态代理的使用二、SpringAOP1. 简介2. Spring AOP使用一、动态代理 1. 概念动态代理（Dynamic Proxy）是一种在运行时动态生成代理对象的技术。它是一种设计模式，用于在不修改原…

Web实战丨基于django+html+css+js的电子商务网站

文章目录写在前面实验目标需求分析实验内容安装依赖库1.登陆界面2.注册界面3.电子商城界面4.其他界面运行结果写在后面写在前面本期内容：基于DjangoHTMLCSSJS的电子商务网站实验环境： vscode或pycharmpython(3.11.4)django 代码下载地址&#x…

Web自动化测试，一定得掌握的 8 个核心知识点

使用 cypress 进行端对端测试，和其他的一些框架有一个显著不同的地方，它使用 javascript 作为编程语言。传统主流的 selenium 框架是支持多语言的，大多数 QA 会的python 和 java 语言都可以编写 selenium 代码，遇到需要编写 js 代…

距离美赛还有20天，不要忘了阅读往年获奖论文（附04-23年美赛获奖论文）

之前发了很多数模相关的知识，受到了一些人的关注，也有很多人私下问我，距离美赛还有20几天了，还来不来得及。对此我想说， 来不来得及重要吗？ 你名都报了，钱也交了，还是笔不小的钱…

猫狗大战（猫狗识别）

1.问题简介 1.1问题描述在这个问题中，你将面临一个经典的机器学习分类挑战——猫狗大战。你的任务是建立一个分类模型，能够准确地区分图像中是猫还是狗。 1.2预期解决方案你的目标是通过训练一个机器学习模型，使其在给定一张图像时能够准…

【模块系列】STM32BMP280

前言最进想练习下I2C的应用，手上好有BMP280也没用过，就看着机翻手册和原版手册，开始嘎嘎写库函数了。库的命名应该还1是比较规范了吧，就是手册对于最终值的计算方式很迷糊，所以现在也不能保证有可靠性啊，大…

关于运维·关于数据库面试题

目录一、数据库类型二、数据库引擎三、mysql数据库类型四、mysql的约束添加五、主从复制原理六、主从方式有几种七、mysql主从数据不一致的原因八、mysql的优化九、什么是事务的特征十、数据库读写分离的好处十一、怎样优化sql语句十二、mysql的同步方…

基于MAP算法的Turbo译码 -- 公式推导

到此为止，讲完了turbo译码器的子译码器基于MAP算法的译码过程。但在实际使用中，很少直接使用MAP算法进行译码。而是使用改进的LOG-MAP和MAX-LOG-MAP算法进行译码，因此译码的整体流程，包括外信息的计算以及先验信息的获取等。都在后…

openai自定义API操作 API （openai.custom）

OpenAI 提供了一个自定义 API，允许开发者通过编程方式与 OpenAI 的 AI 模型进行交互。使用这个 API，你可以执行各种任务，例如文本生成、推理和翻译等。以下是使用 OpenAI 自定义 API 的基本步骤： 创建 API 密钥：首先…

谷粒商城-商品服务-品牌管理-阿里云云存储+JSR303数字校验+统一异常处理

阿里云云存储OSS 分布式系统上传文件分布式系统上传文件单体应用上传：上传文件到服务器，想获取文件时再向服务器发请求获取文件。分布式系统上传： 因为有多台服务器，为防止负载均衡导致获取文件时没找到对应的服务器&#xf…

数字信号处理教程学习笔记1-第2章时域中的离散信号和系统

信号处理的任务示意方框图模拟信号和数字信号分别是啥样的，有啥区别

MySQL数据库设计原则

0.简单的处理逻辑一.MySQL完整性约束主键约束 primary key 自增键约束 auto_increment 唯一键约束 unique 非空约束 not null 默认值约束 default 外键约束 foreign key 下面是一个sql语句创建一个表,可以看出来了使用了哪几个约束吗? create table user( id int…

vue前端开发自学,借助KeepAlive标签保持组件的存活

vue前端开发自学,借助KeepAlive标签保持组件的存活！如果不想让组件在切换的时候，被默认操作（卸载掉了）。他们需要使用这个这个表情哦。下面给大家看看代码情况。 <template><h3>ComA</h3><p>{{ messag…

Arduino开发实例-AS608光学指纹传感器驱动

AS608光学指纹传感器驱动文章目录 AS608光学指纹传感器驱动1、AS608光学指纹传感器介绍2、硬件准备及接线3、代码实现3.1 指纹录入3.2 指纹匹配验证1、AS608光学指纹传感器介绍 AS608 光学指纹传感器可用于扫描指纹，它也可以通过串行通信将处理后的数据发送到微控制器。所有…

鸿蒙(HarmonyOS)应用开发指南

1. 概述 1.1 简介鸿蒙（即 HarmonyOS ，开发代号 Ark，正式名称为华为终端鸿蒙智能设备操作系统软件）是华为公司自 2012 年以来开发的一款可支持鸿蒙原生应用和兼容 AOSP 应用的分布式操作系统。该系统利用“分布式”技术将手机、电…

好用的便签有哪些？windows便签工具在哪打开？

每当我8点准时上班，在等待电脑开机的过程，我都会习惯性地思考整理今天要晚上的任务，列出所要完成的待办事项。随着每一项任务的清晰呈现，我的心情也逐渐明朗起来。当然了，这个时候，我迫切需要一款好用的便签…

【LeetCode】142. 环形链表 II（中等）——代码随想录算法训练营Day04

题目链接：142. 环形链表 II 题目描述给定一个链表的头节点 head ，返回链表开始入环的第一个节点。如果链表无环，则返回 null。如果链表中有某个节点，可以通过连续跟踪 next 指针再次到达，则链表中存在环。为了…

springcloud stream消息驱动

简介 Spring Cloud Stream是一个用于构建基于事件驱动的微服务应用程序的框架，其核心目标是简化开发过程，降低消息通信的复杂性，从而使开发人员能够专注于编写业务逻辑。Spring Cloud Stream通过提供Binder抽象，将应用程序与消息…