InternVL 微调实践

news2024/11/18 1:44:56

任务

follow 教学文档和视频使用QLoRA进行微调模型，复现微调效果，并能成功讲出梗图.

复现过程

参考教程部署：https://github.com/InternLM/Tutorial/blob/camp3/docs/L2/InternVL/joke_readme.md
训练
在这里插入图片描述

合并权重&&模型转换

python3 xtuner/configs/internvl/v1_5/convert_to_official.py xtuner/configs/internvl/v2/internvl_v2_internlm2_2b_qlora_finetune.py /root/InternLM/work_dir/internvl_ft_run_8_filter/iter_1000.pth /root/InternLM/InternVL2-2B/

模型在这
在这里插入图片描述

最后效果

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/2173046.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

多旋翼无人机“仿鸟类”精确拦截飞行目标，助力低空安全

摘要： 使用低成本携带捷联式相机的无人机拦截低空入侵目标是一种具有竞争力的选择。然而，非合作目标的恶意机动和摄像头的耦合使得这项任务充满挑战。为了解决这个问题，提出了一种基于比例导引且具有视场保持能力的基于图像的视觉伺服&#x…

【d52】【Java】【力扣】19.删除链表的倒数第N个节点

思路 1.遍历数组,统计个数，记为total 2.计算出需要被删除的节点是正数第几个，记做order 3.遍历到order-1,,然后执行删除下一个节点的操作这里遍历到order-1，是因为想要删除一个节点，需要操作的是它前一个节点的next 代码 /…

JAVA使用Scanner类的nextLint()方法无法正确读取中文。

在练习的时候，我发现我使用Scanner类的nextLint（）方法无法正确读取到中文了。检查了我的idea编辑器，用的编码格式也是”utf-8“。所以编码格式没有问题。问题如下棉两张图所示，我输入宝马后，控制台不打印…

助力申报“山东省首台套技术装备”，安畅检测提供第三方检测服务

9月24日，山东省工业和信息化厅发布了《关于组织2024年度山东省首台（套）技术装备认定工作的通知》。《通知》中对申报范围、申请条件及申报程序做出了明确规定，并在附件中对申请材料做出了要求。 ★检测报告要求在《通知》附件…

面试前需要准备什么？

面试前的准备是一个细致且全面的过程，它不仅关乎到你能否在面试中展现出最佳状态，还直接影响到你能否成功获得心仪的职位。以下是一个较为详尽的、接近2000字的面试前准备指南： 一.自我评估与定位 1.深入了解自己在准备面试之前&#xff…

再谈智慧园区

随着AI的兴起，其影响力将渗透到各行各业。产业园区也不例外。特别是江园科技智慧园区在园区运营上，从早期的信息化，到数字化、智能化，智慧园区是一个不可回避的话题。 01 江园科技智慧园区无论名称或概念怎么办，产…

Halcon实用系列1-识别二维条码

在做项目时，之前使用的是某康的智能读码器，综合考虑成本，可通过相机拍照来读取图片的二维码，我这边用Halcon来实现。 Halcon代码如下： *创建模型 create_data_code_2d_model(Data Matrix ECC 200, [], [], DataCodeH…

微信小程序map组件自定义气泡真机不显示

最近遇到一个需求需要使用uniapp的map自定义气泡 ，做完之后发现在模拟器上好好的，ios真机不显示，安卓页数时好时不好的一番查询发现是小程序的老问题了，网上的方法都试了也没能解决后来看到有人说用nvue可以正常显示&#xff0c…

数据结构 ——— 顺序表oj题：编写函数，合并两个有序数组

目录题目要求代码实现题目要求 nums1 和 nums2 是两个升序的整型数组，另外有两个整数 m 和 n 分别代表 nums1 和 nums2 中的元素个数要求合并 nusm2 到nums1 中，使合并后的 nums1 同样按升序顺序排列最终，合并后的数组不应由函数返…

基于Hive和Hadoop的招聘分析系统

本项目是一个基于大数据技术的招聘分析系统，旨在为用户提供全面的招聘信息和深入的职位市场分析。系统采用 Hadoop 平台进行大规模数据存储和处理，利用 MapReduce 进行数据分析和处理，通过 Sqoop 实现数据的导入导出，以 Spark 为核…

Text-to-SQL方法研究

1、面临的挑战自然语言问题往往包含复杂的语言结构,如嵌套语句、倒装句和省略等,很难准确映射到SQL查询上。此外,自然语言本身就存在歧义,一个问题可能有多种解读。消除歧义需要深入的语言理解能力以及融入上下文和领域知识。要生成正确的SQL查询,文本到SQL系统需要全面理解…

webpack 4 的 30 个步骤构建 react 开发环境

将 react 和 webpack4 进行结合，集 webpack 的优势于一身，从 0 开始构建一个强大的 react 开发环境。其实很多人都有一看就会，一做就废的特点(当然也包括我在内)，这个时候，你需要制定一个略微详细的计划&#xff0…

Redis的基础认识与在ubuntu上的安装教程

来自Redis的自我介绍我是Redis，一个中间件，职责是把数据存储在内存上，因此可以作为数据库、缓存、消息队列等场景使用。由于可以把数据存储在内存上，因此江湖人称快枪手 1.redis的功能特性 （1）数据在内存…

9.3 Linux_I/O_文件I/O相关函数

打开与关闭 1、打开文件 int open(const char *pathname, int flags); int open(const char *pathname, int flags, mode_t mode);返回值：成功返回文件描述符，失败返回EOF pathname：文件路径 flags：标志，其中O_RDO…

深入浅出CSS盒子模型

“批判他人总是想的太简单剖析自己总是想的太困难” 文章目录前言文章有误敬请斧正不胜感恩！什么是盒子模型？盒子模型的组成部分详解1. 内容区（Content）2. 内边距（Padding）3. 边框（Border&am…

『功能项目』下载Mongodb【81】

下载网址：Download MongoDB Community Server | MongoDB 点击安装即可选择Custom 此时安装已经完成桌面会创建图标检查是否配置好MongoDB 输入cmd命令行 Windows键 R 打开命令行输入cmd 复制安装路径复制data路径如果输出一大串代码即配置mongdb成功

Mysql高级篇（中）——锁机制

锁机制一、概述二、分类1、读锁2、写锁★、FOR SHARE / FOR UPDATE（1）NOWAIT（2）SKIP LOCKED（3）NOWAIT 和 SKIP LOCKED 的比较 ★、脏写3、表级锁之 S锁 / X锁（1）总结（2…

免费视频无损压缩工具+预览视频生成工具

视频无损压缩工具功能与作用 ：视频无损压缩工具是一种能够减少视频文件大小，但同时保持视频质量的工具。它通过先进的编码技术和算法，有效降低视频文件的存储空间，同时保证视频的清晰度和观感。这对于需要分享或存储大量视频内容…

ZLMediaKit快速上手【保姆级简单快速版】

一、前言 1、ZLMediaKit使用场景最近在写一个摄像头检测的项目，其中需要做拉流测试，但是摄像头数量不够用，如果直接重复拉流可能会出现问题，使用ZLMediaKit（一个基于C11的高性能运营级流媒体服务框架）可…

对抗攻击方法详解：梯度攻击、转移攻击与模型集成攻击

对抗攻击方法详解：梯度攻击、转移攻击与模型集成攻击近年来，随着深度学习模型在各个领域取得惊人突破，对抗攻击（Adversarial Attack） 逐渐成为研究热点。对抗攻击旨在通过在输入数据上施加精心设计的微小扰动&#x…

InternVL 微调实践

任务

复现过程

相关文章