相关文章
【LLM训练系列02】如何找到一个大模型Lora的target_modules
方法1:观察attention中的线性层
import numpy as np
import pandas as pd
from peft import PeftModel
import torch
import torch.nn.functional as F
from torch import Tensor
from transformers import AutoTokenizer, AutoModel, BitsAndBytesConfig
from typ…
建站知识
2025/3/6 18:30:33
LLM( Large Language Models)典型应用介绍 1 -ChatGPT Large language models
ChatGPT 是基于大型语言模型(LLM)的人工智能应用。
GPT 全称是Generative Pre-trained Transformer。-- 生成式预训练变换模型: Generative(生成式):可以根据输入生成新的文本内容,例如回答问题…
建站知识
2025/3/6 13:29:18
力扣第 62 题(Unique Paths)两种递归实现
直接递归的效率会非常低,因为会重复计算许多子问题。这种方法可以结合记忆化搜索(递归 缓存)优化效率,使其在合理的时间内求解问题。 递归解法
1. 基本递归(不推荐)
直接递归的思路是,从起点…
建站知识
2025/3/6 4:14:59
electron快速上手
1、electron
一款应用广泛的跨平台的桌面应用开发框架electron本质是结合了chromium与node.js 使用html、css、js等web技术构建桌面应用程序(vue tsx less ts)
2、 electron流程模型 main 可以__dirname fs render进程可以 alert() window()
3、创建 …
建站知识
2025/2/28 12:38:08
vue项目添加骨架屏vue-skeleton-webpack-plugin,通过app.vue添加骨架屏,解决衔接空白问题
安装插件
yarn add vue-skeleton-webpack-plugin在 webpack 中引入插件:以4版本为例配置如下 vue.config.js
plugins: [new SkeletonWebpackPlugin({webpackConfig: {entry: {app: path.join(__dirname, ./src/components/entry-skeleton.js),},},minimize: true,…
建站知识
2025/3/5 23:04:54
美创科技入选2024数字政府解决方案提供商TOP100!
11月19日,国内专业咨询机构DBC德本咨询发布“2024数字政府解决方案提供商TOP100”榜单。美创科技凭借在政府数据安全领域多年的项目经验、技术优势与创新能力,入选收录。 作为专业数据安全产品与服务提供商,美创科技一直致力于为政府、金融、…
建站知识
2025/3/2 6:12:21