-
大模型微调踩坑记录 - 基于Alpaca-LLaMa+Lora
前言 为了使用开放权重的LLM(大语言模型 ，基于自己的训练集，微调模型，会涉及到如下一些技术要点： 配置运行环境 下载、加载基础模型 收集语料、微调训练 检验训练效果 在实施过程中，遇到不少困难，因此写下这篇文档，做为记录。 环境配置...
-
AIGC 360全景图 效果图材质替换
首先感叹一下AIGC的效果，如下图所示 准备材料 AUTOMATIC1111 WebUI Prompts Positive and Negative提示词 LoRa 插件 LoRa: LatentLabs360 on CivitAI Contr...
-
ubuntu使用whisper和funASR-语者分离-二值化
文章目录 一、选择系统 1.1 更新环境 二、安装使用whisper 2.1 创建环境 2.1 安装 2.1.1安装基础包 2.1.2安装依赖 3测试1 3测试2 语着分离 创建代码 `报错ModuleNotFoundError: N...
-
在Kaggle上使用Stable Diffusion进行AI绘图
前言 因为使用Stable Diffusion进行AI绘图需要GPU，这让其应用得到了限制 本文介绍如何在Kaggle中部署Stable Diffusion，并使用免费的P100 GPU进行推理（每周可免费使用30小时），部署好后可以在任意移动端使用...
-
Github Copilot在JetBrains软件中登录Github失败的解决方案
背景 我在成功通过了Github Copilot的学生认证之后，在VS Code和PyCharm中安装了Github Copilot插件，但在PyCharm中插件出现了问题，在登录Github时会一直Retrieving Github Device C...
-
Ubuntu 20.04 安装 Stable Diffusionn
步骤 1：安装 wget、git、Python3 和 Python3虚拟环境（如果已安装可忽略这步骤） sudo apt install wget git python3 python3-venv 步骤 2：克隆 SD 项目到本地 git clon...
-
申请GitHub学生认证，免费使用GitHub Copilot
申请GitHub学生认证 Request a discount - GitHub Education Github学生认证 + Copilot，这一篇就够了！_ziao-liu的博客-CSDN博客https://blog.csdn.net/weixin...
-
Stable-Diffusion-Webui: Talk about it briefly
GitHub - AUTOMATIC1111/stable-diffusion-webui: Stable Diffusion web UI use Git to download： git clone https://github.com/A...
-
解决Github copilot访问速度慢、资源加载问题
github 是全世界最流行的开源项目托管平台，其代表的开源文化从根本上改变了软件开发的方式。 基本上所有的需求都能从 github 上或多或少找到现成的实现方案，再也不用重头开始造轮子而是自定义轮子！ 然而，有时候国内访问 GitHub 速度太慢,如...
-
AI绘画——本地配置webui启动器教程，支持一键启动/修复/更新/模型下载管理+Lora模型推荐
秋葉aaaki的个人空间_哔哩哔哩_bilibilihttps://space.bilibili.com/12566101/?spm_id_from=333.999.0.0 感谢秋葉aaaki大佬の免费开源 目录 1.获取资源整合包 2. 下载...
-
Stable Diffusion本地搭建windows and linux（附搭建环境）
linux搭建过程以centos为例 1.使用git工具下载项目文件到本地文件夹，命令如下： git clone https://github.com/IDEA-CCNL/stable-diffusion-webui.git 然后进入该文件夹：...
-
【AIGC】如何在使用stable-diffusion-webui生成图片时看到完整请求参数
文章目录 背景 开搞 使用 遇到的问题 背景 通过代码调用Stable Diffusion的txt2img、img2img接口时，很多时候都不知道应该怎么传参，比如如何指定模型、如何开启并使用Controlnet、如何开启面部修复...
-
LLM-20230225：LLaMA（大羊驼）【参数量： 70 亿、130 亿、330 亿、650 亿】【旨在推动 LLM 领域的小型化、平民化研究】【Meta】
Meta AI 同时在其官方发布了论文《LLaMA: Open and Efficient Foundation Language Models》 源码：https://github.com/facebookresearch/llama 论文...
-
Github学生包申请秒过经验并使用Copilot
写在前面 前提是在校学生，且有学校邮箱，当然你也得有Github账户 前往学信网下载 教育部学籍在线验证报告 将报告转换成英文版本，我用的是手机夸克自带的拍照翻译功能 具体流程 设置Github个人信息 来到 https://github...
-
斯坦福用几百块钱训练的alpaca，体验一下基于llama的7b和13b模型，据说比gpt3.0还牛，结果怎样？？你能信？
好久没写代码了，上头了，强撸了！ 1、自己买个GPU服务器（如果不训练，可以随便买个高内存的即可），有些网站很便宜，小时起租！ 2、alpaca和模型下载地址：GitHub - antimatter15/alpaca.cpp: Locally run...
-
NoveAI本地环境搭建、AI作画
鉴于按照别人的教程安装过程中遇到各种问题,极其痛苦,所以还是自己也整理总结一份. 1 diffusion vs GAN 所谓扩散算法diffusion是指先将一幅画面逐步加入噪点，一直到整个画面都变成白噪声。记录这个过程，然后逆转过来给AI学习。...
-
一切为了应用！九章云极DataCanvas大模型系列成果重磅发布！
11月21日，「筑基赋能 智向未来」九章云极DataCanvas大模型系列成果发布会（以下简称“发布会”）在北京重磅召开，本次成果发布距离今年6月30日DataCanvas Alaya九章元识大模型公布仅4个多月，是九章云极DataCanvas公司大模...
-
Windows环境下运行StableDiffusion常见问题
目录 常见问题 一、问题1：22.2.2➡23.1.1 Torch is not able to use GPU 解决方案 二、问题2：exit code:128 CLIP did not run sucessfully 解决方案 三、问题...
-
stable-diffusion项目环境配置
stable-diffusion项目环境配置 python解释器 python要求python要求3.10以上的版本 本机物理环境不满足要求,建议使用anaconda创建虚拟环境 conda create – name diffusion pyth...
-
QT Creator配置Github Copilot
目录 官网原文 实际配置操作 免费获取Github Copilot 配置QT Github Copilot 在Neovim中配置Github Copilot 将Neovim、copilot同QT关联起来 如何使用 官网原文 U...
-
Stable Diffusion - 图像控制插件 ControlNet (OpenPose) 配置与使用
欢迎关注我的CSDN：https://spike.blog.csdn.net/ 本文地址：https://spike.blog.csdn.net/article/details/131591887 论文：Adding Conditional Co...
-
stable diffusion常用参数
参数 说明 --listen 默认启动绑定的 ip 是 127.0.0.1，只能是你自己电脑可以访问 webui，如果你想让同个局域网的人都可以访问的话，可以配置该参数（会自动绑定 0.0.0.0 ip）。 --port xxx 默认端口是 78...
-
vs code 如何使用copilot（对接了chatgpt）
VS Code 是一个非常流行的开发工具，而 Copilot 则是一个基于 GPT 模型的代码生成工具，可以通过 VS Code 安装相关的插件来使用。 以下是在 VS Code 中使用 Copilot 的步骤： 下载安装 VS Code 插件 首先，...
-
安装带有copilot的Windows11操作系统——超详细
目录 准备工作 Windows11系统镜像文件下载 Rufus工具下载 ViVeTool工具下载 给磁盘分区 准备工作结束 使用Rufus进行镜像烧入 进行一些配置（如果没有显示copilot图标这个很重要） 结束 微软在最近...
-
JetBrains 发布 2023 调研报告：Rust 越来越受欢迎，77% 开发者使用 ChatGPT
11 月 21 日消息，JetBrains 日前公布了《2023 开发人员生态系统现状》调研报告，汇集了来自全球 26,348 位开发者的调研结果。 《开发者生态系统现状报告》涵盖广泛的主题，包括编程语言、工具和技术，以及受众特征和有趣的事实。今年，J...
-
NLP实践——使用Llama-2进行中文对话
NLP实践——使用Llama-2进行中文对话 1. 前言 2. 利用prompt 3. 利用Logit Processor 3.1 修改1 3.2 修改2 3.3 修改3 3.4 修改4 1. 前言 在之前的博客 NLP实践—...
-
大模型入门（四）—— 基于peft 微调 LLaMa模型
llama-7b模型大小大约27G，本文在单张/两张 16G V100上基于hugging face的peft库实现了llama-7b的微调。 1、模型和数据准备 使用的大模型：https://huggingface.co/decapoda-resea...
-
MatrixOne 实战系列回顾 | 建模与多租户
本次分享主要介绍MatrixOne建模与多租户相关内容。 1 建模 #1 与MySQL的区别 使用create table语句建表和MySQL建表语句基本相同，也有几点要注意。 MatrixOne暂不支持空间数据类型，其他数据类型在保持与 MyS...
-
Ubuntu llama 2搭建及部署，同时附问题与解决方案
本机环境： AMD Ryzen7480 OH with Radeon Graphics(16 CPUs ,~2.9GHz Card name: NVIDIA GeForce RTX 2060 虚拟机环境： 内存：4G 存储：100G 一、搭建...
-
Stable Diffusion生成图片参数查看与抹除
前几天分享了几张Stable Diffusion生成的艺术二维码，有同学反映不知道怎么查看图片的参数信息，还有的同学问怎么保护自己的图片生成参数不会泄露，这篇文章就来专门分享如何查看和抹除图片的参数。 查看图片的生成参数 1、打开Stable Diff...
-
使用github copilot
现在的大模型的应用太广了，作为程序员我们当然野可以借助大模型来帮我们敲代码。 下面是自己注册使用github copilot的过程。 一、注册github copilot 1. 需要拥有github账号 ，登录github之后，点右侧自己的头像位置，...
-
gpt crawler：从URL爬取网站生成结构化知识，创建定制GPT
gpt crawler是一款强大的工具，能够将网站内容全面地爬取下来，并将其转换成结构化知识，为GPTs的学习提供了有力支持。 这个工具的应用场景广泛，比如，如果你想打造一个数字人分身，可以先将自己在社交媒体或个人博客上的内容抓取下来，然后提交给ChatG...
-
全网最全的AI绘画提示词网站，看这一篇就够了！
要说2023年什么最火，绝对是以ChatGPT为代表的AI工具了，特别是AI绘画，而用好AI的关键，就是要学会使用关键词，也叫提示词，提示词是AI绘画的核心，本次就给大家分享几个AI绘画关键词网站，各种高质量的图片你也能轻而易举的做出来。 先上一张脑...
-
北大视频大模型新SOTA，搞笑抖音视频AI秒懂笑点｜开源
AI能理解搞笑视频笑点在哪里了。 北大等团队开源视觉语言大模型Video-LLaVA，将图像和视频表示对齐到统一的视觉特征空间，在13个图片和视频基准上达到先进的性能。 值得注意的是，Video-LLaVA在训练过程中没有使用成对的视频和图片数据，但...
-
windows10下whisper的安装使用和CUDA的配置
buzz基于whisper的客户端，可以优先尝试，支持Mac, Windows和Linux https://github.com/chidiwilliams/buzzhttps://github.com/chidiwilliams/buzz whis...
-
用检索增强生成让大模型更强大，这里有个手把手的Python实现
本文首先将关注 RAG 的概念和理论。然后将展示可以如何使用用于编排（orchestration）的 LangChain、OpenAI 语言模型和 Weaviate 向量数据库来实现一个简单的 RAG。 检索增强生成是什么？ 检索增强生成（RAG）这一...
-
python语音识别whisper
一、背景 最近想提取一些视频的字幕，语音文案，研究了一波 二、whisper语音识别 Whisper 是一种通用的语音识别模型。它在不同音频的大型数据集上进行训练，也是一个多任务模型，可以执行多语言语音识别以及语音翻译和语言识别。 stable-...
-
基于llama模型进行增量预训练
目录 1、llama模型转换(pytorch格式转换为HuggingFace格式 1.1、拉取Chinese-LLaMA-Alpaca项目 1.2、准备文件夹 1.3、下载llama官方原始模型 1.4、移动文件到指定位置 1.5、执行转换脚...
-
stable diffusion教程，详细版，包括解决各种问题
前提： 需要环境 git git下载地址Git - Downloading Package 直接装即可 python3.10.6 下载地址 Python Release Python 3.10.6 | Python.org 记得p...
-
Grounding dino + segment anything + stable diffusion 实现图片编辑
目录 总体介绍 总体流程 模块介绍 目标检测： grounding dino 目标分割：Segment Anything Model (SAM 整体思路 模型结构： 数据引擎 图片绘制 集成 样例 其他问题 附录 总体介绍...
-
深入理解LLaMA, Alpaca, ColossalChat 系列模型
知乎：紫气东来https://zhuanlan.zhihu.com/p/618695885 一、从 LLaMA 到 Alpaca：大模型的小训练 1.1 LLaMA 概要与实践 LLaMA(Large Language Mo...
-
Pycharm配置Copilot一直waiting for github authentication
版本 pycharm版本：2022.1.3社区版 copilot插件版本：1.1.27.1708 问题 安装插件后，login时一直waiting for github authentication。看了一些issue有的回退版本，有的通过fq然...
-
Upscayl：开源AI图像放大增强工具 | AIGC实践
连续写了两篇比较理论的文章——一篇行业思考，一篇技术讨论——可能劝退了很多不明真相的人民群众，一看后台数据，好么…… 马上周末了，今天分享一篇轻松小文，介绍一款开源免费、成熟度高、操作简单、效果显著的开源AI图像放大增强工具——Upscayl。...
-
Stable Diffusion - After Detailer 插件 脸部和手部 重绘算法与应用
欢迎关注我的CSDN：https://spike.blog.csdn.net/ 本文地址：https://spike.blog.csdn.net/article/details/131699857 After Detailer 是一个用于 Stabl...
-
大语言模型-中文chatGLM-LLAMA微调
微调大语言模型-ChatGLM-Tuning大语言模型-微调chatglm6b大语言模型-中文chatGLM-LLAMA微调大语言模型-alpaca-lora 本地知识库大语言模型2-document ai解读大语言模型-DocumentSearch解...
-
处理stable-diffusion-webui本地部署过程中的commit hash ＜none＞问题的一个方法
安装webui时一直卡在commit hash none RuntimeError: Couldn't determine Stable Diffusion's hash: 69ae4b35e0a0f6ee1af8bb9a5d0016ccb27e36dc...
-
大语言模型之七- Llama-2单GPU微调SFT
（T4 16G）模型预训练colab脚本在github主页面。详见Finetuning_LLama_2_0_on_Colab_with_1_GPU.ipynb 在上一篇博客提到两种改进预训练模型性能的方法Retrieval-Augmented Gener...
-
Stable Diffusion XL训练LoRA
主要包括SDXL模型结构，从0到1训练SDXL以及LoRA教程，从0到1搭建SDXL推理流程。 【一】SDXL训练初识 Stable Diffusion系列模型的训练主要分成一下几个步骤，Stable Diffusion XL也不例外： 训练集...
-
阿里云白嫖GPU搭建Stable Diffusion Webui (保姆级教程)
1. 准备条件 1.1 环境搭建（白嫖阿里云GPU资源包） 显卡：VRAM 4GB 以上 (建议使用NVIDIA显卡 内存：建议8G以上 Python版本：>3.10 1.1.1 阿里云先领取资源包 https://free.ali...
-
AI「cosplay」关键在人设！复旦、人大等发布大五人格+MBTI测试：特质还原率达82.8%，拒绝OOC
想和喜欢的动漫小说角色聊天？想要一个虚拟伴侣？想要自己的数字智能体？ 随着大语言模型（Large Language Models, LLM）的发展，这些过去的幻想似乎越来越近了。 Character AI、Chat 凉宫春日、病娇AI女友模拟器……基于大...