-
llama factory学习笔记
模型 模型名 模型大小 默认模块 Template Baichuan2 7B/13B W_pack baichuan2 BLOOM 560M/1.1B/1.7B/3B/7.1B/176B query_key_value - BLOOM...
-
Stable-Diffusion的WebUI部署实战
1、环境准备及安装 1.1、linux环境 # 首先，已经预先安装好了anaconda，在这里新建一个环境 conda create -n sdwebui python=3.10 # 安装完毕后，激活该环境 conda activate sdwebui...
-
Stable Diffusion WebUI 笔记本低显存无魔法本地安装使用（五）--- 插件安装
一、 查找插件 1. 启动webui，在打开的页面上，点击 extensions，点击 Available 2. 点击“Load from”黄色按钮，会列出所有的可用插件，查找你的插件，如果是汉化的插件，请去掉localization的选择 3....
-
小妙招：Copilot 当跳板免费调用 GPT4
GPT4 每月 20 刀，Github Copilot 每月 10 刀 首先叠个甲：免费不是 0 成本。 由于我在日常开发过程中，Copilot 对我来说是必需品，我会用它检查代码、写工具函数、写注释、干苦力。所以这钱是我的必要支出。而这篇文章是介...
-
在 Kubernetes 中优化 AI 和机器学习工作负载
Kubernetes 非常适合各种类型的容器化工作负载，从服务到作业再到有状态应用程序。但是 AI 和需要 GPU 的机器学习工作负载呢?是的，Kubernetes 也支持这些，但有很多细微差别。 译自Optimizing AI and Machine...
-
20240203在WIN10下配置stable-diffusion-webui.git
20240203在WIN10下配置stable-diffusion-webui.git 2024/2/3 11:55 【结论：在WIN10下，生成512x512分辨率的图像，大概需要9秒钟！】 【结论：在Ubuntu20.04.6下，生成512x512...
-
LLaMA-Factory 8卡4090 deepspeed zero3 微调Qwen14B-chat
环境安装 推荐使用docker，Ubuntu20.04https://www.modelscope.cn/docs/%E7%8E%AF%E5%A2%83%E5%AE%89%E8%A3%85 docker pull registry.cn-beijin...
-
MACBOOK PRO M2 MAX 安装Stable Diffusion及文生图实例
以前偶尔会使用Midjourney生成一些图片，现在使用的头像就是当时花钱在Midjourney上生成的。前段时间从某鱼上拍了一台性价比还不错的macbook，想着不如自己部署Stable Diffusion（以下简称SD）尝试一下。 网上有很多教程，但...
-
Python爬虫代码：探索网络数据的利器
在数字化时代，互联网如同一个巨大的信息库，蕴藏着无数有价值的数据。为了有效地从这些海量的信息中提取所需数据，爬虫技术应运而生。Python，作为一种简洁、易读且功能强大的编程语言，已成为实现网络爬虫的首选工具。本文将深入探讨Python爬虫的基本原理、应用...
-
Python代理IP爬虫的开发与实践
随着网络技术的不断发展和大数据时代的来临，网络爬虫作为一种重要的数据获取工具，在各个领域得到了广泛应用。然而，在爬虫程序访问网络时，往往会遇到IP被封禁的问题，这时就需要使用代理IP来绕过限制。本文将详细介绍如何使用Python开发代理IP爬虫，包括代理I...
-
【AI实战】从零开始搭建中文 LLaMA-33B 语言模型 Chinese-LLaMA-Alpaca-33B
【AI实战】从零开始搭建中文 LLaMA-33B 语言模型 Chinese-LLaMA-Alpaca-33B 简介 环境配置 环境搭建 依赖安装 代码及模型权重拉取 拉取 Chinese-LLaMA-Alpaca 拉取 llama-30b...
-
Python编写爬虫：网络数据抓取的入门与实践
在当今信息化社会，互联网已成为了巨大的信息共享与交流平台。然而，信息的获取并非总是直截了当，特别是当我们需要从不同网站上搜集数据时，手动复制粘贴不仅效率低下，还容易出错。为了解决这一问题，编程语言如Python提供了强大的网络爬虫库和工具，使我们能够自动化...
-
ubuntu下faster-whisper安装、基于faster-whisper的语音识别示例、同步生成srt字幕文件
文章目录 前言 一、faster-whisper的安装 1.docker及nvidia-docker安装 2.镜像下载 3.启动容器 3.容器中创建用户，安装anaconda 二、基于faster-whisper的语音识别 1.将cuda...
-
驾辰龙跨Llama持Wasm，玩转Yi模型迎新春
今年新年很特别，AI工具添光彩。今天就来感受下最新的AI神器天选组合“WasmEdge+Yi-34B”，只要短短三步，为这个甲辰龙年带来一份九紫离火运的科技感。 环境准备 这次用的算力是OpenBayes提供的英伟达RTX_4090*1、24GB显存、...
-
【AI作图】从零开始部署安装Stable Diffusion 2 WebUI【个人总结】
前言 前两天突然想搭建一个AI作图的，但是一脸懵逼，lgithub地址，结果全英也看不懂，只知道了Stable Diffusion，这两天去了解了下，想要网页版就Stable Diffusion WebUI，在自己笔记本上尝试搭建，找了各种...
-
Stable diffusion 安裝使用
GitHub - AUTOMATIC1111/stable-diffusion-webui: Stable Diffusib UI**github：stable-diffusion-webui下載，**全程最好科學上網 1.無需下載git 可直接 Cod...
-
OpenAI ChatGPT-4开发笔记2024-08：windows本地环境下载Llama 2
Step 1: Ask for permission on Meta’s website To be able to download the model, you first need to agree to some terms and condi...
-
Stable Diffusion 训练
文章目录 前言 一、主要训练方式 二、kohya_ss安装(Linux 1.打开终端并切换到所需的安装目录 2.通过运行以下命令克隆存储库 3.切换到kohya_ss目录 4.通过执行命令来运行安装脚本 5.安装完成后，在kohya_ss目...
-
想训练类Sora模型吗？尤洋团队OpenDiT实现80%加速
作为 2024 开年王炸，Sora 的出现树立了一个全新的追赶目标，每个文生视频的研究者都想在最短的时间内复现 Sora 的效果。 根据 OpenAI 披露的技术报告，Sora 的核心技术点之一是将视觉数据转化为 patch 的统一表征形式，并通过 Tr...
-
Stable Diffusion本地Docker快速部署
docker拉取腾讯云镜像 sudo docker pull gpulab.tencentcloudcr.com/ai/stable-diffusion:1.0.8 启动容器并打印日志 sudo docker run -itd --gpus=a...
-
Stable Diffusion WebUI 踩坑记录
文章目录 install Homebrew install python 3.10 clone stable diffusion web 设置 pip 国内源 install 如果 torch 安装有问题可以这样安装 Install GFPG...
-
无 N卡 Stable Diffusion WebUI 安装过程记录
目录 前提 过程 准备 Git 初始化 权重文件 模型文件 文件配置（2024-02-15 12:42 更新） 运行 [notice] pip 更新 无 tb-nightly 包 无 xformers 模块 多处爆红 ERROR...
-
驾辰龙跨Llama持Wasm，玩转Yi模型迎新春过大年（上）
大年初一，看着春晚迎新年。今年新年很特别，AI工具添光彩。今天就来感受下最新的AI神器天选组合“WasmEdge+Yi-34B”，只要短短三步，为这个甲辰龙年带来一份九紫离火运的科技感。 环境准备 这次用的算力是OpenBayes提供的英伟达RTX_4...
-
本地部署 Stable Diffusion（Mac 系统）
在 Mac 系统本地部署 Stable Diffusion 与在 Windows 系统下本地部署的方法本质上是差不多的。 一、安装 Homebrew Homebrew 是一个流行的 macOS （或 Linux）软件包管理器，用于自动下载、编...
-
Docker部署Stable-Diffusion-webui
前排提示：如果不想折腾，可直接跳到最后获取封装好的容器，一键运行 :D 前言 乘上AI生成的快车，一同看看沿途的风景。 启一个miniconda容器 docker run -itd -v 宿主机内SD项目路径:/tmp --gpus all --...
-
【AIGC】Llama2-7B-Chat模型微调
环境 微调框架：LLaMA-Efficient-Tuning 训练机器：4*RTX3090TI (24G显存 python环境：python3.8, 安装requirements.txt依赖包 一、Lora微调 1、准备数据集 2、训...
-
【AI】RTX2060 6G Ubuntu 22.04.1 LTS (Jammy Jellyfish) 部署Chinese-LLaMA-Alpaca-2 【2】启用GPU支持
接上篇 【AI】RTX2060 6G Ubuntu 22.04.1 LTS (Jammy Jellyfish 部署Chinese-LLaMA-Alpaca-2-CSDN博客 前面的实验，chat.sh确认是运行在CPU模式下，未启用GPU支持...
-
循环神经网络与文本风格转移：实现创意的AI写作
1.背景介绍 文本风格转移是一种自然语言处理任务，它旨在将一种文本风格或形式转换为另一种风格。这种转换可以是语言、语法、语境或其他方面的。文本风格转移的主要应用包括文本生成、文本摘要、机器翻译、文本洗理、文本生成和其他自然语言处理任务。 在过...
-
20240131在WIN10下配置whisper
20240131在WIN10下配置whisper 2024/1/31 18:25 首先你要有一张NVIDIA的显卡，比如我用的PDD拼多多的二手GTX1080显卡。【并且极其可能是矿卡！】800￥ 2、请正确安装好NVIDIA最新的545版本的驱动程序...
-
实战whisper：本地化部署通用语音识别模型
前言 Whisper 是一种通用语音识别模型。它是在大量不同音频数据集上进行训练的，也是一个多任务模型，可以执行多语言语音识别、语音翻译和语言识别。 这里呢，我将给出我的一些代码，来帮助你尽快实现【语音转文字】的服务部署...
-
20240127在ubuntu20.04.6下配置whisper
20240131在ubuntu20.04.6下配置whisper 2024/1/31 15:48 首先你要有一张NVIDIA的显卡，比如我用的PDD拼多多的二手GTX1080显卡。【并且极其可能是矿卡！】800￥ 2、请正确安装好NVIDIA最新的驱动...
-
最简单粗暴的Stable Diffusion Webui本地部署教程！让每个人都能自己实现AI画图！
先放两张自己画的图片镇楼。 什么是Stable Diffusion Webui Stable Diffusion WebUI是 Stable Diffusion 的浏览器界面，Stable Diffusion...
-
【深度学习】SDXL tensorRT 推理，Stable Diffusion 转onnx，转TensorRT
文章目录 1 sdxl 转 diffusers 2 转onnx 3 转TensorRT 1 sdxl 转 diffusers juggernautXL_version6Rundiffusion.safetensors文件...
-
20240131在ubuntu20.04.6下使用whisper不同模式的比对
20240131在ubuntu20.04.6下使用whisper不同模式的比对 2024/1/31 16:07 首先你要有一张NVIDIA的显卡，比如我用的PDD拼多多的二手GTX1080显卡。【并且极其可能是矿卡！】 2、请正确安装好NVIDIA最新...
-
RocketMQ Copilot GA 版本全新发布！
RocketMQ Copilot 1.0.0 经过一段时间的开发迭代，终于和大家见面了！1.0.0 相比较于之前提供了更多新特性，同时也在之前版本的基础上做了不少功能增强，是 RocketMQ Copilot 的第一个 GA 版本。在新版本中，Rocket...
-
AI绘画指南 stable diffusion webui （SD webui）如何设置与使用
根据自己最近的理解与实践，只能说是给后来的AI绘画作画者一点快速上手入门的参考吧。 主要是涉及 SD webui 界面介绍 参数含义及调整，txt2img 怎么设置特征点，img2img 怎么完善原始图像等内容。 stable diffusion w...
-
基于CPU的云部署Stable-diffusion-webui的详细过程
最近看到很多很精美的AI图片，也想体验下，正好我有台2vCPU和2G内存轻量云服务器，但是不想再额外买GPU，就想着用CPU模式自己部署，部署经过摸索能顺利完成，但是加载模型已经很吃力，老是提示没有足够内存。本过程主要是用来记录部署的详细过程,仅针对于CP...
-
本地部署Stable Diffusion教程，详细教学，已安装成功，无科学上网版
前言 本篇文章参考多篇文章汇聚而成，安装遇到问题多半因为网络和环境问题，整理可供大家参考 一、Stable Diffusion是什么？ Stable Diffusion是一个AI 绘图软件 （开源模型），可本地部署，可切换多种模型，且新的模型和开源库...
-
引言:ChatGPT与AIGC技术的发展与应用
1.背景介绍 1. 背景介绍 自2012年的AlexNet成功地赢得了ImageNet Large Scale Visual Recognition Challenge(ILSVRC ，深度学习技术开始引以为奉。随着算法的不断发展和优化，深度...
-
记录内网Docker启动Stable-Diffusion遇到的几个坑
摘要：最近看到K8s启动stable-diffusion的文章，想着在自己开发环境复现一下。没想到在内网环境还遇到这么多问题，记录一下。 本文分享自华为云社区《内网Docker启动Stable-Diffusion（AI作画）》，作者：tsjsdbd...
-
手把手教你在linux中部署stable-diffusion-webui
stable-diffusion-webui是什么就不用多说了，以下是安装步骤，我以linux系统为例介绍，windows系统大同小异，安装期间没有用到梯子，安装目录/opt/stable-diffusion-webui/。 1.安装An...
-
【AI】D2000 arm64 aarch64 22.04.3 LTS (Jammy Jellyfish) 编译llama.cpp 使用chinese-alpaca-2-7b模型 CPU版本
下载编译llama.cpp cd ~/Downloads/ai/ git clone --depth=1 https://gh.api.99988866.xyz/https://github.com/ggerganov/llama.cpp cd llma...
-
Code Llama 70B霸榜3连发，练习5个月击败GPT-4！小扎LeCun亲自官宣上新
今天，Meta正式发布了Code Llama 70B，作为Code Llama系列中规模最大，性能最强的版本，一举击败了GPT-4！ 目前，模型共有三个版本，均可免费用于研究和商业目的： CodeLlama - 70B：基础代码模型； CodeLlama...
-
Stable Diffusion WebUi云端部署配置记录
一、前言 业务逻辑：服务器部署sdwebui项目，远程浏览器访问ui界面。服务器可租用AutoDL的GPU服务器 服务器：租用AutoDL的GPU服务器，Linux Stable Diffusion WebUi：作者AUTOMATIC1111，git...
-
LLaMA Efficient Tuning
文章目录 LLaMA Efficient Tuning 安装 数据准备 浏览器一体化界面 单 GPU 训练 train_bash 1、预训练 pt 2、指令监督微调 sft 3、奖励模型训练 rm 4、PPO 训练 ppo 5、DPO 训练...
-
stable-diffusion-webui 安装与运行
大家好，我是水滴~~ 本文主要介绍在各种显卡环境中，如何安装和运行 stable-diffusion-webui，包括：在 NVIDIA 显卡环境上安装、在 AMD 显卡环境上安装、在集显或小于 4G 显卡环境上安装。 文章目录 在 N...
-
stable diffusion代码学习笔记
前言：本文没有太多公式推理，只有一些简单的公式，以及公式和代码的对应关系。本文仅做个人学习笔记，如有理解错误的地方，请指出。 本文包含stable diffusion入门文献和不同版本的代码。 文献资源 本文学习的代码； 相关文献： D...
-
Stable-Diffusion环境搭建
硬件可以采用DELL R7525 搭配L4 或者T4 等等企业级显卡 环境如下： 可以看到有相应的GPU卡信息 esxi 7.u3 信息 设置GPU穿透方式 查看相应的虚拟机参数信息 PCI 设备加载穿透GPU信息...
-
Stable Diffusion 学习(一)——Web UI 的安装与部署
Stable Diffusion作为一款开源的AIGC项目受到众多人的欢迎，掀起了一大波AI绘画的浪潮。通过它我们可以将我的想法变成现实，并且随时调整，也可以让AI生成不同于人类角度的照片，接下来我们将进入到StableDiffusion的学习中去，今天的...
-
stable diffusion在server上的部署测试
SD infinite canvas Automatic1111 vs InvokeAI Automatic1111 vs InvokeAI - pros and cons stablediffusion-infinity 该repo的问题是已...