-
llama factory 是如何加载数据集 通过对数据集加载的代码的理解编写自定义数据集训练代码
第一层从训练代码追踪到以下代码 def get_dataset( tokenizer: "PreTrainedTokenizer", model_args: "ModelArguments", data_args: "DataAr...
-
[AIGC] 深入理解拓扑排序
文章目录 一. 什么是拓扑排序？ 二. 拓扑排序的应用 三. 拓扑排序的算法过程 四、leetcode 1. 课程表 II（LeetCode 题号：210） 2. 课程表 III（LeetCode 题号：1136） 3. 课程表 III（L...
-
Llama模型家族之RLAIF 基于 AI 反馈的强化学习（一）
LlaMA 3 系列博客 基于 LlaMA 3 + LangGraph 在windows本地部署大模型 （一） 基于 LlaMA 3 + LangGraph 在windows本地部署大模型 （二） 基于 LlaMA 3 + LangGraph 在w...
-
12k Star！Continue：Github Copilot 开源本地版、开发效率和隐私保护兼得、丰富功能、LLM全覆盖！
原文链接：（更好排版、视频播放、社群交流、最新AI开源项目、AI工具分享都在这个公众号！） 12k Star！Continue：Github Copilot 开源本地版、开发效率和隐私保护兼得、丰富功能、LLM全覆盖！ 🌟开源 VS Code...
-
深入浅出解析Stable Diffusion中U-Net的核心知识与价值 | 【算法兵器谱】
Rocky Ding 公众号：WeThinkIn 写在前面 【算法兵器谱】栏目专注分享AI行业中的前沿/经典/必备的模型&论文，并对具备划时代意义的模型&论文进行全方位系统的解析...
-
【AIGC】通义千问生成问答数据集
好久没有更新跟实际应用相关的内容了（主要是因为公司知识产权问题未能立即公开，目前只能挑选一些脱敏内容与各位分享），如标题所示本期将跟大家讲一下如何通过通义千问生成问答数据集的。 在之前使用 Autokeras 的 RNN 训练时提到，数据是人工智能训练的...
-
LlamaFactory-Ollama-Langchain大模型训练-部署一条龙
前言 近些日子，大模型火的一塌糊涂，那么现在就有义务要学习一套好用的、从 dataset --> train --> deploy 的一整套流程，好拿来装逼。话不多说，进入正题 Train 框架 目前好用的框架太多，如BELLE, C...
-
Stable Diffusion详解
Stable Diffusion是一种先进的基于深度学习的图像生成技术，其详细解释如下： 简介： Stable Diffusion是Diffusion扩散模型中的最新版本，相较于早期版本如原始Diffusion、Latent Diffusio...
-
【人工智能】百度文心一言智能体：AI领域的新里程碑
人不走空 🌈个人主页：人不走空 💖系列专栏：算法专题 ⏰诗词歌赋：斯是陋室，惟吾德馨 目录 🌈个人主页：人不走空 💖系列专栏：算法专题 ⏰诗词歌赋：斯是陋室，...
-
stable diffusion 1.x 模型训练概述
本文主要介绍sd发展的第一阶段版本的模型架构和一些微调训练方法，后续版本SDXL，LCM 版本再写文章继续介绍 SD 1.x 版本模型结构 autoencoder(VAE ：encoder将图像压缩到latent空间，而decoder将latent解码...
-
Meta Llama 3 文本编码为 token
Meta Llama 3 文本编码为 token flyfish tiktoken 是一个用于 OpenAI 模型的快速 BPE 分词器，这里用在Meta Llama 3上。主要功能包括将文本编码为token，以及将token解码回文本。这个过程通常使...
-
哈啰集团全面接入通义灵码，AI 生成代码占比 20%，研发提效 12%
6月21日，在阿里云 AI 智领者峰会上海站，哈啰集团算法总监贾立宣布，哈啰集团已全面接入阿里云通义灵码专属版，不仅提升了内部研发效率，实现 AI 代码采用率超过20%，还将灵码接入了哈啰自研C o pilot“海螺机器人”共同帮助用户实现智能代码补全、进...
-
Stable Diffusion WebUI 安装记录[Ubuntu服务器]
前言 在远程服务器（Ubuntu）上安装Stable Diffusion WebUI。服务器是4090，所以在服务器上配置。原本是MobaXterm SSH连接服务器，建议用vscode连接。 尝试了给服务器出海但不知道为什么还是不行。GitHub上我...
-
豆包MarsCode功能介绍及免费使用指南 AI智能开发工具体验地址入口
豆包 MarsCode简介 豆包 MarsCode是一款即将发布的智能开发工具，旨在通过AI技术激发开发者的创造力。它将为编程工作带来革命性的改变，提高开发效率，降低技术门槛。豆包 MarsCode目标受众为软件开发者、编程爱好者以及技术团队，他们可以通过...
-
llama系列模型学习
一、目录 llama1 模型与transformer decoder的区别 llama2 模型架构 llama2 相比llama1 不同之处 llama3 相比llama2 不同之处 llama、llama2、llama3 分词器词表大小以及优缺点...
-
AI绘画SD教程 - 模型分类与使用，一文看懂！
主业写代码，副业做 AI 大家好，我是程序员晓晓 模型分类与使用 在 AI绘画Stable Diffusion 中，模型分为大模型、VAE、Lora、Embedding、Hypernetwork 等。 大模型 大模型又称基础模型、底模、主模...
-
AIGC工具使用指南与测评报告
目录 AIGC工具使用指南与测评报告 1. 引言 2. AIGC使用指南 2.1 安装和设置 2.2 与AIGC进行对话 2.3 提高对话质量 3. 测评报告 4. 结论 AIGC工具使用指南与测评报告 1. 引言 AIGC（A...
-
Stable Diffusion 3 如何下载安装使用及性能优化
Stable Diffusion 3 Stable Diffusion 3（SD3），Stability AI最新推出的Stable Diffusion模型系列，现在可以在Hugging Face Hub上使用，并且可以与Diffusers一起使用。...
-
重磅！Meta 发布 Llama 3，前所未有的强大功能和多模态能力｜TodayAI
Meta今日宣布推出其最新一代尖端开源大型语言模型Llama 3。该模型预计很快将在多个领先的云服务平台上线，包括AWS、Databricks、Google Cloud、Hugging Face、Kaggle、IBM WatsonX、Microsoft A...
-
Stable Diffusion模型训练 — 前菜
图像生成模型原理简析 你有没有好奇过，AI图像生成模型是怎么学会“绘画”的吗？人工智能（Artificial Iitelligence）这个概念是在1956年的达特矛斯会议上提出来的认为机器可以模仿人类的学习以及其他方面的智能，后世也将实现人工智能的方式...
-
养猪大户必备！教你用ModelBox开发一个AI数猪应用
本文分享自华为云社区《ModelBox-视频应用开发：AI智能数猪【玩转华为云】》，作者： 阳光大猫。 一、准备环境 ModelBox端云协同AI开发套件（Windows）环境准备【ModelArts+ModelBox 端云协同AI应用开发实训课程...
-
SD教程：仅用3步教会你如何使用AI在图中藏字
本教材学习如何使用Stable Diffusion在图片中巧妙隐藏文字。本教程将分三步详细指导你完成整个过程，从文字选择到图像生成，每一步都清晰易懂。这个技巧不仅增加了图像的趣味性，还能用于创意表达和信息加密。跟随教程，轻松掌握这一独特技能。 1、准备工...
-
Llama模型家族之Stanford NLP ReFT源代码探索 （一）数据预干预
LlaMA 3 系列博客 基于 LlaMA 3 + LangGraph 在windows本地部署大模型 （一） 基于 LlaMA 3 + LangGraph 在windows本地部署大模型 （二） 基于 LlaMA 3 + LangGraph 在w...
-
阿里Qwen2正式开源，性能全方位包围Llama-3 | 最新快讯
Qwen 系列会是众多大学实验室新的默认基础模型吗？ 斯坦福团队套壳清华大模型的事件不断发酵后，中国模型在世界上开始得到了更多关注。不少人发现，原来中国已经有不少成熟的大模型正在赶超国外。 HuggingFace 平台和社区负责人 Omar San...
-
开源项目推荐：openai-whisper-talk —— 智能语音对话新时代
开源项目推荐：openai-whisper-talk —— 智能语音对话新时代 项目地址:https://gitcode.com/supershaneski/openai-whisper-talk 在语音交互的前沿领域，有一颗璀璨的新星正在升起——op...
-
GitHub Copilot 支持 IntelliJ IDEA啦，插件装起来！
别以为TJ君说的是天方夜谭，就在前不久的 GitHub Universe 2021开发者大会上，GitHub官方正式宣布了一款名为 Copilot工具的更新。 说起Copilot这个名字，相信一直关注GitHub的小伙伴马上脑海中会浮现出今年早些时候看到...
-
Stable Diffusion 安装教程（附安装包）
“Stable Diffusion的门槛过高、不会安装？没关系，这篇文章教会你如何安装！” Stable Diffusion的安装部署其实并不困难，只需简单点击几下，几分钟就能安装好，不管是windows还是苹果mac电脑，关于Stable Diffus...
-
0基础使用LLAMA大模型搞科研，自动阅读论文、代码修改、论文润色、稿件生成等等
0基础使用LLAMA大模型搞科研，自动阅读论文、代码修改、论文润色、稿件生成等等。 使用 LLAMA大模型 辅助科研可以带来多方面的好处和优势，主要包括： 提高文献调研效率： LLAMA大模型 可以帮助研究人员快速获取特定研究领域的概述，提供相...
-
Diffusion Model原理及Stable Diffusion
什么是扩散（diffusion）？ 扩散一词来自非平衡热力学（non-equilibrium thermodynamics），在非平衡热力学中扩散过程指的是：“在浓度梯度的驱动下，颗粒或分子从高浓度区域移动到低浓度区域。” 什么是扩散模型（di...
-
Stable Diffusion | Gradio界面设计及API调用
Stability AI 2024年2月发布了 Stable Cascade 模型，但由于该模型较大（fp32格式的 Stage_A + Stage_B + Stage_C 模型超过20GB，ComfyUI 专用 Stage_B + Stage_C 模型也...
-
快速部署stable diffusion@Ubuntu
Stable Diffusion可以根据文本描述生成相关的图像，是当前最热门的文生图模型。 在Ubuntu下，可以选择快速安装，或者手动一步步安装。 快速安装 使用文档中的方法，先下载一个sh文件，然后执行这个文件，就自动安装依赖，自动启动服务了...
-
ubuntu部署stable-diffusion-webui
1、下载stable-diffusion-webui 我这里使用的是阿里的oss缓存，可以直接下载 wget https://pai-vision-data-sh.oss-cn-shanghai.aliyuncs.com/aigc-data/code/...
-
不管黑丝或者白丝还是想撕坏它，都可以用LoRA（Stable Diffusion进阶篇：ComfyUI 附加网络）
先来几张图 现在来教教大家怎样做出这样的图片 在学习WebUI的那些基础知识点的时候，有一个东西是每一个初学者都绕不开的大山-附加网络。 这个东西对于每一个接触Stable Diffusion的小伙伴来说就像是小学门口小卖部卖的辣条、初中课本上的涂...
-
拥有你自己的Copilot!基于Llama3和CodeGPT部署本地Copilot，断网也能使用！
当谈到代码自动补全和辅助编程工具时，GitHub Copilot是一个备受推崇的选择。然而，有时我们可能希望在本地环境中构建一个类似的解决方案，以便更好地控制数据和隐私，更重要的是Llama3是免费，而Github Copilot是收费的。本文将分享如何基...
-
AIGC技术的发展现状和未来趋势——Civitai & 抱脸网(huggingface) 模型网站对国人的影响
AIGC技术的发展现状和未来趋势——civitai、huggingface模型网站对国人的影响 模型网站 抱脸网(huggingface Civitai 如何看待AIGC技术？ AIGC技术在不同领域的应用情况： 对未来社会的影响： 可能...
-
AIGC笔记--Stable Diffusion源码剖析之UNetModel
1--前言 以论文《High-Resolution Image Synthesis with Latent Diffusion Models》 开源的项目为例，剖析Stable Diffusion经典组成部分，巩固学习加深印象。...
-
Stable Diffusion教程|SD WebUI必备插件安装 菜鸟轻松成高手
一个刚学AI绘画的小菜鸟怎么快速成为Stable Diffusionde的高手？答案就是SD插件，只要学会使用SD的各种插件，帮你写正向和负向提示词，修复人脸/身体/手指，高清放大图片，指定人物pose，图片微调等等都可以轻松搞定，善用插件是成为高手必经之...
-
探索未来文本交互的利器 - Nvim-Llama：将大型语言模型引入Neovim的革命性尝试...
🦙 探索未来文本交互的利器 - Nvim-Llama：将大型语言模型引入Neovim的革命性尝试 项目地址:https://gitcode.com/jpmcb/nvim-llama 在快速演进的人工智能领域，即时、高效的与语言模型交互已经成为开发者的梦...
-
GPT-4o攻破ARC-AGI无法被挑战的神话！71%准确率成新SOTA
【新智元导读】号称不可能轻易被击败的AGI基准ARC-AGI被GPT-4o撼动，GPT-4o以在公共测试集50%、在训练集71%的准确率成为了新的SOTA! ARC-AGI是唯一可以用来衡量通用人工智能进展的基准，创造者François Chollets曾...
-
[论文阅读] (32)南洋理工大学刘杨教授——网络空间安全和AIGC整合之道学习笔记及强推（InForSec）
首先祝大家五一节快乐！《娜璋带你读论文》系列主要是督促自己阅读优秀论文及听取学术讲座，并分享给大家，希望您喜欢。由于作者的英文水平和学术能力不高，需要不断提升，所以还请大家批评指正，非常欢迎大家给我留言评论，学术路上期待与您前行，加油。 本文是南洋理工大...
-
LLM记录：五一 Llama 3 超级课堂
LLM记录：五一 Llama 3 超级课堂 想玩大模型，自己又没那个环境，参加五一 Llama 3 超级课堂，简单记录一下llama3-8b的相关体验，实在是邀请不到人，还好后面开放了24G显存，好歹模型能跑起来了，只能说感谢大佬！ Llama 3...
-
InsCode Stable Diffusion使用教程（非常详细）从零基础入门到精通，看完这一篇就够了_outpainting 模型下载
先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7 深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！ 因此收集整理了一份《2024年最新HarmonyOS鸿蒙...
-
LLaMA 3 源码解读-大语言模型5
本来不是很想写这一篇，因为网上的文章真的烂大街了，我写的真的很有可能没别人写得好。但是想了想，创建这个博客就是想通过对外输出知识的方式来提高自身水平，而不是说我每篇都能写得有多好多好然后吸引别人来看。那作为对整个合集内容的完善，这篇博客会解析现在最火的LL...
-
Copilot本地部署：（1）Github学生认证
（1）Github学生认证 a.在github中补全必要信息 ①登录github账号后（没有账号可用邮箱自行注册）， 在https://github.com/settings/billing/payment_information中，填写好必填字段（...
-
vscode copilot 插件连接问题解决方案
问题描述 vscode 的copilot每隔一段时间就会无法使用，每次出现的报错可能都不一样，这里记录一个可行的解决方案，值得尝试。 解决方案 搜索框搜索控制面板并打开 第一步-打开控制面板 2. 打开网络和Int...
-
【全网瞩目】最强文生图模型，Stable Diffusion 3技术报告解禁
12号，终于在Hugging Face上出现了 Stable Diffusion 3 Medium。没错，正如他所承诺的，最强文生图模型真的开源了。而且此次开源不仅是以SD2的比较下性能得到了更好的升级，同时也向我们展示了最前沿的DiT技术——MMDiT。...
-
深入浅出完整解析Stable Diffusion XL（SDXL）核心基础知识
原文：深入浅出完整解析Stable Diffusion XL（SDXL）核心基础知识 Rocky的公众号：WeThinkIn Rocky的知乎：Rocky Ding 更多AI行业干货内容欢迎关注Rocky的CSDN、知乎、公众号～ 码字不易，希望大家...
-
Stable Diffusion复现——基于 Amazon SageMaker 搭建文本生成图像模型(3)
深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！ 既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上鸿蒙开发知识点，真正体系化！...
-
【AI原理解析】— Meta Llama-3模型
目录 一、模型架构 Transformer架构 解码器（Decoder-only）设计 Group Query Attention (GQA 技术 二、参数与训练 参数规模 训练数据集 训练过程 三、技术特点 四、性能提升 推理能力...
-
Whisper-AT：抗噪语音识别模型（Whisper）实现通用音频事件标记（Audio Tagger）
本文介绍一个统一音频标记（Audio Tagger）和语音识别（ASR）的模型：Whisper-AT，通过冻结Whisper的主干，并在其之上训练一个轻量级的音频标记模型。Whisper-AT在额外计算成本不到1%的情况下，可以在单次前向传递...