-
保姆级零基础微调大模型（LLaMa-Factory，多卡版）
此处非常感谢https://github.com/hiyouga/LLaMA-Factory这个项目。 看到网上的教程很多都是教如何用webui来微调的，这里出一期命令行多卡微调教程~ 1. 模型准备 模型下载比较方便的方法： 1. modelsc...
-
简单几步微调Llama 3大模型，小白轻松上手
这是面向小白用户的一个超级简单的微调大模型示例，通过这个例子将得到一个速度翻倍，并可以包含自己业务知识数据的微调后llama3模型，可用于本地部署构建私有化的AI智能体。very 的 nice 首先请准备好google账号和网络环境，这个示例基于gool...
-
深入解析twcms爬虫：原理、应用与风险防控
在当今信息化社会，数据已经成为一种重要的资源。随着网络技术的迅速发展，大量的数据被不断生成和存储在互联网的各个角落。为了高效获取这些数据，爬虫技术应运而生。其中，twcms爬虫作为一种针对特定内容管理系统（CMS）的爬虫，具有一定的研究和应用价值。本文将围...
-
AIGC——ComfyUI SDXL多种风格预设提示词插件安装与使用
概述 SDXL Prompt Styler可以预先给SDXL模型提供了各种预设风格的提示词插件，相当于预先设定好了多种不同风格的词语。使用这个插件，只需从中选取所需的风格，它会自动将选定的风格词汇添加到我们的提示中。 安装 插件地址：https:...
-
爬虫技术探秘：怎么爬虫成为数据获取的利器
随着互联网的飞速发展，数据已经成为了当今时代最宝贵的资源之一。在这个大数据的时代背景下，爬虫技术应运而生，成为了获取和分析数据的重要工具。那么，怎么爬虫呢？本文将从爬虫的定义、工作原理、应用场景以及合法合规性等方面，为读者揭开爬虫技术的神秘面纱。一、爬虫技...
-
AI绘画，Midjourney API 接口对接和使用
项目背景 众所周知，Midjourney并没有提供任何的Api服务，但是基于Midjourney目前的行业龙头位置，很多企业以及个人会有相关的需求。TTApi平台基于Midjourney现有功能整理出一套完整的可集成性高的服务，如果你有类似的需求，那么...
-
“Examxx爬虫”技术深探：实现高效数据抓取
在当今信息化飞速发展的时代，数据成为了各行各业争相追逐的重要资源。而爬虫技术，作为获取数据的一种有效手段，越来越受到人们的关注。其中，“Examxx爬虫”以其高效、精准的特点，在众多爬虫技术中脱颖而出，成为数据抓取领域的一大亮点。本文将围绕“Examxx爬...
-
Springboot整合文心一言----非流式响应与流式响应（前后端）
所谓非流式响应就是直接等待百度把答案生成好之后直接返回给你，而后者这是一一种流的形式，百度一边生成答案，一边将答案进行返回，这样就是我们在使用ChatGPT中最常见的一种表现了，它回答问题的时候总是一个字一个字的出来。这两回答方式都有一定的...
-
深入解析“crmeb 爬虫”：技术原理与应用探析
在数字化日益普及的今天，爬虫技术已经成为获取网络数据的重要手段之一。特别是在电子商务、市场营销等领域，通过爬虫工具抓取并分析数据，能够为企业提供更多商机与决策支持。而“crmeb 爬虫”作为近期备受关注的技术话题，其背后蕴含的技术原理与实际应用价值值得我们...
-
一文教你如何调用Ascend C算子
本文分享自华为云社区《一文教你如何调用Ascend C算子》，作者： 昇腾CANN。 Ascend C是CANN针对算子开发场景推出的编程语言，原生支持C和C++标准规范，兼具开发效率和运行性能。基于Ascend C编写的算子程序，通过编译器编译和运行时...
-
使用文心一言进行图像内容理解
接上篇文章，这期使用文心一言图像识别API，对本地图片以及在线视频图片进行内容理解。 该请求用于图像内容理解，支持输入图片和提问信息，可对输入图片进行理解，输出对图片的一句话描述，同时可针对图片内的主体/文字等进行检测与识别，支持返回图片内多主体/文字的...
-
使用 LLaMA Factory 微调 Llama-3 中文对话模型
原文：https://colab.research.google.com/drive/1d5KQtbemerlSDSxZIfAaWXhKr30QypiK?usp=sharing#scrollTo=gf60HoT633NY 请申请一个免费 T4 GPU 来...
-
llama-factory SFT系列教程 (三)，chatglm3-6B 大模型命名实体识别实战
文章目录 文章列表： 简介 装包 数据集 lora 微调 API 部署 大模型预测 评估 缺少数据集 文章列表： llama-factory SFT系列教程 (一 ，大模型 API 部署与使用 llama-factory SFT...
-
深入解析“buildadmin爬虫”：技术原理、应用场景与风险应对
在数字化与信息化的时代背景下，网络爬虫技术作为一种高效的数据抓取与信息处理手段，正广泛应用于各个领域。其中，“buildadmin爬虫”凭借其强大的功能与灵活性，成为了众多开发者和数据分析师关注的热点。本文将深入探讨“buildadmin爬虫”的技术原理、...
-
仅用250美元，Hugging Face技术主管手把手教你微调Llama 3
ChatGPT狂飙160天，世界已经不是之前的样子。 新建了免费的人工智能中文站https://ai.weoknow.com 新建了收费的人工智能中文站https://ai.hzytsoft.cn/ 更多资源欢迎关注 大语言模型的微...
-
“wapeq爬虫”技术深度解析与应用场景探讨
在当今大数据时代，数据爬虫已然成为获取和分析信息的关键技术之一。作为一名从业多年的技术人员，笔者近期深入研究了一款名为“wapeq”的爬虫工具，其强大的功能和灵活的应用场景让我深感震撼。本文将围绕wapeq爬虫的核心技术、使用方法以及实际应用场景进行深入剖...
-
“深入解析sylius爬虫：原理、应用与风险”
一、引言在当今数字化时代，数据爬取技术正逐渐成为获取信息的重要手段。sylius爬虫作为一种高效的数据抓取工具，具备强大的功能和灵活的应用场景，备受开发者和数据分析师的青睐。本文将深入解析sylius爬虫的原理、应用及其潜在风险，帮助读者更好地理解和运用这...
-
LLaMA-Factory+qwen多轮对话微调测评
目录 训练的时间和效果 数据准备 数据样例 数据配置 环境搭建 模型微调训练 模型预测 运行成功的web UI LLaMA-Factory地址：https://github.com/hiyouga/LLaMA-Factory/blo...
-
LLaMA-Factory微调LLama2
LLaMA-Factory(0.6.2版本 微调LLama2 1.下载安装 git clone https://github.com/hiyouga/LLaMA-Factory.git cd LLaMA-Factory pip install -e...
-
爬取与解析文档的利器：深入解析Showdoc爬虫
在当今数字化时代，信息呈现爆炸式增长，各种类型的文档也随之增多。面对海量的文档资源，如何高效地爬取与解析所需数据，成为了许多开发人员和数据分析师关注的焦点。而“Showdoc爬虫”作为一款强大的文档爬取与解析工具，正是应对这一挑战的有力助手。本文将深入探讨...
-
自定义数据集使用llama_factory微调模型并导入ollama
本文所有操作均在linux系统下完成 llama_factory安装 参考github的安装命令 git clone https://github.com/hiyouga/LLaMA-Factory.git conda create -n llama...
-
百度文心一言（ERNIE bot）API接入Android应用
百度文心一言（ERNIE bot）API接入Android应用实践 - 拾一贰叁 - 博客园 (cnblogs.com 需要完整代码的话：https://gitee.com/liyizhe2002/we-are-speakers Preface:...
-
手撕Llama3第1层: 从零开始实现llama3
一、Llama3的架构在本系列文章中，我们从头开始实现llama3。 Llama3的整体架构： 图片 Llama3的模型参数： 让我们来看看这些参数在LlaMa 3模型中的实际数值。 图片 [1] 上下文窗口（context-window）在实例化Lla...
-
淘特CMS爬虫技术深探与应用前景分析
在互联网时代，信息数据已成为一种极其重要的资源。随着网络技术的不断发展，如何高效地获取、整理和利用这些数据，成为了众多企业和个人关注的焦点。而爬虫技术，作为获取信息数据的重要手段之一，其重要性不言而喻。本文将对淘特CMS爬虫技术进行深探，分析其原理、应用场...
-
手把手教你用LoRA训练自己的Stable Diffusion模型
目录 写在前面 一、准备数据 二、数据打标签 三、执行训练 四、执行推理 1.LoRA推理 2.全参数推理 写在前面 Stable Diffusion大家已经很熟悉了，那么如何训练自己的sd模型呢，今天我就介绍一下用L...
-
深入探究“phpMyFAQ爬虫”的技术原理与实践应用
随着互联网技术的飞速发展，信息获取和整合变得愈发重要。在这个背景下，爬虫技术以其高效、自动化的特点，逐渐在众多领域展现出巨大的应用价值。本文将以“phpMyFAQ爬虫”为例，深入探讨其技术原理、实现方法以及实践应用中的注意事项，旨在为相关从业者提供一定的参...
-
llama-factory SFT系列教程 (二)，大模型在自定义数据集 lora 训练与部署
文章目录 简介 支持的模型列表 2. 添加自定义数据集 3. lora 微调 4. 大模型 + lora 权重，部署 问题 参考资料 简介 文章列表： llama-factory SFT系列教程 (一 ，大模型 API 部署与...
-
探秘专用Discuz爬虫：高效数据抓取与论坛信息挖掘
随着互联网技术的飞速发展，论坛作为人们交流信息、分享观点的重要平台，承载着海量的数据和信息。在这个时代背景下，如何高效地抓取和分析这些数据，成为了许多研究者和从业者关注的焦点。专用Discuz爬虫，作为一种专门针对Discuz论坛开发的数据抓取工具，具备强...
-
llama-factory SFT系列教程 (一)，大模型 API 部署与使用
文章目录 背景 简介 难点 前置条件 1. 大模型 api 部署 下一步阅读 背景 本来今天没有计划学 llama-factory，逐步跟着github的文档走，发现这框架确实挺方便，逐渐掌握了一些。 最近想使用 SFT 微调大模...
-
探究“塔可商城爬虫”背后的技术原理与风险应对
在互联网技术日新月异的时代背景下，数据已经成为了一种重要的资源。为了获取这些数据，各种技术手段层出不穷，而爬虫技术便是其中之一。近年来，“塔可商城爬虫”这一名词逐渐进入了公众的视野。那么，究竟什么是“塔可商城爬虫”？它背后蕴含着哪些技术原理？又该如何应对由...
-
autodl 上 使用 LLaMA-Factory 微调 中文版 llama3
autodl 上 使用 LLaMA-Factory 微调 中文版 llama3 环境准备 创建虚拟环境 下载微调工具 LLaMA-Factory 下载 llama3-8B 开始微调 测试微调结果 模型合并后导出 vllm 加速推理...
-
你想要的照片，AI都能帮你画出来：记录Stable Diffusion的力量
目录 前言 一、配置软件环境（可以跳过直接看第二部分效果图） 1.启动界面 二、解锁新功能 2.1 开源模型的获取 三、如何生成细节更加可控的内容呢？ 3.1 充分利用prompt: 3.2 词不达意时，充分使用lora 3.2 使用多个lo...
-
谷粒商城爬虫：探索数据驱动的电商新世界
在数字化浪潮中，电子商务平台如雨后春笋般涌现，成为大众购物、交流甚至娱乐的重要场所。其中，谷粒商城以其独特的商品和优质的服务，吸引着众多消费者的目光。然而，在这个信息爆炸的时代，如何从海量数据中提取有价值的信息，成为了电商领域面临的一大挑战。而“谷粒商城爬...
-
使用Flask实现：基于midjourney-proxy的MJ绘画实现（开源）
文章目录 实现效果 实现步骤 完整源码 实现效果 运行mj.py，如下所示。输入中文，自动生成提示词，自动开始下载。用户选择是否需要变换图片，选择需要对哪个图片变换，自动保存。 之前想做一个网页版，只实现了demo效果不好看，就不...
-
【LLama】Llama3 的本地部署与lora微调(基于xturn)
系列课程代码+文档（前2节课可跳过）：https://github.com/SmartFlowAI/Llama3-Tutorial 课程视频：https://space.bilibili.com/3546636263360696/channel/serie...
-
【AIGC】本地部署通义千问 1.5 (PyTorch)
今天想分享一下 Qwen 1.5 官方用例的二次封装（ huggingface 说明页也有提供源码），其实没有太多的技术含量。主要是想记录一下如何从零开始在不使用第三方工具的前提下，以纯代码的方式本地部署一套大模型，相信这对于技术人员来说还是非常有用的。...
-
深入解析“elgg爬虫”：原理、应用与风险防范
在现代互联网时代，数据已经成为了不可或缺的资源。随着大数据技术的飞速发展，数据抓取与分析显得尤为重要。而在这个背景下，“elgg爬虫”逐渐走进了我们的视野。本文将对“elgg爬虫”的定义、原理、应用场景以及潜在风险进行深入剖析，并探讨如何合理、合法地使用与...
-
探秘“nicefish爬虫”：揭秘其原理、应用与未来挑战
随着互联网技术的飞速发展，大数据已经成为当下最热门的关键词之一。在这个数据为王的时代，如何高效、准确地获取和利用数据，成为了众多企业和个人关注的焦点。爬虫技术应运而生，它能够自动化地抓取、解析互联网上的信息，为数据分析、挖掘提供了便捷的渠道。今天，我们就来...
-
帝国CMS相册爬虫探秘与应用指南
随着互联网技术的不断发展，网络爬虫已成为信息获取与处理的重要手段之一。在各种类型的爬虫中，针对特定CMS（内容管理系统）的相册爬虫因其实用性和针对性强而备受关注。本文将以帝国CMS为例，深入探讨相册爬虫的设计与实现方法，帮助读者理解和掌握这一技术，为实际应...
-
深入解读“classcms爬虫”：原理、应用与未来发展
在数字化时代，数据获取与处理成为各个领域不可或缺的一环。随着互联网信息的爆炸式增长，有效地从中抓取所需数据显得尤为重要。而“classcms爬虫”作为近年来兴起的一种数据抓取工具，以其高效、灵活的特性备受关注。本文将深入探讨classcms爬虫的工作原理、...
-
LLaMA-Factory微调（sft）ChatGLM3-6B保姆教程
LLaMA-Factory微调（sft）ChatGLM3-6B保姆教程 准备 1、下载 下载LLaMA-Factory 下载ChatGLM3-6B 下载ChatGLM3 windows下载CUDA ToolKit 12.1 （本人是在w...
-
AIGC，全能摧毁
目录 1 AIGC能干什么？ 2 说的再直白一些 3 这可不是一个好事 4 AIGC正在让你变得弱智 5 大家需要的是什么？ 1 AIGC能干什么？ AIGC最近火起来了，当然，他并不是第一天火起来，他从上个世纪就开始...
-
深入解析“国际CMS爬虫”技术与应用
随着互联网技术的迅猛发展，内容管理系统（CMS）已成为众多网站搭建的基石，而与此同时，针对CMS的爬虫技术也应运而生，不断演进。本文将深入探讨“国际CMS爬虫”的技术原理、应用场景及其面临的挑战，旨在为读者提供全面的了解和参考。一、国际CMS爬虫概述国际C...
-
运行stable-diffusion出现的问题
1、运行txt2img.py出现huggingface下载safety-cheaker问题 问题：OSError: We couldn't connect to 'https://huggingface.co' to load this model, c...
-
stable-diffusion-webui报OSError: Can‘t load tokenizer for ‘openai/clip-vit-large-patch14‘的正确解决方法
这个是个普遍问题，例如：Windows平台安装stable-diffusion-webui-1.7.0解决少工具包clip-vit-large-patch14 - 知乎 Stable Diffusion WebUI linux部署问题_oserror:...
-
llama3 微调教程之 llama factory 的 安装部署与模型微调过程，模型量化和gguf转换。
本文记录了从环境部署到微调模型、效果测试的全过程，以及遇到几个常见问题的解决办法，亲测可用（The installed version of bitsandbytes was compiled without GPU support. NotImpleme...
-
逆向爬虫技术的进阶应用与实战技巧
前言 在互联网的海洋中，数据是无价的财富。爬虫技术作为获取这些数据的重要手段，一直备受关注。然而，随着网站反爬虫机制的日益完善，简单的爬虫程序已经很难满足我们的需求。因此，掌握爬虫逆向技术，突破反爬虫机制，成为了爬虫开发者必须面对的挑战。...
-
深入探索“gechiiui爬虫”的技术世界
在数字化信息时代，数据的重要性日益凸显。随着互联网技术的迅猛发展，海量的数据被不断生成和积累，如何高效获取这些数据成为了一个关键问题。 “gechiiui爬虫”作为一种强大的数据抓取工具，在这一背景下应运而生，成为了许多数据分析师和研究人员的得力助手。一、...
-
Python爬虫入门(一)（适合初学者）
Python爬虫入门(一 （适合初学者） 关于爬虫是什么，怎样保证爬虫的合法性小编在这就不再过多的阐述，从本章起，小编将和大家一起分享在学习python爬虫中的所学，希望可以和大家一起进步，也希望各位可以关注一下我！ 首先我们来初步了解下如何使用开发...
-
开源问答系统爬虫：技术探索与应用前景
随着互联网信息的爆炸式增长，如何高效获取所需知识成为一个重要课题。开源问答系统爬虫，作为新一代信息检索技术，凭借其强大的数据抓取与处理能力，在知识获取领域发挥着越来越重要的作用。本文将对开源问答系统爬虫进行深入探讨，分析其技术原理、应用场景以及未来发展趋势...