-
AI在用 | 数学更生动，Claude-3直接生成勾股定理动画
以大模型、AIGC为代表的人工智能浪潮已经在悄然改变着我们生活及工作方式，但绝大部分人依然不知道该如何使用。 今天，我们分享 X 平台用户 @dr_cintas 使用 Claude3（具体版本不详）生成勾股定理动画的用例。 案例地址:https:/...
-
DarkGPT：基于ChatGPT-4的AI工具 用于检测泄露的数据库
近日，一位在GitHub上使用“luijait”别名的西班牙渗透测试人员发布了一个名为“DarkGPT”的AI OSINT工具，旨在帮助检测泄露的数据库。 DarkGPT是一款由ChatGPT-4-200K驱动的OSINT（开源情报）助手，在这个数字化时...
-
Python在网络数据采集与下载中的应用
随着互联网的迅猛发展，网络数据已经成为我们获取信息的重要途径。然而，如何从海量的网络数据中提取出我们所需的信息，并将其下载到本地进行进一步的分析和处理，一直是困扰许多开发者和研究者的难题。幸运的是，Python作为一种功能强大的编程语言，提供了丰富的库和工...
-
[Datawhale]使用趋动云的stable-diffusion项目实践
目录 0 写在前面 1 内容简介 2 任务二，用免费GPU部署自己的stable-diffusion 2.1 创建项目 2.2 初始化开发环境实例 2.3 部署模型 1 解压代码及模型 2 解压配置文件到隐藏目录/root/.cache...
-
Python爬虫实例代码：探索网络数据的入门之旅
在数字化时代，数据无疑是最宝贵的资源之一。为了从海量的网络数据中提取有价值的信息，爬虫技术应运而生。Python，作为一种简洁而强大的编程语言，被广泛应用于爬虫开发。本文将通过一个Python爬虫实例代码，带领读者走进网络爬虫的世界，探索如何抓取、解析和存...
-
PHP在爬虫应用中的潜力与实践
在现代互联网的大数据时代，网络爬虫已成为了许多企业和个人获取网络信息的重要手段。许多人或许首先会想到使用Python这样的语言进行爬虫编写，因为Python生态丰富且有一些专门的库来支持网络爬虫的编写，但实际上PHP也是一款非常强大的编程语言，其在网络爬虫...
-
AIGC: 2 语音转换新纪元-Whisper技术在全球客服领域的创新运用
背景 现实世界，人跟人的沟通相当一部分是语音沟通，比如打电话，聊天中发送语音消息。 而在程序的世界，大部分以处理字符串为主。 所以，把语音转换成文字就成为了编程世界非常普遍的需求。 Whisper 是由 OpenAI 开发的一种高效的语音识别（AS...
-
基于Python的Discuz数据采集技术
在互联网信息时代，数据的采集和处理成为了很多业务不可或缺的一部分。Discuz作为一款历史悠久的论坛软件系统，广泛应用于各类社区和论坛网站。由于其开放性和灵活性，Discuz平台上产生了大量的用户生成内容，这些数据对于市场研究、舆情监控等领域具有重要价值。...
-
基于Discuz!的今日头条自动采集系统设计与实现
随着互联网的迅猛发展和信息时代的来临，新闻资讯已经成为人们日常生活中不可或缺的一部分。特别是像今日头条这样的新闻聚合平台，以其独特的内容推荐算法和个性化定制功能，吸引了大量用户的关注。然而，对于许多拥有独立论坛或社区网站的管理员来说，如何将这些热门资讯整合...
-
Python在网络数据采集与PDF文件下载中的应用
随着信息技术的飞速发展，网络数据已经成为我们获取信息的重要途径。Python作为一种功能强大且易于上手的编程语言，在网络数据采集和PDF文件下载方面展现出了其独特的优势。本文将详细探讨Python在网络数据采集与PDF下载方面的应用，并通过实例加以说明。一...
-
马斯克开源Grok-1：3140亿参数迄今最大，权重架构全开放，磁力下载
说到做到，马斯克承诺的开源版大模型 Grok 终于来了！ 今天凌晨，马斯克旗下大模型公司 xAI 宣布正式开源 3140 亿参数的混合专家（MoE）模型「Grok-1」，以及该模型的权重和网络架构。 这也使得Grok-1成为当前参数量最大的开源大语言...
-
手把手教你搭建更节省显存的AI绘画工具ComfyUI
前言 相信大家玩 Stable Diffusion（以下简称 SD）都是用的 web UI 操作界面吧，不知道有没有小伙伴听说过**ComfyUI(**最强大、模块化的稳定扩散 GUI 。 // ComfyUI示例 https://comfyanon...
-
大模型学习笔记（一）：部署ChatGLM模型以及stable-diffusion模型
大模型学习笔记（一）：部署ChatGLM模型以及stable-diffusion模型 注册算力平台（驱动云平台） 1.平台注册 2.查看算力 3.进入平台中心 部署ChatGLM3-6B模型 1.创建项目 2.配置环境 设置镜像源、克隆...
-
小妙招：Copilot 当跳板免费调用 GPT4
GPT4 每月 20 刀，Github Copilot 每月 10 刀 首先叠个甲：免费不是 0 成本。 由于我在日常开发过程中，Copilot 对我来说是必需品，我会用它检查代码、写工具函数、写注释、干苦力。所以这钱是我的必要支出。而这篇文章是介...
-
以Python实现网站爬虫的技术探究与应用
在当今互联网时代，信息爆炸式地增长，如何有效地从海量的网页数据中提取出所需的信息成为了一个重要的问题。网站爬虫（Web Crawler），也称网络爬虫或网页蜘蛛，是一种自动化程序，用于遍历互联网上的网页并抓取相关信息。Python作为一种简洁高效、易于上手...
-
Stable Diffusion 跑通总结
记录了自己跑通Stable Diffusion的过程和踩过的坑，目前只是初步跑了一下，没有很深入的使用代码，希望能有一些参考价值。 在Windows系统运行，需要提前装好Conda 一、下载代码和模型 1、下载代码： 代码下载：代码地址 或者...
-
20240203在WIN10下配置stable-diffusion-webui.git
20240203在WIN10下配置stable-diffusion-webui.git 2024/2/3 11:55 【结论：在WIN10下，生成512x512分辨率的图像，大概需要9秒钟！】 【结论：在Ubuntu20.04.6下，生成512x512...
-
【AIGC调研系列】Github Copilot进行pytest自动化测试的实践经验
GitHub Copilot可以用于pytest自动化测试的实践和使用方法。此外，Copilot可以在很多情况下仅通过注释或函数名就能实例化出完整的代码，这表明它也可以用于补充测试用例[5]。 具体到pytest框架，它是一个非常容易上手的自动化测试框架...
-
Stable diffusion安装以及汉化
安装参考:https://blog.csdn.net/weixin_72959097/article/details/136261658 （1）下载miniconda Miniconda是一个轻量级的包管理系统，用于管理和部署Python环境和软件包。...
-
道听途说国产大模型文心一言代码能力很差？
场景： 针对个人的最近的一个日常使用场景的一个需求。启动特定的程序，需要输入ak_key,sk_key。每次启动都要输入，就很麻烦。我希望有一个简化调用这个程序的东西。自动帮我输ak_key,sk_key简化我的使用成本。 于是，我寄希望于通过文心一言...
-
基于Python的微信公众号文章采集方法与实践
随着信息技术的迅猛发展，微信公众号已成为人们获取信息、学习知识和交流思想的重要平台。对于许多研究者和从业者而言，能够有效地采集微信公众号上的文章数据，对于内容分析、舆情监测、品牌推广等方面都具有重要意义。本文将介绍如何使用Python这一强大的编程语言来实...
-
【学习笔记】：Ubuntu 22 使用模型量化工具llama.cpp部署大模型 CPU+GPU
学习笔记：Ubuntu 22 使用模型量化工具llama.cpp部署大模型 CPU+GPU 前言 1 下载并编译llama.cpp 1.1 git下载llama.cpp仓库源码 1.2 编译源码（make） 1.2.1 选择一：仅在CPU上...
-
Stable Diffusion WebUI安装报错解决
本人是一个AI新手，最近在研究文生图方面相关内容时看到Stable Diffusion WebUI这个项目，想在本地部署安装试用看下效果，安装过程中遇到了一些问题，此处记录一下 问题1：Python 3.12.1 (tags/v3.12.1:2305ca...
-
LLaMA-Factory 8卡4090 deepspeed zero3 微调Qwen14B-chat
环境安装 推荐使用docker，Ubuntu20.04https://www.modelscope.cn/docs/%E7%8E%AF%E5%A2%83%E5%AE%89%E8%A3%85 docker pull registry.cn-beijin...
-
Python爬虫采集的数据存储到HDFS的实践与探索
随着大数据时代的来临，数据的采集、存储和处理成为了许多企业和研究机构的重要工作。在这个过程中，Python爬虫因其灵活性和易用性成为了数据采集的常用工具，而Hadoop分布式文件系统（HDFS）则以其高容错性、高吞吐量的特点成为了大数据存储的首选。本文将详...
-
基于Discuz平台实现搜狐文章一键采集的功能研究
在当今信息时代，内容的快速获取与整合成为了众多网站运营者关注的焦点。Discuz作为一款广泛使用的社区论坛软件，其强大的插件扩展功能为用户提供了诸多便利。而搜狐作为国内知名的新闻门户网站，拥有丰富的文章资源。因此，“Discuz一键采集搜狐文章”功能的实现...
-
爬虫Python什么意思？深入解析Python爬虫技术
在数字化时代，数据已经成为了一种极其重要的资源。为了获取这些数据，人们开发了各种技术和工具，其中最为常见和实用的就是网络爬虫。而在众多编程语言中，Python因其简洁、易读和强大的库支持，成为了网络爬虫开发的首选语言。那么，“爬虫Python什么意思”呢？...
-
Python在网络数据采集与发布中的应用
在数字化时代，数据已经成为了一种重要的资源，而网络则是这种资源最为丰富的矿藏。Python，作为一种简洁、高效且易于上手的编程语言，已经在网络数据采集与发布领域展现出了其独特的优势。本文将详细探讨Python在网络数据采集与发布中的应用，包括其基本原理、常...
-
MACBOOK PRO M2 MAX 安装Stable Diffusion及文生图实例
以前偶尔会使用Midjourney生成一些图片，现在使用的头像就是当时花钱在Midjourney上生成的。前段时间从某鱼上拍了一台性价比还不错的macbook，想着不如自己部署Stable Diffusion（以下简称SD）尝试一下。 网上有很多教程，但...
-
创意无限释放，AI绘画革命：告别抽卡，迎来心想事成的新纪元！
当我们探索AI绘画的魅力时，一个常见的挑战是如何在画面中精准地呈现多个元素，并确保它们和谐共存。传统的做法往往是通过不断的尝试和错误，或者依赖于复杂的后期处理工具，如Photoshop，来进行调整和优化。这不仅效率低下，而且对于非专业人士来说，也存在一定的...
-
whisperspeech 英文TTS的实现
以下代码成功运行在 colab 中，需要修改运行时类型为 T4 GPU。 !pip install -Uqq WhisperSpeech def is_colab( : try: import google.colab; return True...
-
基于Python的微信公众号数据采集技术分析与应用
摘要：随着微信公众号的普及和影响力的扩大，获取并分析公众号数据对于理解用户行为、市场趋势和内容传播机制具有重要意义。本文将介绍如何使用Python进行微信公众号的数据采集，包括基本的爬虫原理、技术难点及解决方案，并通过实例展示数据采集后的处理与应用。一、引...
-
Whisper实现语音识别转文本
#教程 主要参考开源免费离线语音识别神器whisper如何安装，OpenAI开源模型Whisper——音频转文字 Whisper是一个开源的自动语音识别系统，它在网络上收集了680,000小时的多语种和多任务监督数据进行训练，使得它可以将多种语言的音频...
-
基于Python的图片采集与下载技术研究
随着互联网的迅猛发展，网络上的图片资源日益丰富，如何高效地从海量信息中采集并下载所需图片成为了许多开发者与研究者的关注焦点。Python，作为一种简洁、易读且功能强大的编程语言，为图片采集与下载提供了有力的工具。本文将围绕Python在图片采集下载方面的应...
-
Python在网络数据采集中的应用及PDF处理技巧
在当今的信息时代，数据已经成为了一种宝贵的资源。而网络数据采集，作为获取这些数据的重要手段，受到了广泛关注。Python，作为一种简洁、易读且功能强大的编程语言，被广泛应用于网络数据采集。同时，Python在处理PDF文件方面也有着独特的优势。本文将详细介...
-
Python爬虫：网络数据采集的利器
在数字化时代，互联网如同一个巨大的信息库，汇聚了世界各地的知识和数据。为了有效地从这一信息海洋中提取所需的数据，爬虫技术应运而生。Python，作为一种简洁、易读且功能强大的编程语言，已成为开发网络爬虫的首选工具。本文将深入探讨Python爬虫的基本原理、...
-
Python在数据采集领域的应用与实践
随着信息技术的迅猛发展和大数据时代的来临，数据采集已成为各行各业不可或缺的环节。在众多编程语言中，Python凭借其简洁明了的语法、强大的第三方库支持和广泛的应用领域，成为了数据采集领域的翘楚。本文将对Python在数据采集方面的应用、相关技术及其优势进行...
-
爬虫和Python一样吗
在网络技术迅速发展的时代，我们经常听到“爬虫”和“Python”这两个词汇。很多人会将它们联系在一起，甚至产生“爬虫和Python是一样的吗？”这样的疑问。本文将从基本概念、技术特性以及应用领域等多个维度来深入探讨这两者的关系。一、爬虫的基本概念“爬虫”（...
-
百度文心一言api接口调用使用教程，自媒体/网站优化批量改写文章可用
大家好，我是淘小白~ 年前就有老客户需要写一个百度文心一言改写的软件，但是过年直接躺平了，年后抓紧给写出来了，通过百度文心一言可以改写文章，自媒体的洗稿可用。 网站优化也可以用，但是不推荐，免费调用很少，回报周期长，利润低的话不推荐使用文心一言改写。...
-
运行StableDiffusionInpaintPipeline的Example时报错：OSError: Cannot load model runwayml/stable-diffusion-...
项目地址： https://huggingface.co/docs/diffusers/api/pipelines/stable_diffusion/inpainthttps://huggingface.co/docs/diffusers/api/pip...
-
超强！深度学习Top10算法！
自2006年深度学习概念被提出以来，20年快过去了，深度学习作为人工智能领域的一场革命，已经催生了许多具有影响力的算法。那么，你所认为深度学习的top10算法有哪些呢？ 以下是花哥我心目中的深度学习top10算法，它们在创新性、应用价值和影响力方面都具...
-
《深入探索Python爬虫源码：原理、实践与挑战》
在数字化时代，数据无疑成为了最宝贵的资源之一。为了从海量的网络数据中提取有价值的信息，爬虫技术应运而生。Python，作为一种简洁、易读且功能强大的编程语言，自然成为了实现爬虫的首选工具。本文将深入探索Python爬虫源码的原理、实践过程中可能遇到的挑战，...
-
Python爬虫：网络数据采集的利器
在当今信息爆炸的时代，如何从海量的网络数据中快速、准确地获取所需信息，成为了众多开发者和研究者的共同关注。Python爬虫，作为一种高效的网络数据采集工具，应运而生，并在各个领域发挥着越来越重要的作用。一、Python爬虫概述Python爬虫，顾名思义，是...
-
探索Kubernetes与AI的结合：PyTorch训练任务在k8s上调度实践
概述 Kubernetes的核心优势在于其能够提供一个可扩展、灵活且高度可配置的平台，使得应用程序的部署、扩展和管理变得前所未有的简单。通用计算能力方面的应用已经相对成熟，云原生化的应用程序、数据库和其他服务可以轻松部署在Kubernetes环境中，实现...
-
【AIGC调研系列】StarCoder2模型与其他模型对比的优势和劣势
StarCoder2模型的优势主要包括： 性能：StarCoder2模型具备性能优势，旨在为代码生成、编辑和推理任务提供强大的支持[6]。 透明度：该系列模型希望成为代码生成领域的新标准，提高了模型的透明度和可访问性[1][4][11]。 成本效...
-
【个人开发】llama2部署实践（三）——python部署llama服务（基于GPU加速）
1.python环境准备 注：llama-cpp-python安装一定要带上前面的参数安装，如果仅用pip install装，启动服务时并没将模型加载到GPU里面。 # CMAKE_ARGS="-DLLAMA_METAL=on" FORCE_CMAK...
-
论文笔记：Code Llama: Open Foundation Models for Code
导语 Code Llama是开源模型Llama 2在代码领域的一个专有模型，作者通过在代码数据集上进行进一步训练得到了了适用于该领域的专有模型，并在测试基准中超过了同等参数规模的其他公开模型。 链接：https://arxiv.org/abs/23...
-
PHP与Python在爬虫领域的应用与比较
在网络信息时代，数据成为了最为宝贵的资源之一。为了有效地从海量信息中提取出所需的数据，爬虫技术应运而生。爬虫，又称网络蜘蛛或网络机器人，是一种自动化地抓取互联网信息的程序。在众多编程语言中，PHP和Python都具备编写爬虫程序的能力。本文将从语法特点、易...
-
Python爬虫代码：探索网络数据的利器
在数字化时代，互联网如同一个巨大的信息库，蕴藏着无数有价值的数据。为了有效地从这些海量的信息中提取所需数据，爬虫技术应运而生。Python，作为一种简洁、易读且功能强大的编程语言，已成为实现网络爬虫的首选工具。本文将深入探讨Python爬虫的基本原理、应用...
-
基于Python的直播数据采集与分析
随着网络技术的飞速发展和直播行业的蓬勃兴起，直播已成为现代社交娱乐的重要组成部分。无论是游戏直播、教育直播还是娱乐直播，其内容多样性和实时互动性都吸引了大量用户的关注。在这一背景下，直播数据的采集与分析显得尤为重要，它不仅能够为平台运营者提供用户行为、流量...