-
标题：探索AI绘画：使用深度学习生成艺术
正文： 随着计算机技术的发展，人工智能在各个领域取得了显著的成果。 通过训练深度学习模型，AI可以学习大量的艺术作品，从而生成具有独特风格和创意的新作品。 本文将介绍如何使用Python和TensorFlow实现一个简单的AI绘画程序。...
-
[AIGC] 用幂等性解决重复消息问题
在构建分布式系统时，开发人员经常会遇到重复消息问题。这可能是由于网络延迟、系统故障或其他原因导致的。无论如何，重复消息会导致系统出现错误和不一致状态。为了解决这个问题，我们可以使用幂等性来确保系统的可靠性和一致性。 文章目录 什...
-
GitHub突破1000星！上交、清华开源个性化联邦学习算法库PFLlib
想了解更多AIGC的内容，请访问： 51CTO AI.x社区 https://www.51cto.com/aigc/ 我们在 GitHub 上开源了一个个性化联邦学习算法仓库（PFLlib），目前已经获得 1K+ 个 Star 和 200+ 个 Fork...
-
爬虫原理及反爬虫技术
对于大数据行业，数据的价值不言而喻，在这个信息爆炸的年代，互联网上有太多的信息数据，对于中小微公司，合理利用爬虫爬取有价值的数据，是弥补自身先天数据短板的不二选择，本文主要从爬虫原理、架构、分类以及反爬虫技术来对爬虫技术进行了总结。 1、爬虫技术概述...
-
LLaMA 模型中的Transformer架构变化
目录 1. 前置层归一化（Pre-normalization） 2. RMSNorm 归一化函数 3. SwiGLU 激活函数 4. 旋转位置嵌入（RoPE） 5. 注意力机制优化 6. Group Query Attention 7. 模型...
-
马斯克突发Grok 1.5！上下文长度至128k、HumanEval得分超GPT-4
就在刚刚，马斯克Grok大模型宣布重大升级。 难怪之前突然开源了Grok-1，因为他有更强的Grok-1.5了，主打推理能力。 来自xAI的官方推送啥也没说，直接甩链接。主打一个“字少事大” 图片 新版本Grok有啥突破？ 一是上下文长度飙升，从8192...
-
[AIGC] MySQL与PostgreSQL：两种流行的数据库系统的对比
数据库是存储和查询数据的重要工具。在选择数据库时，两个经常被考虑的选项都是开源的：MySQL和PostgreSQL。这两个数据库都与许多应用程序一起使用，但它们在某些方面存在显著的不同。在本文中，我们将比较MySQL和PostgreSQL的一些关键特性。...
-
【AIGC调研系列】Grok大模型与其他模型相比的优势和劣势
Grok大模型与其他模型相比，具有以下优势和劣势： 优势： 实时了解世界的能力：Grok能够通过X平台实时了解世界，这是其独特而根本的优势之一[2][6][17]。这意味着Grok能够在回答问题时提供最新的信息和数据。 处理尖锐问题的能力：Gro...
-
AIGC时代的数字化转型核心 Springboot集成数据治理神器
大数据Hadoop 生态的三大部件的目录 往期热门专栏回顾 前言 1、HDFS 2、Yarn 3、Hive 4、HBase 4.1．特点 4.2．存储 5、Spark及Spark Streaming 关于作者 往期热门专栏回顾...
-
[AIGC] 探索消息队列事务
探索消息队列事务 消息队列(Transaction 被广泛地应用在分布式系统中，它可提供一种异步通信机制，在多个独立组件间传递消息。然而，消息处理的正确性和一致性是构建高效、可用的分布式系统的关键。继续阅读，以了解消息队列事务的概念和重要性。 什么...
-
探索人工智能与操作系统设计的交集
人工智能(AI 和操作系统(OS 代表了现代计算的两大基石。 随着技术的进步，人工智能和操作系统设计之间的合作变得越来越重要。这篇文章的主要目的是探索这两个领域之间的共生关系，研究人工智能如何影响操作系统设计，反之亦然。我们将研究人工智能和操作...
-
开源11天，马斯克再发Grok-1.5！128K代码击败GPT-4
Grok-1官宣开源不过半月，新升级的Grok-1.5出炉了。 刚刚，马斯克xAI官宣，128K上下文Grok-1.5，推理能力大幅提升。 并且，很快就会上线。 11天前，Grok-1模型的权重和架构开源，展示了Xai在去年11月之前取得的进展。 Gr...
-
AI武器化成为地下论坛的热门话题
传统上，驱动式攻击被定义为从受损网站自动下载恶意文件而无需用户交互。然而，在报告期间审查的大多数情况中，都涉及用户操作——在近30%的事件中促进了初始访问。 威胁行为者用AI自动化攻击 在主要的网络犯罪论坛中，使用AI加速这些攻击正受到越来越多...
-
Grok-1.5官网体验入口 马斯克xAI最新超长文本模型使用地址
当地时间 3 月 28 日，人工智能初创公司xAI宣布即将推出Grok-1.5模型，该模型具有长语境理解和高级推理能力。不久后，Grok-1.5将向X平台的用户和早期测试者开放。 Grok-1.5是一种先进的大型语言模型，具有出色的长文本理解和推理能力。它...
-
X AI 发布Grok-1.5更新：性能显著提升 支持128K上下文长度
昨天，X AI 发布了其最新的大型语言模型更新——Grok-1.5。该版本在编码和与数学相关的任务中表现出了显著的性能提升。 据详细介绍，Grok-1.5在 MATH 基准测试中获得了50.6%的分数，在 GSM8K 基准测试中获得了90%的分数，这标志着...
-
八个塑造网络防御未来的网络安全预测
由于个人法律风险敞口，预计全球100家企业中的三分之二将向网络安全领导人提供董事和高级管理人员保险。此外，与虚假信息作斗争预计将花费企业超过5000亿美元。 随着我们开始超越GenAI的可能，出现了帮助解决一些长期困扰网络安全的问题的坚实机会，特别是技...
-
llama factory学习笔记
模型 模型名 模型大小 默认模块 Template Baichuan2 7B/13B W_pack baichuan2 BLOOM 560M/1.1B/1.7B/3B/7.1B/176B query_key_value - BLOOM...
-
【在线回放】NVIDIA GTC 2024 大会 | 如何降低 AI 工程成本？蚂蚁从训练到推理的全栈实践
本文内容来源于蚂蚁集团 AI Infra部门负责人张科，在 GTC 2024 大会 China AI Day 线上专场的演讲。在演讲中张科分享了 AI 工程当前的现状和主要挑战，以及蚂蚁集团在 AI 工程领域的实践经验和开源项目，也欢迎 AI 工程领域的同...
-
AI和6G：构建自给自足的安全网络
在技术快速进步的时代，人工智能(AI 和即将推出的第六代(6G 无线通信技术的融合，有望彻底改变我们感知网络和与网络交互的方式。随着互连设备的激增，以及对高速、低延迟连接的需求不断增加，自我维持和安全网络的发展已成为首要关注的问题。本文将深入探讨人工智能...
-
突发！Stability AI的CEO，跑路了
生成式 AI 的明星创业公司 Stability AI，现在是风雨飘摇的状态。 周六上午，Stability AI 突然发布一项公告，宣布公司 CEO Emad Mostaque 辞职。 公告全文内容如下： 今天早些时候，Emad Mo...
-
AIGC时代下阿里云视频云媒体内容生产技术实践
编者按 AIGC时代下，媒体内容生产领域随着AI的出现也涌现出更多的变化与挑战。面对AI的巨大冲击，如何优化或重构媒体内容生产技术架构？在多样的应用场景中媒体内容生产技术又有着怎样的实践效果？LiveVideoStackCon2023...
-
最全总结！机器学习优化算法！
机器学习的最优化算法是用于找到最佳模型参数，以最小化预测误差的算法。这些算法通过迭代地调整模型参数，以不断改进模型的性能。 本文系统地介绍了优化算法，基本脉络是从优化的基础知识，到各种优化算法原理的介绍及代码示例，最后放上各种算法的对比及实践经验总结!...
-
数据本地性如何助力企业在云上实现高效机器学习
2.2 训练前将数据从远端拷贝到本地 另一种方案是在训练开始之前手动将数据集从远端云存储拷贝到本地磁盘/存储中。这样可以让数据位于本地，从而具备数据本地性的所有性能和成本优势。该方案的挑战主要在于数据管理。用户必须在作业完成后手动删除已拷贝的数据，为下一...
-
人工智能对数据中心电力和可持续性的双重影响
数据中心在管理电力和提高能源效率方面面临着不断升级的挑战。人工智能驱动的工作负载激增加剧了数据中心资源的压力，加剧了人们对能源消耗和环境可持续性的担忧。预计到2026年，全球数据中心的电力消耗可能会增加一倍以上。 人工智能将在数据中心中发挥的根本性转变怎...
-
ChatGPT之父Altman两小时对谈，首聊GPT-5何时发布、llya去哪里了、Q*究竟是什么……
Altman做客油管博主Lex Fridman科技博客 ，被追问了一个又一个辛辣的问题。 长达两个小时的对谈，奥特曼从OpenAI宫斗、马斯克诉讼、Sora，一直聊到AGI与外星文明！ 本文重点梳理了长对谈中的精彩部分，对于科技圈的焦点议题，奥特曼是...
-
50+国内外大模型专家齐聚，全球机器学习技术大会第二批嘉宾阵容公布！
50+ 国内外大模型重磅专家 智谱、百川、零一万物、智源、面壁智能 微软、阿里通义、小米、北大、复旦 eBay、恒生、达观、金山、度小满等 共同探讨 AI 前沿发展与落地实践 全球机器学习技术大会第二批嘉宾重磅出炉 Daniel Povey 博士毕业于英...
-
“mogublog采集插件”的功能特性及其对网络内容创作的影响
在互联网时代，内容的创作与分享已成为人们日常生活的重要组成部分。为满足不断增长的内容需求，各种内容管理系统和插件应运而生，极大地丰富了我们的网络生活。其中，“mogublog采集插件”作为一款功能强大的工具，其在内容采集和管理方面的优异表现，受到了众多网站...
-
《采集Discuz论坛：方法、技巧与注意事项》
在互联网高速发展的时代，数据采集已成为获取信息的重要途径之一。Discuz论坛作为国内知名的社区论坛软件，拥有大量的用户生成内容，对于数据分析和研究具有很高的价值。本文将详细介绍如何采集Discuz论坛的数据，包括采集方法、技巧以及需要注意的事项，帮助读者...
-
NVIDIA大语言模型落地的全流程解析
包括三部分内容： 第一部分是关于 NeMo Framework。NeMo Framework 是 NVIDIA 大语言模型的全栈解决方案，它通过不同组件完成生成式 AI 各个环节的任务，包括数据预处理、分布式训练、模型微调、模型推理加速及部署（Ten...
-
基于“瞬采discuz采集器”的内容管理与信息收集
随着互联网信息技术的迅猛发展，海量的网络资源成为人们获取知识和信息的重要途径。尤其在社交网络、论坛社区等平台中，隐藏着众多宝贵的原创内容与用户生成数据。如何高效地抓取这些数据并进行有序管理，一直是网络信息管理领域的研究热点。“瞬采discuz采集器”作为一...
-
基于Discuz论坛全站采集的数据挖掘与分析
随着互联网的迅猛发展，论坛作为信息交流和共享的平台，一直扮演着重要的角色。Discuz作为一款知名的论坛软件系统，广泛应用于各类网站和社区。全站采集是指对Discuz论坛中的各类数据进行全面抓取和整理的过程，通过这一过程，我们可以获取到论坛中的丰富信息，进...
-
2023年评选：探寻最佳Discuz论坛采集器，助力数据采集与整合
在互联网时代的浩瀚信息海洋中，论坛一直是知识分享、交流互动的重要平台。Discuz，作为一款在国内颇具影响力的论坛系统，其开放性和丰富的插件生态吸引了大量站长和用户的青睐。然而，随着大数据时代的来临，如何从Discuz论坛中高效、准确地采集信息，成为了不少...
-
基于“文章采集”的技术应用与发展趋势
随着互联网的蓬勃发展，网络上的信息呈现爆炸式增长，如何高效地从海量的网络资源中获取所需文章变得愈发重要。在这一背景下，“文章采集”作为一种重要的信息技术手段，应运而生并不断发展壮大。本文将深入探讨文章采集技术的定义、应用领域以及未来的发展趋势。一、文章采集...
-
Python爬虫采集的数据存储到HDFS的实践与探索
随着大数据时代的来临，数据的采集、存储和处理成为了许多企业和研究机构的重要工作。在这个过程中，Python爬虫因其灵活性和易用性成为了数据采集的常用工具，而Hadoop分布式文件系统（HDFS）则以其高容错性、高吞吐量的特点成为了大数据存储的首选。本文将详...
-
PHP爬虫教程：入门指南与实践精髓
在互联网信息爆炸的时代，数据的采集和处理成为了一项重要技能。PHP作为一种服务器端脚本语言，具有易用性、跨平台性和丰富的Web开发特性，使得它成为了实现网页爬虫的一个理想选择。本文将引导您逐步走进PHP爬虫的世界，从基础知识讲起，深入探讨实现技巧，助您轻松...
-
Python在网络数据采集与发布中的应用
在数字化时代，数据已经成为了一种重要的资源，而网络则是这种资源最为丰富的矿藏。Python，作为一种简洁、高效且易于上手的编程语言，已经在网络数据采集与发布领域展现出了其独特的优势。本文将详细探讨Python在网络数据采集与发布中的应用，包括其基本原理、常...
-
基于Discuz智能云采集技术的全方位内容采集与分析
随着信息技术的迅猛发展，互联网已经成为人们获取信息、交流思想的重要平台。在这个信息爆炸的时代，如何从海量的网络数据中高效、准确地采集所需内容，成为了众多企业和个人关注的焦点。Discuz智能云采集技术作为一种先进的内容采集解决方案，为用户提供了强大的数据采...
-
浅析b3log采集插件的应用与实践
在信息时代的洪流中，网络数据采集逐渐成为企业数据分析、媒体内容获取和科研机构知识储备等多样化的应用场景下，不可或缺的重要环节。特别是针对海量内容站点的信息攫取，“b3log采集插件”作为一个非常优秀的插件应时而生。通过高智能化的筛选以及方便快捷的自定义设定...
-
4万亿晶体管5nm制程，全球最快AI芯片碾压H100！单机可训24万亿参数LLM，Llama 70B一天搞定
全球最快、最强的AI芯片面世，让整个行业瞬间惊掉了下巴！ 就在刚刚，AI芯片初创公司Cerebras重磅发布了「第三代晶圆级引擎」（WSE-3）。 性能上，WSE-3是上一代WSE-2的两倍，且功耗依旧保持不变。 90万个AI核心，44GB的片上SRA...
-
基于Discuz平台的自动采集系统设计与实现
随着互联网的迅猛发展，信息呈爆炸式增长，如何从海量的信息中快速准确地获取所需内容，成为许多网站运营者和内容创作者关注的焦点。在这样的背景下，自动采集技术应运而生，它能够帮助用户高效地抓取、整合和发布网络信息。Discuz作为一款流行的社区论坛软件，拥有广泛...
-
Meta公布Llama 3训练集群细节！储备60万块H100迎接AGI
每年3月份，照例各家大厂又要开始秀自己最新的产品和研究了。 OpenAI刚刚发布了震惊世人的Sora，最新的ChatGPT版本似乎也是箭在弦上。 谷歌更是举全公司之力，从去年底就开始放出了包括Gemini Ultra，Gemini 1.5，Gemma在内...
-
Python爬虫：网络数据采集的利器
在数字化时代，互联网如同一个巨大的信息库，汇聚了世界各地的知识和数据。为了有效地从这一信息海洋中提取所需的数据，爬虫技术应运而生。Python，作为一种简洁、易读且功能强大的编程语言，已成为开发网络爬虫的首选工具。本文将深入探讨Python爬虫的基本原理、...
-
图技术在 LLM 下的应用：知识图谱驱动的大语言模型 Llama Index
LLM 如火如荼地发展了大半年，各类大模型和相关框架也逐步成型，可被大家应用到业务实际中。在这个过程中，我们可能会遇到一类问题是：现有的哪些数据，如何更好地与 LLM 对接上。像是大家都在用的知识图谱，现在的图谱该如何借助大模型，发挥更大的价值呢？ 在本...
-
PHP后台数据采集技术深入解析
在数字化时代，数据的重要性日益凸显。无论是大型企业还是个人开发者，都需要从各种来源获取数据以支持业务决策、优化用户体验或进行市场分析。PHP作为一种流行的服务器端脚本语言，在数据采集方面发挥着重要作用。本文将深入探讨PHP后台数据采集的原理、方法、挑战及最...
-
Meta两个豪华AI集群曝光：每个配备2.4万块英伟达H100，价值几十亿
3月13日消息，美国时间周二，Facebook母公司Meta公布了两个数据中心规模新集群的技术细节，它们各自拥有超过2.4万个GPU，并在硬件、网络、存储、设计、性能和软件等方面上，专为支持大型语言模型如Llama 3进行训练而深度优化。 这两个新集群基...
-
“BuildAdmin采集插件：提升构建管理效率的利器”
在当今软件开发行业中，随着项目复杂性的不断增加，构建管理成为了一个至关重要的环节。为了提高构建过程的效率和可维护性，各种工具和插件应运而生。其中，“BuildAdmin采集插件”凭借其强大的功能和灵活性，在众多工具中脱颖而出，成为了提升构建管理效率的利器。...
-
Llama-3背后基础训练设施全揭秘：两个24KGPU集群，共4.9万个H100
作者丨Kevin Lee、Adi Gangidi、Mathew Oldham 编译丨诺亚 出品 | 51CTO技术栈（微信号：blog51cto） 日前，Meta在官网公布了两个全新的24K H100 GPU集群（49,152个），并就新集群的技术细节...
-
专为训练Llama 3，Meta 4.9万张H100集群细节公布
生成式大模型给人工智能领域带来了重大变革，人们在看到实现通用人工智能（AGI）希望的同时，训练、部署大模型的算力需求也越来越高。 刚刚，Meta 宣布推出两个 24k GPU 集群（共 49152 个 H100），标志着 Meta 为人工智能的未来做出了...
-
探索数据科学对机器人的影响
数据驱动的感知: 数据科学彻底改变机器人技术的关键领域之一是感知。配备了传感器、摄像头和其他数据收集机制的机器人会产生大量有关其环境的数据。数据科学技术，包括计算机视觉、传感器融合和深度学习，使机器人能够解释和理解这些数据，促进强大的感知能力。从物体识...
-
基于“小说采集源码”的网络文学资源获取与分析
随着互联网的飞速发展，网络文学作为一种新兴的文学形式受到了广大读者的热烈欢迎。其中，小说作为网络文学的重要组成部分，凭借其多样性和丰富的故事情节吸引了众多爱好者的关注。为了获取这些网络小说资源，并进行有效的整理和利用，“小说采集源码”应运而生。本文将围绕“...