-
什么是预训练Pre-training—— AIGC必备知识点，您get了吗？
Look！?我们的大模型商业化落地产品 ?更多AI资讯请??关注 Free三天集训营助教在线为您火热答疑??? 随着人工智能(AI 不断重塑我们的世界，其发展的一个关键方面已经成为现代机器学习模型的支柱:预训练。在本篇文章中，我们将探讨预训练的概...
-
[AIGC] Nacos：一个简单 yet powerful 的配置中心和服务注册中心
Nacos（Naming and Configuration Service）是一个开源 and 免费的配置中心 and 服务注册中心，它可以用来管理 and 控制微服务应用程序的配置和服务。Nacos 是一个可扩展的、可靠的 and 高性能的平台，支持...
-
本地部署 Stable Diffusion（Mac 系统）
在 Mac 系统本地部署 Stable Diffusion 与在 Windows 系统下本地部署的方法本质上是差不多的。 一、安装 Homebrew Homebrew 是一个流行的 macOS （或 Linux）软件包管理器，用于自动下载、编...
-
[AIGC 大数据基础] 大数据流处理 Kafka
在当今信息时代，我们生活在一个数据爆炸的世界中。大数据处理已成为各行各业中不可或缺的一部分。在大数据处理的过程中，流处理变得越来越重要，因为我们需要实时地处理和分析数据，以便做出及时的决策。在这篇博客中，我们将介绍一种流行的大数据流处理工具——Kafka，...
-
使用deepspeed继续训练LLAMA
目录 1. 数据训练配置 2. 模型载入 3. 优化器设置 4. DeepSpeed 设置 5. DeepSpeed 初始化 6. 模型训练 LLAMA 模型子结构： 1. 数据训练配置 利用 PyTorch 和 Transfo...
-
清华系2B模型杀出，性能吊打LLaMA-13B
2 月 1 日，面壁智能与清华大学自然语言处理实验室共同开源了系列端侧语言大模型 MiniCPM，主体语言模型 MiniCPM-2B 仅有 24 亿（2.4B）的非词嵌入参数量。 在综合性榜单上与 Mistral-7B 相近，在中文、数学、代码能力表现更...
-
【失业预告】生成式人工智能 (GAI)AIGC
文章目录 AIGC GAI AGI 应用 1. 计算机领域 2. 金融领域 3. 电商领域 4. C端娱乐 5. 游戏领域 6. 教育领域 7. 工业领域 8. 医疗领域 9. 法律领域 10. 农业/食品领域 11. 艺术/设计领域 来源...
-
[AIGC] 21世纪Java与Go的相爱相杀
在21世纪的软件开发领域中，Java和Go这两门编程语言可谓是相爱相杀的存在。它们各自拥有着强大的特点和独特的优势，同时也存在着一些明显的竞争和冲突。让我们来看看这两门语言的故事，以及它们之间的深远意义。 文章目录 Java的魅力...
-
2023年的深度学习入门指南(19) - LLaMA 2源码解析
2023年的深度学习入门指南(19 - LLaMA 2源码解析 上一节我们学习了LLaMA 2的补全和聊天两种API的使用方法。本节我们来看看LLaMA 2的源码。 补全函数text_completion源码解析 上一节我们讲了LLaMA 2的...
-
拼多多大模型团队招兵买马；披荆斩棘的AI博士们；淘宝双十一AIGC设计经验分享；亚马逊免费AI技能培训；Claude新版本支持200K token | ShowMeAI日报
?日报&周刊合集 | ?生产力工具与行业应用大全 | ? 点赞关注评论拜托啦！ ? 拼多多杀入大模型，年薪百万招兵买马 https://careers.pinduoduo.com/jobs 拼多多已经成立了一个数十人的...
-
谷歌官宣TensorFlow-GNN 1.0发布！动态和交互采样，大规模构建图神经网络
2005年，划时代之作「The Graph Neural Network Model」的问世，将图神经网络带到每个人面前。 在此之前，科学家处理图数据的方式是，在数据预处理阶段，将图转换为一组「向量表示」。 而CNN的出现彻底改变这种信息丢失的弊端，近2...
-
今天起，他是黄仁勋院士！2024美国工程院院士名单出炉，清华黄翊东等当选外籍院士
今天，2024年美国工程院新晋院士名单公布！ 英伟达老黄当选，除此之外，名单中还有不少华人。 根据官方介绍，美国国家工程院选出了114名新晋院士，以及21名外籍院士。这使得美国成员总数达到2310人，外籍成员总数达332人。 当选美国国家工程院院士，...
-
【AIGC扫盲】人工智能大模型快速入门
人工智能大模型的技术框架主要有以下几种： TensorFlow：这是一个由Google Brain团队开发的开源库，用于进行高性能数值计算，特别是用于训练和运行深度学习模型。TensorFlow提供了一种称为计算图的编程模型，它允许用户定义复杂的计算...
-
三篇论文解决「语义分割的优化和评估」难题！鲁汶/清华/牛津等联合提出全新方法
优化语义分割模型常用的损失有Soft Jaccard损失，Soft Dice损失和Soft Tversky损失，但它们都和软标签不兼容，所以无法支持一些重要的训练技术（例如标签平滑，知识蒸馏，半监督学习，多标注员等）。 另一方面，语义分割常用的评价指标...
-
极限挑战：使用 Go 打造百亿级文件系统的实践之旅
JuiceFS 企业版是一款为云环境设计的分布式文件系统，单命名空间内可稳定管理高达百亿级数量的文件。 构建这个大规模、高性能的文件系统面临众多复杂性挑战，其中最为关键的环节之一就是元数据引擎的设计。JuiceFS 企业版于 2017 年上线，经过几年的...
-
[AIGC 大数据基础] 浅谈hdfs
HDFS介绍 什么是HDFS？ HDFS（Hadoop Distributed File System）是Apache Hadoop生态系统的一部分，是一个分布式文件系统。它被设计用于存储和处理大规模数据集，并且能够容错、高可靠和高性能地处理文...
-
解读顺网算力与AI，破局AIGC落地“最后一公里”
全球知名AI科学家吴恩达和李飞飞在CES 2024上预测，2024年将是AI技术继续深化的一年，将成为下一次数字或工业革命真正的变革性驱动力。吴恩达还预测了2024年AI可能的突破性进展，其中包括边缘AI。吴恩达对边缘AI寄予厚望，他认为在笔记本电脑、PC...
-
【部署LLaMa到自己的Linux服务器】
部署LLaMa到自己的Linux服务器 一、官方方法（知道就好，具体操作用不上这个） 1、Llama2 项目获取 方法1：有git可以直接克隆到本地 方法2：直接下载 2、LLama2 项目部署 3、申请Llama2许可 4、下载模型权重...
-
本地部署Stable Diffusion教程，详细教学，已安装成功，无科学上网版
前言 本篇文章参考多篇文章汇聚而成，安装遇到问题多半因为网络和环境问题，整理可供大家参考 一、Stable Diffusion是什么？ Stable Diffusion是一个AI 绘图软件 （开源模型），可本地部署，可切换多种模型，且新的模型和开源库...
-
RocketMQ Copilot 一款面向 Apache RocketMQ 的智能辅助运维系统
一、RocketMQ简介 ocketMQ是阿里巴巴研发的一款分布式消息中间件，后开源给Apache基金会，成为apache的顶级开源项目。它具有高性能、高可靠、高实时和分布式的特点。RocketMQ主要应用于解决应用耦合，消息分发，流量削锋等问题。...
-
云原生场景下，AIGC 模型服务的工程挑战和应对
“成本”、“性能”和 “效率”正在成为影响大模型生产和应用的三个核心因素，也是企业基础设施在面临生产、使用大模型时的全新挑战。AI 领域的快速发展不仅需要算法的突破，也需要工程的创新。 01 大模型推理对基础设施带来更多挑战 首先，AI 商业化的时代，...
-
什么情况下会出现Redis的内存溢出问题？有哪些解决方法？
Redis内存溢出问题通常是由以下几种情况引起的： 数据量过大：如果Redis中存储的数据量超过了服务器可用内存的限制，就会导致内存溢出问题。这可能是因为业务量增长、存储的数据类型变多或者数据量突然增加而导致的。 内存碎片化：Redis使用内存分配器来管...
-
百度交了份“大”作业：文心一言用户破1亿，累计37亿字文本创作，能力再升32%！...
金磊 发自 凹非寺量子位 | 公众号 QbitAI 今年国产大模型的最后一声枪响，属于百度： 发布仅2个月，文心大模型4.0，能力又提升了32%。 文心一言用户规模超过1个亿！ 这便是在深度学习“春晚”——WAV...
-
云端车端MapNeXt全搞定！面向下一代在线高精地图构建
本文经自动驾驶之心公众号授权转载，转载请联系出处。 写在前面&笔者的个人理解 在协作、互联和自动化移动（CCAM）中，智能驾驶车辆对周围环境的感知、建模和分析能力越强，它们就越能意识到并能够理解、做出决策，以及安全高效地执行复杂的驾驶场景。高精...
-
PAI-ChatLearn ：灵活易用、大规模 RLHF 高效训练框架（阿里云最新实践）
PAI-ChatLearn 是阿里云机器学习平台 PAI 团队自主研发的，灵活易用、大规模模型 RLHF 高效训练框架，支持大模型进行 SFT（有监督指令微调）、RM（奖励模型）、RLHF（基于人类反馈的强化学习）完整训练流程。PAI-ChatLear...
-
.NET应用国际化-AIGC智能翻译+代码生成
?作者：科技、互联网行业优质创作者 ?专注领域：.Net技术、软件架构、人工智能、数字化转型、DeveloperSharp、微服务、工业互联网、智能制造 ?欢迎关注我（Net数字智慧化基地），里面有很多高价值技术文章，是你刻苦努力也积累不到的经验，能助你快...
-
[AIGC大数据基础] Spark 入门
大数据处理已成为当代数据领域的重要课题之一。为了高效地处理和分析大规模数据集，许多大数据处理引擎应运而生。其中，Spark作为一个快速、通用的大数据处理引擎备受关注。 本文将从“是什么、怎么用、为什么用”三个角度来介绍Spark。首先，我们会详细探讨...
-
AI在工业物联网（IIoT）中的安全管理与应用
作者 | 陈峻 审校 | 重楼 在开放的工业互联网环境中，数百万个基于物联网的终端和中间设备，需要全天候地持续通信并保持在线状态。不过，这些设备往往由于最初设计上的限制，在机密性、完整性、可用性、扩展性、以及互操作性上，存在着各种安全漏洞与隐患。与此同时...
-
LLaMA Efficient Tuning
文章目录 LLaMA Efficient Tuning 安装 数据准备 浏览器一体化界面 单 GPU 训练 train_bash 1、预训练 pt 2、指令监督微调 sft 3、奖励模型训练 rm 4、PPO 训练 ppo 5、DPO 训练...
-
Midjourney V6更新解读与侵权风险警告；AI Agent智能体创业必读；高清图解Mixtral和MoE；2023年度AI设计实践报告 | ShowMeAI日报
?日报&周刊合集 | ?生产力工具与行业应用大全 | ? 点赞关注评论拜托啦！ ? Midjourney V6 文生图细节爆炸，但是被扒叠图电影画面？ 左图提示词：a full body editorial santa ho...
-
快速上手的AI工具-文心一言辅助学习
前言 大家好晚上好，现在AI技术的发展，它已经渗透到我们生活的各个层面。对于普通人来说，理解并有效利用AI技术不仅能增强个人竞争力，还能在日常生活中带来便利。无论是提高工作效率，还是优化日常任务，AI工具都可以扮演关键角色。 上一篇文章整理了 《快速上...
-
用AIGC生成大数据教程
编写一部大数据教程的书 当然，我很高兴帮助您编写一部大数据教程的书。下面是一个基本的大纲，您可以根据自己的需要和偏好进行调整和扩展。 目录 第一章：引言 介绍大数据的概念和重要性 解释为什么大数据在当今世界中如此关键 第二章：大数据基础知识...
-
人工智能时代：让AIGC成为你的外部智慧源（文末送书）
?个人主页：聆风吟?系列专栏：数据结构、网络奇遇记?少年有梦不应止于心动，更要付诸行动。 文章目录 ?前言 一. 什么是AIGC? 二. AIGC如何运作？ 2.1 步骤一：收集数据 2.2 步骤二：模型训练 2.3 步骤三：内容生成...
-
2023 ACM Fellow颁给图灵三巨头！清华马维英、微软高剑峰、上交大陈海波等14位华人当选
2023 ACM Fellow揭榜了！ 刚刚，美国计算机协会（Association for Computing Machinery）正式宣布了，2023年当选ACM Fellow的68位成员。 值得一提的是，今年图灵奖三巨头、万维网之父纷纷入选。 新晋...
-
《幻兽帕鲁》爆火，大厂坐不住了：这游戏是AI设计的？
最近，很多社交网络平台都被一款开放世界生存游戏刷了屏。 《幻兽帕鲁》（Palworld）是当下最热门的话题之一，它在1月19日于 Steam 上线抢先体验版本，24小时之内销量就超过了200万份，几天之内就突破了600万。 在1月23日，幻兽帕鲁的 Ste...
-
人工智能教程（六）：Keras 和第一个数据集
在本系列的 上一篇文章中，我们学习了使用 Anaconda，加强了概率论的知识。在本文中我们将继续学习概率论的知识，学习使用 seaborn 和 Pandas 进行数据可视化，并进一步介绍 TensorFlow 和 Keras 的使用。 让我们从增长人...
-
大模型推理速度飙升3.6倍，「美杜莎」论文来了，贾扬清：最优雅加速推理方案之一
如你我所知，在大型语言模型（LLM）的运行逻辑中，随着规模大小的增加，语言生成的质量会随着提高。不过，这也导致了推理延迟的增加，从而对实际应用构成了重大挑战。 从系统角度来看，LLM 推理主要受内存限制，主要延迟瓶颈源于加速器的内存带宽而非算术计算。这一...
-
GitHub 数据库 15 年进化史：幕后英雄如何成就 Copilot 传奇
自 2008 年成立以来，GitHub 的数据库系统经历了多次重大的演变，以适应不断增长的用户基础和不断变化的技术需求。GitHub 一直使用 MySQL 数据库，其中保存了除了 git 代码仓库以外的其他所有元数据，诸如用户，issue，PR， Gist...
-
网络安全人士必知的AI专业术语
随着人工智能的迅猛发展，我们正置身于第四次工业革命的浪潮中。在这个数字化的时代，网络安全成为各行业至关重要的议题。作为网络安全从业人员，不仅需要熟练掌握传统安全领域的知识，更需要深刻理解和运用人工智能，以在风云变幻的网络战场中保护信息资产。人工智能不仅为...
-
能源的未来：虚拟发电厂能否加速能源转型？
根据Copernicus Climate Change Service的数据，2023年不仅是有记录以来最热的一年，而且全球平均地表温度也比工业化前水平(《巴黎气候协定》承诺控制变暖的温度 高出近1.5°C。这份报告加剧了关于气候变化加速和全球变暖走...
-
OpenAI拟将ChatGPT军用？与五角大楼合作军事禁令解除，谷歌前CEO：AI会变成核弹
AI武器化？ 自大语言模型诞生以来，人们对其可能带来的影响的讨论就没停过。不过，更多人还是从普通人的视角出发，从LLM能对人们的日常工作生活带来哪些变化来思考的问题。 然而从稍微宏观一点的视角，我们就会发现LLM以及AI可能对整个社会甚至国家带来一些改变...
-
LLaMA Board: 通过一站式网页界面快速上手 LLaMA Factory
原文：https://github.com/hiyouga/LLaMA-Factory/blob/main/README_zh.md ? 加入我们的微信群。 [ English | 中文 ] LLaMA Board: 通过一站式网页界面快速上手...
-
AI对决：文心一言 VS ChatGPT 全方面比拼
目录 背景 对比环节 文章生成 GhatGPT： 文心一言： 故事编写 ChatGPT： 文心一言： 代码生成 ChatGPT： 文心一言： 技术教学 ChatGPT： 文心一言： 评价环节 背景 ...
-
ICLR'24无图新思路！LaneSegNet：基于车道分段感知的地图学习
写在前面&笔者的个人理解 地图作为自动驾驶系统下游应用的关键信息，通常以车道或中心线表示。然而，现有的地图学习文献主要集中在检测基于几何的车道或感知中心线的拓扑关系。这两种方法都忽略了车道线与中心线的内在关系，即车道线绑定中心线。虽然在一个模型中...
-
GPT-4，大增长时代的序幕
作者｜成诚 虽然我们早在 2017 年就预测了超大模型的到来，因此才搞了分布式深度学习框架 OneFlow（github.com/Oneflow-Inc/oneflow/），且 2020 年的 GPT-3 也掀起了大模型热潮（OneFlow...
-
重整并领先：数字和AI领导者正在把其他人甩在后面
数字和AI领先者与其他行业参与者之间拉开的差距很大，而且还在变得更大。在过去的三年里，领导者和落后者在数字和AI成熟度方面的差距增加了60%。 这一发展与许多公司迄今经历的数字和AI转型的平淡无奇的结果形成了令人信服的对比。早些时候的研究表明，尽管进行...
-
GPT-4、百度文心一言摆擂，AI大模型将掀起新一轮AIGC军备竞赛？
科技云报道原创。 一觉醒来，万众期待的GPT-4来了。OpenAI老板Sam Altman直接开门见山地介绍说：“这是我们迄今为止功能最强大的模型！”仅隔一天，“中国版ChatGPT”百度文心一言正式发布，双方大有摆擂之势。 当深度学习推动AI技术...
-
数据计算任务工具Fluid在AIGC模型推理场景中的优化方案
Fluid的介绍 Fluid是一个在Kubernetes环境中编排数据和使用数据的计算任务的工具。它的编排不仅涉及空间上的优化，还包括时间上的调度。从空间角度看，计算任务会优先被分配到存有缓存数据或靠近缓存的节点上，从而提升数据密集型应用的性能。从时间角...
-
OpenVINO异步Stable Diffusion推理优化方案
文章目录 Stable Diffusion 推理优化 背景 技术讲解： 异步优化方案思路： 异步推理优化原理 OpenVINO异步推理Python API...
-
检测文本是否由AI生成，GPT、文心一言等均能被检测
背景 目前很多机构推出了ChatGPT等AI文本检测工具，但是准确率主打一个模棱两可，基本和抛硬币没啥区别。 先说结论，我们对比了常见的几款AI检测工具，copyleaks检测相比较而言最准确。 检测文本 AI文本片段1 来源：GPT3.5 提...