-
llama_index，一个超强的 Python 库！
更多资料获取 ? 个人网站：ipengtao.com 大家好，今天为大家分享一个超强的 Python 库 - llama_index。 Github地址：https://github.com/run-llama/llama_index 在信息...
-
甲骨文首次将LLMs引入数据库，集成Llama 3和Mistral，和数据库高效对话
信息时代，数据为王。数据库作为数据存储&管理的一种方式，正在以势不可挡的趋势与AI结合。 前有OpenAI 收购了数据库初创公司 Rockset，引发广泛关注；Oracle公司（甲骨文）作为全球最大的信息管理软件及服务供应商，近日发布新产品Hea...
-
大模型真的在吞噬人类的一切数据吗？
在弗兰克·赫伯特的《沙丘》中，沙漠星球厄拉科斯的沙丘下隐藏着一种无价之宝:香料。 这种神秘物质使太空旅行成为可能，能延长寿命，并具有扩展意识的效果，是宇宙中最宝贵的财富。“谁控制了香料，谁就控制了宇宙”。正如香料在《沙丘》宇宙中占据着至关重要的地位一样，在...
-
AI 技术创新可以有多硬核？ GOTC 2024 论坛议程抢先看
8 月 15 日至 16 日，GOTC 2024 将在上海张江科学会堂盛大开启。GOTC 2024 与上海浦东软件园联合举办，并结合 “GOTC（全球开源技术峰会）” 与 “GOGC（全球开源极客嘉年华）”，旨在打造一场全新的开源盛会。2024 全球开源极...
-
深度解读昇腾CANN多流并行技术，提高硬件资源利用率
本文分享自华为云社区《深度解读昇腾CANN多流并行技术，提高硬件资源利用率》，作者：昇腾CANN。 随着人工智能应用日益成熟，文本、图片、音频、视频等非结构化数据的处理需求呈指数级增长，数据处理过程从通用计算逐步向异构计算过渡。面对多样化的计算需求，昇腾...
-
CIO应重点关注的领域，以维持GenAI的势头
GenAI仍然是大多数企业的首要投资重点，而且期望值很高。根据普华永道的最新调查，美国61%的CEO预期AI将改变他们的业务价值生成方式，但要实现这一目标，企业必须将AI的炒作转化为现实。 好消息是，他们在这方面越来越擅长。事实上，根据Databric...
-
【AIGC调研系列】浙大&蚂蚁OneKE大模型知识抽取框架是什么
浙大&蚂蚁OneKE大模型知识抽取框架是由蚂蚁集团和浙江大学联合研发的，它是一个具备中英文双语、多领域多任务泛化知识抽取能力的大模型知识抽取框架。OneKE不仅提供了完善的工具链支持，还以开源形式贡献给了OpenKG开放知识图谱社区[1][2][3...
-
如何利用生成式AI提高供应链弹性？
工业部门和全球供应链正在经历前所未有的时代。从全球新冠疫情爆发到地缘政治动荡，制造业的传统观念正在受到挑战，为了更好地适应新的变化，制造企业需要重新评估一些长期存在的做法。 最近的一个例子凸显了行业供应链重新评估的必要性：海运价格受红海危机的影响持续上...
-
大模型风起云涌，向量数据库终有“用武之地”？
每逢淘金热，最后的赢家都是卖铲人，而非淘金者。在近两年的大模型风口下，向量数据库就成了这把铲子。 随着大模型快速发展，向量数据库正在成为企业便捷使用大模型、最大化发挥数据价值的关键工具。据IDC调查数据显示，全球在AI技术和服务上的支出2023年将达到...
-
深入解析“iwebmall爬虫”：原理、应用与风险
在当今的大数据时代，爬虫技术作为一种自动化数据抓取与处理的工具，已逐渐渗透到各个行业领域。其中，“iwebmall爬虫”凭借其高效稳定的特点，在数据抓取与分析领域异军突起，备受关注。本文将从爬虫的基本原理出发，深入探讨iwebmall爬虫的工作机制、应用场...
-
“交响曲中的爬虫乐章：探索Symphony爬虫的奇妙世界”
在数字化时代的浪潮中，爬虫技术正如一首交响曲中的独特乐章，以其独特而复杂的旋律，引领我们深入数据的海洋。本文将以“Symphony爬虫”为主题，探索这一技术领域的内涵、应用及其未来发展。一、Symphony爬虫的概念和简介在探讨Symphony爬虫之前，我...
-
利用大语言模型增强网络抓取：一种现代化的方法
想了解更多AIGC的内容，请访问： 51CTO AI.x社区 https://www.51cto.com/aigc/ 本文将探讨大语言模型(LLMs 与网络抓取的集成，以及如何利用LLMs高效地将复杂的HTML转换为结构化的JSON。 作为一名数据工程...
-
通透！如何选择合适的机器学习算法
算法选择注意事项 为任务选择正确的机器学习算法涉及多种因素，每个因素都会对最终决策产生重大影响。以下是决策过程中需要牢记的几个方面。 1.数据集特征 数据集的特征对于算法的选择至关重要。数据集的大小、包含的数据元素的类型、数据是结构化的还是非结构化的等...
-
一文读懂 GPT-4o vs GPT-4 Turbo
Hello folks，我是 Luga，今天我们来聊一下人工智能(AI 生态领域相关的技术 - GPT-4o 模型 。 在 2024 年 5 月 13 日，OpenAI 创新性地推出了其最先进、最前沿的模型 GPT-4o，这是标志着人工智能聊天机器人...
-
众大采集智能云爬虫：革新数据搜集与分析的先锋利器
在当今信息爆炸的时代，数据已成为各行各业不可或缺的资源。从商业决策到科研探索，从市场营销到社会治理，数据的获取与分析能力直接关系到竞争力的提升与创新的步伐。然而，海量数据的采集和整理往往耗时耗力，且难以保证准确性和时效性。“众大采集智能云爬虫”应运而生，以...
-
爬取CSDN博客的实践与探索
在当今信息爆炸的时代，数据作为一种重要的资源，已经渗透到各行各业。为了获取大量的数据，爬虫技术应运而生，它能够帮助我们高效地收集网络上的信息。CSDN（Chinese Software Developer Network，中国软件开发者网络）作为国内知名的...
-
探秘ThinkCMF爬虫：技术原理、应用与未来趋势
在数字化信息时代，网络爬虫作为一种自动化数据采集工具，正日益受到人们的关注。ThinkCMF作为一款基于ThinkPHP+MYSQL的内容管理框架（CMF），其灵活性和扩展性使得针对它的爬虫技术也颇具研究价值。本文将深入探讨ThinkCMF爬虫的技术原理、...
-
数据库为啥要融合＋AI化？甲骨文Oracle 23ai给出了回答
2017年，一篇名为《Attention is All You Need》的论文提出了一种新的神经网络架构: Transformer。七年后，Transformer成为了生成式AI的核心，正引领着今天的技术浪潮。 在甲骨文公司副总裁及中国区董事总经理吴...
-
OPPO 下一代大数据 AI 一体架构实践
一、技术架构 OPPO 大数据场景丰富，拥有海外的 AWS 功能云，国内自建机房，机器规模超过万台，在印度则是使用混合云模式。 首先来介绍一下 AWS 上功能云 EMR 的实践。 1. 云原生计算架构 OPPO 早期全部采用 EMR，其存在以下一些问题...
-
人工智能的非结构化数据管理
Komprise为开发人员和架构师提供人工智能、多云和合规性的非结构化数据管理，以推动创新。 随着非结构化数据量以前所未有的速度持续增长，组织在管理这些数据的同时，要控制成本，并为人工智能和机器学习应用程序提取价值，这将面临新的挑战。最近，Kompri...
-
算法在 58 画像平台建设中的应用
一、58 画像平台建设背景 首先和大家分享下 58 画像平台的建设背景。 1. 传统的画像平台 传统的思路来看，建设用户画像平台依赖数仓建模能力，整合多业务线数据，构建准确的用户画像；还需要数据挖掘，理解用户行为、兴趣和需求，提供算法侧的能力；最后，...
-
图灵诺奖得主等大佬齐聚海淀！清华版Sora震撼首发，硬核AI盛会破算力黑洞
中关村论坛举办以来的首个主题日活动：「人工智能主题日」今日开启！ 到场嘉宾，也是星光熠熠，大佬云集，还有着浓浓的国际范儿，与世界顶尖水平接轨。 一共161位嘉宾，近一半是外籍AI大佬和从业者。 而嘉宾阵容也是非常豪华，汇集了国内外30多名院士，还有诺奖、...
-
揭开大型语言模型(LLM)的力量：初创企业如何通过精简集成彻底改变运营方式
大型语言模型(LLM 已成为各种规模企业的游戏规则改变者，但它们对初创企业的影响尤其具有变革性。为了理解其中的原因，让我们来看看初创企业相对于老牌企业有哪些优势，以及为什么AI是它们的重要推动力。 初创企业往往面临预算有限、时间紧迫的局面，即便它们争夺...
-
生成式AI技术如何帮助零售供应链抵御冲击？
当下，零售商正面临与几年之前截然不同的经济环境与地缘政治挑战。以当前的红海危机为例，据摩根大通介绍，全球30%的集装箱须经过苏伊士运河，而当地发生的运输延误正在破坏全球供应链的正常运转。 未来几个月内，全球贸易面临的全面威胁还将进一步升级。而且已经有部...
-
Python爬虫-数据采集和处理
文章目录 数据 数据类型 数据分析过程 数据采集 数据采集源 数据采集方法 数据清洗 清洗数据 数据集成 数据转换 数据脱敏 数据 《春秋左传集解》云：“事大大其绳，事小小其绳。”体现了早期人类将事情的“大小”这一性质抽象...
-
情境智能：数据分析的下一个前沿
情境智能概述 情境智能是一种人工智能技术，旨在使计算机系统能够理解和适应于不同情境下的环境、用户需求和目标。它涉及到对语境、背景知识和用户意图的理解，并基于这些理解来做出智能决策或提供个性化的服务。 情境智能通常涉及以下几个方面： 自然语言处理(NLP...
-
RAG 修炼手册｜RAG 敲响丧钟？大模型长上下文是否意味着向量检索不再重要
Gemini 发布后，由于其在处理长上下文方面表现出色，行业不乏“RAG 已死”的声音。RAG 到底有没有被杀死？向量数据库的还是 AI 应用开发者的最佳拍档吗？本文将一起探讨。 01.Gemini 发布后 AIGC 的迭代速度正以指数级的速度增长。G...
-
应对生成人工智能的挑战，数据治理要如何发展？
最近想到了数据治理，所以我决定通过输入提示来查询ChatGPT：“什么是数据治理？” AI 回应道：“数据治理是一组流程、政策、标准和指南，可确保数据在组织内得到正确管理、保护和利用。”这是一个好的开始，目前关于数据治理及其意义还有很多话要说。 生成人...
-
一文读懂大型语言模型微调技术挑战与优化策略
Hello folks，我是 Luga，今天我们继续来聊一下人工智能(AI 生态领域相关的技术 - LLM Fine-Tuning ，本文将继续聚焦在针对 LLM Fine-Tuning 技术进行剖析，使得大家能够了解 LLM Fine-Tuning...
-
《yzncms采集插件：提升内容管理效率的强大工具》
在当今信息爆炸的时代，内容的采集与管理对于任何一个网站或媒体平台都至关重要。无论是新闻网站、电商平台还是企业官网，都需要不断地更新内容以吸引用户并保持其活跃度。然而，手动进行内容采集和更新不仅效率低下，而且容易出错。为了解决这一问题，许多内容管理系统（CM...
-
易通cms采集插件：提升内容管理效率的利器
在数字化时代，内容管理系统（CMS）已成为各类网站和应用程序不可或缺的一部分。易通CMS作为一款功能强大的内容管理系统，广受用户好评。其中，易通CMS采集插件更是这款系统中的一颗璀璨明珠，它极大地提升了内容采集和管理的效率。本文将深入探讨易通CMS采集插件...
-
PHPWind论坛采集技术的深入探索与实践
随着互联网信息量的急速膨胀，各类网络社区、论坛逐渐成为人们获取与交换信息的重要平台。作为其中之一，PHPWind论坛以其稳定的性能、丰富的功能和良好的用户体验赢得了广泛好评。然而，如何在这样海量的信息中高效地进行数据采集、分析和应用，已成为摆在不少开发者和...
-
SAP公布大量生成式AI新功能 增强Datasphere平台
SAP正在推出大量的生成式AI新功能，并且这些功能将很快在SAP Datasphere平台中提供。 SAP表示，这些更新功能将使用户能够更直观地与他们的业务数据进行交互，有助于推动更智能的业务转型。新功能包括，帮助用户自动执行各种数据分析任务的copi...
-
谷歌云数据库增加更多人工智能功能
谷歌云正在加强其分析和事务数据库，包括BigQuery, AlloyDB和Spanner，旨在推动其客户生成人工智能应用程序的开发。 BigQuery是谷歌云的顶级数据库，用于支持分析和人工智能工作负载，它开发了几项人工智能增强功能。首先，该公司推出了...
-
基于Discuz论坛的数据采集技术与应用探讨
随着互联网的迅猛发展，网络论坛作为信息交流和信息共享的重要平台，承载着大量用户生成的内容。这些内容涉及各个领域的知识和观点，具有很高的研究和利用价值。Discuz作为一款广泛使用的论坛软件系统，其数据采集技术对于信息获取、数据挖掘以及舆情分析等领域都具有重...
-
“狂人采集器discuz版”的深度解析与应用探索
在当今信息爆炸的时代，如何从海量的数据中快速、准确地提取所需信息，成为了众多行业和个人面临的一大挑战。而“狂人采集器discuz版”作为一款高效、便捷的信息采集工具，在这个背景下应运而生，为用户提供了强大的数据采集和整合能力。一、狂人采集器discuz版的...
-
xiunobbs采集技巧与最佳实践
由于“xiunobbs采集”似乎是一个特定的主题或术语，但在我的训练数据中没有明确的上下文或广泛认可的定义，因此我将根据一般的理解和可能的应用场景来构建这篇文章。请注意，这篇文章将是假设性的，并且会努力达到1500字的要求。---标题：探索xiunobbs...
-
Phpwind采集插件：提升网站内容的神器
"PHPWind采集插件：网络数据采集与整合的利器"随着互联网的快速发展，网络上的信息量呈现出爆炸式的增长。对于网站运营者来说，如何高效地获取并整合这些有价值的信息资源，成为了一项重要的挑战。在这样的背景下，PHPWind采集插件应运而生，成为了一款备受欢...
-
GenAI步步紧逼，数据治理如何进化？
作者 | Isaac Sacolick 编辑 | 言征 出品 | 51CTO技术栈（微信号：blog51cto） 数据治理涵盖一系列学科，包括数据安全、管理、质量和编目。这种做法需要定义使用策略、创建主数据源、分析数据集、记录字典以及监督数据生命周期...
-
数据治理必须如何发展才能应对GenAI的挑战
最近我想到了数据治理，所以我决定通过输入提示来查询ChatGPT：“什么是数据治理?”，人工智能回应道：“数据治理是一套流程、政策、标准和指导方针，可确保在企业内适当地管理、保护和利用数据”，这是一个很好的开始，此时此刻，关于数据治理及其意义还有很多要...
-
Chat gpt和文心一言谁最具有优势
目录 chat gpt 开发者和背景 技术和架构 应用和性能 可用性和开放性 优化和特性 它们俩谁更好用 chat gpt ChatGPT和文心一言（Ernie Bot）都是大型语言模型，但它们由不同的组织开发，基于不同的...
-
新型IT运维管理，基础设施和数据两手都要硬
AI大模型时代，数据赋予IT人“新使命” 当下IT人在企业中扮演着运营支撑的角色。说到运维管理，相信每人都是一把辛酸泪，每天承担着繁琐、高负荷且又高风险的运维工作，但在业务规划和职业发展时又成为了“透明人”。业内有句调侃的话：“只花钱的人，不配拥有发...
-
[AIGC 大数据基础] 浅谈hdfs
HDFS介绍 什么是HDFS？ HDFS（Hadoop Distributed File System）是Apache Hadoop生态系统的一部分，是一个分布式文件系统。它被设计用于存储和处理大规模数据集，并且能够容错、高可靠和高性能地处理文...
-
生成式人工智能应用中的矢量数据库
生成式人工智能凭借其制作文本、图像和音频等新内容的卓越能力，处于技术创新的前沿。 这个变革领域的核心是一个经常被忽视的部分：矢量数据库。这些数据库能够熟练地处理复杂的非结构化数据，从而激发人工智能的创造力，证明自己在这一领域的价值无可估量。 生成式人...
-
如何使人工智能真实化-从数据到智慧
如何使人工智能真实化？那要如何使人工智能真实化，从数据到智慧呢？让我们往下探究。 如何使人工智能真实化 使人工智能真实化需要考虑多个方面，包括数据、模型、算法、用户体验和道德等。以下是一些建议，帮助实现人工智能的真实化： 多样性和质量的数据：使用多...
-
《幻兽帕鲁》爆火，大厂坐不住了：这游戏是AI设计的？
最近，很多社交网络平台都被一款开放世界生存游戏刷了屏。 《幻兽帕鲁》（Palworld）是当下最热门的话题之一，它在1月19日于 Steam 上线抢先体验版本，24小时之内销量就超过了200万份，几天之内就突破了600万。 在1月23日，幻兽帕鲁的 Ste...
-
得帆信息创始人-张桐，受邀出席 BV百度风投AIGC主题论坛
近日，得帆信息创始人兼CEO张桐，作为百度风投被投代表企业创始人受邀出席“向未来，共成长” BV百度风投AIGC主题论坛。 与包括上海市徐汇区相关部门领导、百度集团相关事业部负责人及代表，以及来自国寿资本、中网投、麦顿投资的投资人、BV百度风投其...
-
报告：生成式AI将帮助 60% 的亚洲顶尖企业提高员工保留率
一份新报告显示，到2025年，大约60% 的亚洲顶级公司将升级硬件和软件技术，通过个性化工作体验和加强协作来提高员工保留率 生成式人工智能作为组织进步的游戏规则改变者而出现，在三个关键领域编织了个无缝的挂毯: 智能文档处理 （IDP） 、生成自动化和知识共...
-
2024年数据技术趋势：基础模型和机密计算
也许塑造当代数据领域的最大力量，就是基础模型的普遍存在。这些模型在生成人工智能的部署中表现得最为明显，其正在影响从外部客户交互到内部员工与数据系统的接口等各个方面。 因此，存储和检索数据、应用和从基础模型中产生价值，以及强调数据驱动流程(如数据安全和数...
-
向量数据库：AIGC时代的必备基础工具
今天分享的AIGC系列深度研究报告：《向量数据库：AIGC时代的必备基础工具》。 （报告出品方：广发证券） 报告共计：47页 点击添加图片描述（最多60个字）编辑 一、向量数据库为 AI 大模型全生命周期管理提质增效 随着AI大模型的...