-
深度解析：基于离线开发的数据仓库转型落地案例
在当今这个数据驱动的时代，各行各业都正经历着前所未有的变革。伴随技术的飞速发展，数据仓库作为企业数据管理与分析的核心，如何更好地发挥作用，助力企业保持业务的敏捷性与成本效益，成为大家关心的焦点问题。本文将通过具体案例分析，展现基于离线开发的数据仓库转型落地...
-
Datawhale X 魔搭 AI夏令营 第四期AIGC_task03笔记
工具初探一ComfyUI 认识ComfyUI ComfyUI 是"Graphical User Interface"（图形用户界面）的缩写，简单来说，GUI 就是你在电脑屏幕上看到的那种有图标、按钮和菜单的交互方式。ComfyUI 是GUI的一种，是...
-
从困境到突破，EasyMR 集群迁移助力大数据底座信创国产化
在大数据时代，企业对数据的依赖程度越来越高。然而，随着业务的不断发展和技术的快速迭代，大数据平台的集群迁移已成为企业数据中台发展途中无法回避的需求。在大数据平台发展初期，国内数据中台市场主要以国外开源 CDH、商业化 CDP、HDP 为主。然而，由于国际形...
-
Datawhale X 魔搭 AI夏令营 第四期 AIGC task3
part 1：认识comfyUI 1.初识ComfyUI 1.1什么是Comfy UI GUI是"Graphical User Interface"（图形用户界面）的缩写。简单来说，GUI 就是你在电脑屏幕上看到的那种有图标、按钮和菜单的交互方式。...
-
Datawhale X 魔搭 AI夏令营 第四期 魔搭-AIGC方向 Task03笔记
从零入门AI生图原理&实践 是 Datawhale 2024 年 AI 夏令营第四期的学习活动（“AIGC”方向），基于魔搭社区“可图Kolors-LoRA风格故事挑战赛”开展的实践学习。 Datawhale官方的速通教程链接： Task 1...
-
DataWorks Copilot：大模型时代数据开发的新范式
导读 DataWorks 是阿里云一站式智能化数据开发与治理平台，支持搭配MaxCompute/Hologres/AnalyticDB/StarRocks/EMR/CDH 等大数据引擎，为企业构建数据仓库、数据湖以及湖仓一体（Lakehouse）现代数据...
-
XSKY对象存储深度结合Alluxio分布式缓存系统，GPU利用率提高至90%以上
近日，Alluxio分布式缓存系统完成了与XSKY星辰天合的 XEOS V6.4 对象存储的兼容性测试，旨在解决数据管理和加速方面的挑战。双方进行了深度的产品对接和联合开发，将 Alluxio 分布式缓存系统与 XEOS 对象存储的众多应用特性进行结合，推...
-
分分钟完成Excel任务的十大AI工具
译者 | 布加迪 审校 | 重楼 通过无缝集成Python和各种人工智能(AI 工具，Excel的功能正在迅速发生转变，彻底改变了工作节奏。 去年，微软宣布了Python集成的公开预览版，Excel因此迎来了重大升级。这意味着开发人员和数据分析师不再需...
-
从“采集发布时间”看信息时代的速度与效率
在当今这个高速发展的信息时代，信息的采集与发布已经成为了社会生活中不可或缺的一部分。从新闻报道的实时更新，到社交媒体的即时动态，再到各种数据平台的实时分析，我们可以发现，“采集发布时间”早已成为了衡量信息价值的重要指标。它不仅仅关乎信息的时效性，更在深层次...
-
建发弘爱 X 袋鼠云：加速提升精细化、数字化医疗健康服务能力
厦门建发弘爱医疗集团有限公司（简称“建发弘爱”）创立于2022年，是厦门建发医疗健康投资有限公司的全资子公司，专业从事医疗健康领域的医疗服务。 建发弘爱通过医疗、健康及产业服务三大板块，为百姓提供医疗和健康全生命周期解决方案。以医疗机构为核心，管理及运营...
-
在线教育出海掘金，攥紧AI
当国内的在线教育进入存量争夺后，不少教育科技类公司为寻求新增长，将目光望向了海外。然而教育不同于普通商品，面对历史、人文、政治、经济差异悬殊的海外市场，虽有着巨大潜力，但实现本土化运营并非易事。 值得注意的是，由于全球化合作所衍生的“中文热”现象，海外市场...
-
数栈+AI：数栈V6.2创新发布，让数据开发更智能
近日，以“Data+AI，构建新质生产力”为主题的袋鼠云春季发布会圆满落幕，大会带来了一系列“+AI”的数字化产品与最新行业沉淀，旨在将数据与AI紧密结合，打破传统的生产力边界，赋能企业实现更高质量、更高效率的数字化发展。会上，袋鼠云数栈产品负责人偷天带来...
-
大数据 AI 一体化解读
一、AI 的“iPhone”时刻 在过去的一年中，大模型的发展非常迅速，算力和数据的堆叠使模型具备了一些通用的构造和回答问题的能力，引领人们进入了一直梦想的人工智能阶段。举个例子，在与大语言模型聊天时，会感觉面对的不是一个生硬的机器人，而是一个有血有肉的...
-
实施稳健的AI治理以实现数据民主化
根据Gartner的数据，到2026年，超过80%的企业将使用GenAI API和模型，或在生产中部署启用GenAI的应用程序，而去年这一比例不到5%。GenAI的自然语言界面允许非技术用户，从部门负责人到一线工作人员，更轻松地访问和使用数据。这...
-
端到端加速企业GenAI创新，英伟达NIM微服务成为软件企业看中的亮点！
3月20日，软件开发企业Cloudera宣布了一项重要的合作信号：要与NVIDIA一起加速生成式AI应用的部署。具体来讲，就是通过将NVIDIA的AI微服务集成到其Cloudera数据平台（CDP）中，帮助企业能够快速构建和扩展基于自身数据的定制化大型语...
-
印度宣布向 AI 领域投资 1037 亿卢比，强化对大语言模型的开发
3 月 8 日消息，印度政府宣布已批准国家级“ IndiaAI 使命”项目，旨在实现“让 AI 在印度扎根”和“让 AI 为印度服务”两大目标，预算达 1037.192 亿卢比（当前约 90.13 亿元人民币）。 据介绍，该项目将由数字印度公司（DI...
-
周鸿祎：企业应“All in AI” 建立AI信仰
快科技2月25日消息，据媒体报道，360公司创始人周鸿祎在接受采访时表示，企业想要切入AI应该首先建立AI信仰，要往All in AI”的方向走。 周鸿祎称，现在企业对AI普遍向往都比较向往，但不知道从何切入，特别是非AI企业和AI距离还比较远，对此企业应...
-
持续领跑！Oracle 自治数据库新增 AI 对话功能
编译 | 伊风 出品 | 51CTO技术栈（微信号：blog51cto） Oracle（甲骨文公司）更新了其提供的自治数据库 （Autonomous Database）产品，以继续在云数据库服务方面保持领先， 在与 AWS、Google Cloud、IB...
-
vivo 基于 StarRocks 构建实时大数据分析平台，为业务搭建数据桥梁
在大数据时代，数据分析和处理能力对于企业的决策和发展至关重要。 vivo 作为一家全球移动互联网智能终端公司，需要基于移动终端的制造、物流、销售等各个方面的数据进行分析以满足业务决策。 而随着公司数字化服务的演进，业务诉求和技术架构有了新的调整，已有的...
-
2023 亚马逊云科技中国峰会技术解读：算力、数据、AI，全面支撑 AIGC 与云上创新
编辑 | 宋慧 出品 | CSDN 云计算 亚马逊云科技每年在中国的顶级会议——2023亚马逊云科技中国峰会已经圆满落幕，今年峰会聚焦在AIGC与全球化等方面的议题，而支撑这些产品与服务的，则是亚马逊云科技十多年以来所探索、创新、积累的技术实力。在...
-
数据为王！如何通过数据一步步构建高效的自动驾驶算法？
本文经自动驾驶之心公众号授权转载，转载请联系出处。 写在前面&笔者的个人理解 下一代自动驾驶技术期望依赖于智能感知、预测、规划和低级别控制之间的专门集成和交互。自动驾驶算法性能的上限一直存在巨大的瓶颈，学术界和业界一致认为，克服瓶颈的关键在于以...
-
AIGC 大模型纷纷部署，企业如何为 AI 数据降本增效
编辑 | 宋慧 出品 | CSDN 云计算 AIGC 从年初开始持续爆火，国内各种大模型纷纷涌现，其中模型参数轻松突破千亿数量级。模型中数据的形态、部署也是多种多样的，庞大数据量背后的管理和成本不容小觑。 混合数据厂商肯睿 Cloudera...
-
肯睿中国Cloudera：数据与AI如何帮助企业“反脆弱”？
2023年，无论是个人还是企业，“脆弱“几乎是一种普遍的状态。 在全球经济经历诸多重大动荡的今天，越来越多个人和企业意识到“反脆弱“的重要性。“反脆弱“这一概念由作家尼古拉斯 · 塔勒布提出，是一个比复原力、强韧性更高阶的概念。简单来讲，反脆弱指的是在混...
-
基于AI的事件智能分析系统建设实践
一、背景 当前，随着虚拟化、云计算等新技术的广泛应用，企业数据中心内部IT基础设施规模成倍增长，计算机硬件和软件的规模不断的扩大，相应的计算机故障也频繁发生，一线运维人员迫切的需要更加专业、更加强大的运维工具。 在数据中心的日常运维工作中，一般是通过...
-
探索AIGC未来：CPU源码优化、多GPU编程与中国算力瓶颈与发展
★人工智能；大数据技术;AIGC;Turbo;DALL·E 3;多模态大模型；MLLM；LLM；Agent；Llama2；国产GPU芯片；GPU;CPU；高性能计算机；边缘计算；大模型显存占用；5G;深度学习；A100；H100；A800；H800；L40...
-
每个IT领导者都必须进行的六次艰难的AI讨论
很少有技术像AI那样引发如此多的讨论和辩论，工人、知名高管和世界领导人在对AI的赞扬和担忧之间摇摆不定。 诚然，CIO没有被传唤到国会作证，但他们正在高管套房和董事会会议室接受盘问，因为企业领导人向他们的技术主管提出了各种具有挑战性的问题，预计CIO将...
-
MongoDB携手亚马逊云科技优化Amazon CodeWhisperer建议，助力开发者在MongoDB上构建应用程序
MongoDB (NASDAQ: MDB 和亚马逊 (NASDAQ: AMZN 旗下的亚马逊云科技（AWS）今日宣布，双方正在协作优化Amazon CodeWhisperer，为在MongoDB上的应用程序开发和改进工作提供更好的建议和支持。Mongo...
-
2024年CIO的14项优先事项和趋势
GenAI将是2024年的最大技术趋势，也是董事会负责审查新工具、配置基础设施、准备应对新风险和利用新用户体验的CIO的优先事项。 这并不容易，因为大多数供应商都在添加新的GenAI功能，通常成本很高。CIO将需要为这些工具制定业务案例，以确定它们是能...
-
2024 年数据管理在人工智能中的四大趋势
在 2023 年即将结束之际，我们会发现随着 ChatGPT 的引入，世界发生了不可逆转的变化。人工智能的主流化继续以强劲势头推进，我们如何应对这些不断变化的时代需要信念的飞跃。人工智能可能同时具有潜在的变革性和不准确性！但我们的未来不仅仅是人工智能，因...
-
模型量化和边缘人工智能如何定义交互方式
人工智能与边缘计算的融合承诺为许多行业带来变革。模型量化的快速创新在这方面发挥着关键作用，模型量化是一种通过提高可移植性和减小模型大小来加快计算速度的技术。 模型量化弥补了边缘设备的计算限制与部署高精度模型的需求之间的差距，以实现更快、更高效、更具成本效...
-
肯睿Cloudera：2024年生成式AI及云领域的五大趋势预测
就在十二个月前，“生成式设计人工智能”还处于Gartner新兴技术成熟度曲线的边缘；而如今，Gartner认为“生成式人工智能”（生成式AI）已接近期望膨胀期的顶峰。 生成式AI的优势令人趋之若鹜且影响深远。分析师认为它将影响各个主要行业和工作岗位。麦肯...
-
AI工智能讲师叶梓培训简历及提纲：AI人工智能之基于人工智能的内容生成（AIGC）简历提纲
叶梓老师简介 威信：amliy007 上海交通大学计算机专业博士毕业，高级工程师，高级程序员 主研方向：数据挖掘、机器学习、人工智能。 国内知名上市IT企业的AI技术总监、资深技术专家 一线人工智能经验（12年），大...
-
网络安全人工智能：将人工智能纳入安全策略
人工智能已被广泛应用于各种情况，以提高生产力、增加销售或改善用户体验。人工智能应用仍处于起步阶段的一个领域是网络安全。 快速演变的威胁形势 当黑客实施欺诈和造成伤害的能力比以往任何时候都更加复杂时，如果想保持领先地位，利用每一个工具是最重要的。此外，由...
-
GPTs 初体验 - 1 分钟就能创建一个自己的 ChatGPT？ | 京东云技术团队
就在 11.10 号早上，ChatGPT 已经偷摸的把 GPTs 功能，开放给所有尊贵的 Plus 用户了。 随着这波的功能开放，界面也是改了不少。点击左侧的 Explore 或者左下角的用户处，就可以直接进入新的 GPTs 功能： 这里可以看到我...
-
大宗商品贸易集团数据治理实践，夯实数字基座 | 数字化标杆
某大型央企是首批全国供应链创新与应用示范企业，在“十四五”规划期内以聚焦供应链管理核心主业作为主要战略发展方向。供应链运营管理以大宗商品贸易为主，其交易往往具有交易量巨大、交易环节复杂、风险交易难识别、风险客商难管控等痛点。 随着集团数字化转型不断深化，...
-
字节跳动AB实验经验分享：企业如何构建数据驱动的实验文化？
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，CCF TF 举办了第 123 期分享活动，本期主题为“用户体验工程”。 CCF TF 是中国计算机学会为企业界计算机专业人士创建的企业间常态化合作交流平台，...
-
【2023云栖】大模型驱动DataWorks数据开发治理平台智能化升级
随着大模型掀起AI技术革新浪潮，大数据也进入了与AI深度结合的创新时期。2023年云栖大会上，阿里云DataWorks产品负责人田奇铣发布了DataWorks Copilot、DataWorks AI增强分析、DataWorks湖仓融合数据管理等众多新产品...
-
AntDB数据库受邀参加第六届上海人工智能大会，分享AIGC时代核心交易系统升级方案
近日，第六届上海人工智能大会春季论坛圆满落幕。大会以“数智互联，瞰见未来”为主题，邀请了来自国内外十余个国家和地区的学术界顶级学者和业内知名企业的技术大咖，探讨人工智能的学术、人才、技术、行业发展痛点。亚信科技AntDB数据库作为数智转型时代的基础软件受邀...
-
FFA 2023｜第六届 Flink Forward Asia 峰会议程正式上线！
今年 Flink Forward Asia（以下简称 FFA ） 重新回归线下，将于 12 月 8 - 9 日在北京望京凯悦酒店举办。Flink Forward Asia 2023 大会议程现已正式上线！ Flink Forward 是由 Apache...
-
IBM 推出 Watsonx.Governance，帮助企业和政府建立对生成式AI的信任
IBM 近日宣布将于12月初正式推出 watsonx.governance 工具包，该工具包旨在帮助企业和政府在生成式人工智能模型中建立更多的信任，消除数据输入和输出的不确定性。 虽然基于大型语言模型或基础模型的生成式人工智能为企业提供了许多用例，但同时...
-
IBM 推出 Watsonx.governance 以提升企业 AI 模型透明度和治理能力
IBM 今日宣布，旗下产品 Watsonx.governance 将于 12 月初正式面市，旨在帮助企业提升对人工智能模型的透明度，消除数据中的神秘面纱。 在大型语言模型（LLM）或基础模型的推动下，生成式人工智能为企业带来诸多用途，但同时也引发新的风险...
-
【云栖2023】王峰：开源大数据平台3.0技术解读
本文根据2023云栖大会演讲实录整理而成，演讲信息如下： 演讲人：王峰 | 阿里云研究员，阿里云计算平台事业部开源大数据平台负责人 演讲主题：开源大数据平台3.0技术解读 实时化与Serverless是开源大数据3.0时代的必然选择 阿里云开源...
-
【云栖2023】林伟：大数据AI一体化的解读
本文根据2023云栖大会演讲实录整理而成，演讲信息如下： 演讲人：林伟 | 阿里云研究员，阿里云计算平台事业部首席架构师，阿里云人工智能平台PAI和大数据开发治理平台DataWorks负责人 演讲主题：大数据AI一体化的解读 今年是AI大爆发的一年，...
-
IBM设立5亿美元风险基金 用以投资AI初创公司
IBM宣布成立了一项5亿美元的企业AI风险基金，旨在投资各类人工智能公司，从初创企业到高增长企业不等。这一举措是IBM在人工智能领域的最新投资，旨在推动企业领域的生成式人工智能（GenAI）技术研究和发展。 IBM的企业AI风险基金的目标是加速企业领域的...
-
抖音数据采集教程，高级版
上一篇文章讲了如何对采集的数据进行抓包和解析，本次主要讲解如何使用自动化工具，实现自动化数据采集。如果想了解抓包和解析部分的内容，可以查阅我的上一篇文章《数据平台初试（技术篇）——抖音数据采集（初级版）》，文末附有上篇文章的传送门。本次用到的工具：移动端自...
-
大数据系统数据采集产品的架构分析
任何完整的大数据平台，一般包括以下的几个过程： 数据采集 数据存储 数据处理 数据展现（可视化，报表和监控） 其中，数据采集是所有数据系统必不可少的，随着大数据越来越被重视，数据采集的挑战也变的尤为突出。这其中包括： 数据源多种...
-
大数据项目实战——基于某招聘网站进行数据采集及数据分析（一）
大数据项目实战 第一章 项目概述 文章目录 大数据项目实战 第一章 项目概述 学习目标 一、项目需求和目标 二、预备知识 三、项目架构设计及技术选取 四、开发环境和开发工具介绍 五、项目开发流程 总结 学习目标 掌...
-
大数据（四）大数据采集
说明 本博客每周五更新一次。 数据处理分为入库、计算和输出，本文主要分享数据入库。 数据采集 数据采集是大数据平台数据处理流程的第一步，如何让数据以合适的效率和方式在大数据平台落地，根据场景不同，有着不同方案。一般情况如下。 实时数...
-
Python爬虫是什么？怎么分辨善意爬虫跟恶意爬虫？
#1.Python爬虫是什么？ 爬虫可以说是一个脚本化的探路机器，是你的分身，每个分身都可以模拟人的行为在各大网站软件上获取你需要的信息。爬虫能用来干很多事，但最重要的是获取数据。 #2.如何分别善意爬虫和恶意爬虫？ ####搜索引擎 搜索引擎应用（百度...
-
初步认识爬虫
目录 一、爬虫产生背景 如果我们需要大量数据，有哪些获取数据的方式呢？ （1）企业产生的数据 （2）数据平台购买的数据 （3）政府/机构公开的数据 （4）数据管理咨询公司的数据 （5）爬取的网络数据 二、什么是网络爬虫? 三、爬虫的...