-
数据为王！如何通过数据一步步构建高效的自动驾驶算法？
本文经自动驾驶之心公众号授权转载，转载请联系出处。 写在前面&笔者的个人理解 下一代自动驾驶技术期望依赖于智能感知、预测、规划和低级别控制之间的专门集成和交互。自动驾驶算法性能的上限一直存在巨大的瓶颈，学术界和业界一致认为，克服瓶颈的关键在于以...
-
AIGC 大模型纷纷部署，企业如何为 AI 数据降本增效
编辑 | 宋慧 出品 | CSDN 云计算 AIGC 从年初开始持续爆火，国内各种大模型纷纷涌现，其中模型参数轻松突破千亿数量级。模型中数据的形态、部署也是多种多样的，庞大数据量背后的管理和成本不容小觑。 混合数据厂商肯睿 Cloudera...
-
肯睿中国Cloudera：数据与AI如何帮助企业“反脆弱”？
2023年，无论是个人还是企业，“脆弱“几乎是一种普遍的状态。 在全球经济经历诸多重大动荡的今天，越来越多个人和企业意识到“反脆弱“的重要性。“反脆弱“这一概念由作家尼古拉斯 · 塔勒布提出，是一个比复原力、强韧性更高阶的概念。简单来讲，反脆弱指的是在混...
-
基于AI的事件智能分析系统建设实践
一、背景 当前，随着虚拟化、云计算等新技术的广泛应用，企业数据中心内部IT基础设施规模成倍增长，计算机硬件和软件的规模不断的扩大，相应的计算机故障也频繁发生，一线运维人员迫切的需要更加专业、更加强大的运维工具。 在数据中心的日常运维工作中，一般是通过...
-
探索AIGC未来：CPU源码优化、多GPU编程与中国算力瓶颈与发展
★人工智能；大数据技术;AIGC;Turbo;DALL·E 3;多模态大模型；MLLM；LLM；Agent；Llama2；国产GPU芯片；GPU;CPU；高性能计算机；边缘计算；大模型显存占用；5G;深度学习；A100；H100；A800；H800；L40...
-
每个IT领导者都必须进行的六次艰难的AI讨论
很少有技术像AI那样引发如此多的讨论和辩论，工人、知名高管和世界领导人在对AI的赞扬和担忧之间摇摆不定。 诚然，CIO没有被传唤到国会作证，但他们正在高管套房和董事会会议室接受盘问，因为企业领导人向他们的技术主管提出了各种具有挑战性的问题，预计CIO将...
-
MongoDB携手亚马逊云科技优化Amazon CodeWhisperer建议，助力开发者在MongoDB上构建应用程序
MongoDB (NASDAQ: MDB 和亚马逊 (NASDAQ: AMZN 旗下的亚马逊云科技（AWS）今日宣布，双方正在协作优化Amazon CodeWhisperer，为在MongoDB上的应用程序开发和改进工作提供更好的建议和支持。Mongo...
-
2024年CIO的14项优先事项和趋势
GenAI将是2024年的最大技术趋势，也是董事会负责审查新工具、配置基础设施、准备应对新风险和利用新用户体验的CIO的优先事项。 这并不容易，因为大多数供应商都在添加新的GenAI功能，通常成本很高。CIO将需要为这些工具制定业务案例，以确定它们是能...
-
2024 年数据管理在人工智能中的四大趋势
在 2023 年即将结束之际，我们会发现随着 ChatGPT 的引入，世界发生了不可逆转的变化。人工智能的主流化继续以强劲势头推进，我们如何应对这些不断变化的时代需要信念的飞跃。人工智能可能同时具有潜在的变革性和不准确性！但我们的未来不仅仅是人工智能，因...
-
模型量化和边缘人工智能如何定义交互方式
人工智能与边缘计算的融合承诺为许多行业带来变革。模型量化的快速创新在这方面发挥着关键作用，模型量化是一种通过提高可移植性和减小模型大小来加快计算速度的技术。 模型量化弥补了边缘设备的计算限制与部署高精度模型的需求之间的差距，以实现更快、更高效、更具成本效...
-
肯睿Cloudera：2024年生成式AI及云领域的五大趋势预测
就在十二个月前，“生成式设计人工智能”还处于Gartner新兴技术成熟度曲线的边缘；而如今，Gartner认为“生成式人工智能”（生成式AI）已接近期望膨胀期的顶峰。 生成式AI的优势令人趋之若鹜且影响深远。分析师认为它将影响各个主要行业和工作岗位。麦肯...
-
AI工智能讲师叶梓培训简历及提纲：AI人工智能之基于人工智能的内容生成（AIGC）简历提纲
叶梓老师简介 威信：amliy007 上海交通大学计算机专业博士毕业，高级工程师，高级程序员 主研方向：数据挖掘、机器学习、人工智能。 国内知名上市IT企业的AI技术总监、资深技术专家 一线人工智能经验（12年），大...
-
网络安全人工智能：将人工智能纳入安全策略
人工智能已被广泛应用于各种情况，以提高生产力、增加销售或改善用户体验。人工智能应用仍处于起步阶段的一个领域是网络安全。 快速演变的威胁形势 当黑客实施欺诈和造成伤害的能力比以往任何时候都更加复杂时，如果想保持领先地位，利用每一个工具是最重要的。此外，由...
-
GPTs 初体验 - 1 分钟就能创建一个自己的 ChatGPT？ | 京东云技术团队
就在 11.10 号早上，ChatGPT 已经偷摸的把 GPTs 功能，开放给所有尊贵的 Plus 用户了。 随着这波的功能开放，界面也是改了不少。点击左侧的 Explore 或者左下角的用户处，就可以直接进入新的 GPTs 功能： 这里可以看到我...
-
大宗商品贸易集团数据治理实践，夯实数字基座 | 数字化标杆
某大型央企是首批全国供应链创新与应用示范企业，在“十四五”规划期内以聚焦供应链管理核心主业作为主要战略发展方向。供应链运营管理以大宗商品贸易为主，其交易往往具有交易量巨大、交易环节复杂、风险交易难识别、风险客商难管控等痛点。 随着集团数字化转型不断深化，...
-
字节跳动AB实验经验分享：企业如何构建数据驱动的实验文化？
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，CCF TF 举办了第 123 期分享活动，本期主题为“用户体验工程”。 CCF TF 是中国计算机学会为企业界计算机专业人士创建的企业间常态化合作交流平台，...
-
【2023云栖】大模型驱动DataWorks数据开发治理平台智能化升级
随着大模型掀起AI技术革新浪潮，大数据也进入了与AI深度结合的创新时期。2023年云栖大会上，阿里云DataWorks产品负责人田奇铣发布了DataWorks Copilot、DataWorks AI增强分析、DataWorks湖仓融合数据管理等众多新产品...
-
AntDB数据库受邀参加第六届上海人工智能大会，分享AIGC时代核心交易系统升级方案
近日，第六届上海人工智能大会春季论坛圆满落幕。大会以“数智互联，瞰见未来”为主题，邀请了来自国内外十余个国家和地区的学术界顶级学者和业内知名企业的技术大咖，探讨人工智能的学术、人才、技术、行业发展痛点。亚信科技AntDB数据库作为数智转型时代的基础软件受邀...
-
FFA 2023｜第六届 Flink Forward Asia 峰会议程正式上线！
今年 Flink Forward Asia（以下简称 FFA ） 重新回归线下，将于 12 月 8 - 9 日在北京望京凯悦酒店举办。Flink Forward Asia 2023 大会议程现已正式上线！ Flink Forward 是由 Apache...
-
IBM 推出 Watsonx.Governance，帮助企业和政府建立对生成式AI的信任
IBM 近日宣布将于12月初正式推出 watsonx.governance 工具包，该工具包旨在帮助企业和政府在生成式人工智能模型中建立更多的信任，消除数据输入和输出的不确定性。 虽然基于大型语言模型或基础模型的生成式人工智能为企业提供了许多用例，但同时...
-
IBM 推出 Watsonx.governance 以提升企业 AI 模型透明度和治理能力
IBM 今日宣布，旗下产品 Watsonx.governance 将于 12 月初正式面市，旨在帮助企业提升对人工智能模型的透明度，消除数据中的神秘面纱。 在大型语言模型（LLM）或基础模型的推动下，生成式人工智能为企业带来诸多用途，但同时也引发新的风险...
-
【云栖2023】王峰：开源大数据平台3.0技术解读
本文根据2023云栖大会演讲实录整理而成，演讲信息如下： 演讲人：王峰 | 阿里云研究员，阿里云计算平台事业部开源大数据平台负责人 演讲主题：开源大数据平台3.0技术解读 实时化与Serverless是开源大数据3.0时代的必然选择 阿里云开源...
-
【云栖2023】林伟：大数据AI一体化的解读
本文根据2023云栖大会演讲实录整理而成，演讲信息如下： 演讲人：林伟 | 阿里云研究员，阿里云计算平台事业部首席架构师，阿里云人工智能平台PAI和大数据开发治理平台DataWorks负责人 演讲主题：大数据AI一体化的解读 今年是AI大爆发的一年，...
-
IBM设立5亿美元风险基金 用以投资AI初创公司
IBM宣布成立了一项5亿美元的企业AI风险基金，旨在投资各类人工智能公司，从初创企业到高增长企业不等。这一举措是IBM在人工智能领域的最新投资，旨在推动企业领域的生成式人工智能（GenAI）技术研究和发展。 IBM的企业AI风险基金的目标是加速企业领域的...
-
抖音数据采集教程，高级版
上一篇文章讲了如何对采集的数据进行抓包和解析，本次主要讲解如何使用自动化工具，实现自动化数据采集。如果想了解抓包和解析部分的内容，可以查阅我的上一篇文章《数据平台初试（技术篇）——抖音数据采集（初级版）》，文末附有上篇文章的传送门。本次用到的工具：移动端自...
-
大数据系统数据采集产品的架构分析
任何完整的大数据平台，一般包括以下的几个过程： 数据采集 数据存储 数据处理 数据展现（可视化，报表和监控） 其中，数据采集是所有数据系统必不可少的，随着大数据越来越被重视，数据采集的挑战也变的尤为突出。这其中包括： 数据源多种...
-
大数据项目实战——基于某招聘网站进行数据采集及数据分析（一）
大数据项目实战 第一章 项目概述 文章目录 大数据项目实战 第一章 项目概述 学习目标 一、项目需求和目标 二、预备知识 三、项目架构设计及技术选取 四、开发环境和开发工具介绍 五、项目开发流程 总结 学习目标 掌...
-
大数据（四）大数据采集
说明 本博客每周五更新一次。 数据处理分为入库、计算和输出，本文主要分享数据入库。 数据采集 数据采集是大数据平台数据处理流程的第一步，如何让数据以合适的效率和方式在大数据平台落地，根据场景不同，有着不同方案。一般情况如下。 实时数...
-
Python爬虫是什么？怎么分辨善意爬虫跟恶意爬虫？
#1.Python爬虫是什么？ 爬虫可以说是一个脚本化的探路机器，是你的分身，每个分身都可以模拟人的行为在各大网站软件上获取你需要的信息。爬虫能用来干很多事，但最重要的是获取数据。 #2.如何分别善意爬虫和恶意爬虫？ ####搜索引擎 搜索引擎应用（百度...
-
初步认识爬虫
目录 一、爬虫产生背景 如果我们需要大量数据，有哪些获取数据的方式呢？ （1）企业产生的数据 （2）数据平台购买的数据 （3）政府/机构公开的数据 （4）数据管理咨询公司的数据 （5）爬取的网络数据 二、什么是网络爬虫? 三、爬虫的...
-
网络爬虫的基本概念
1 . 数据来源： 企业产生的用户数据 政府/机构提供的公开数据 第三方数据平台购买数据 爬虫爬取数据 2 . 爬虫的定义 ： 爬虫又称网页蜘蛛，网络机器人，是一种按照一定规则，自动抓取互联网上相应的信息。 3 . 爬虫的工作原理 ：...
-
抖音、快手数据采集，短视频监测大屏
抖音、快手数据采集，短视频监测大屏 本文介绍在数据采集过程中不可或缺的一枚神器——数据采集监控大屏，如果想了解数据采集过程中的一些技术，欢迎查阅我的另外几篇文章，文末附有两篇数据采集文章的链接。先看下面三张图：三张图，不同的时间段，对应的日采集数据量分别...
-
数据采集中间件技术对比V1.0
文章目录 1 前言 2 数据采集中间件对比 2.1 支持的数据源 2.2 支持的数据格式 2.3 支持的上下游中间件 2.4 任务监控 3 MYSQL的BINLOG日志工具分析：CANAL、MAXWELL 4 有赞大数据：FLUME 数据采...
-
数栈技术分享：如何使用数栈进行数据采集？
数栈是云原生—站式数据中台PaaS，我们在github和gitee上有一个有趣的开源项目：FlinkX，FlinkX是一个基于Flink的批流统一的数据同步工具，既可以采集静态的数据，也可以采集实时变化的数据，是全域、异构、批流一体的数据同步引擎。大家喜欢...
-
干货 | 企业如何快速采集分析日志？
蓝鲸平台在腾讯内部业务场景的探索 其实刚刚展示的这套日志架构，源自腾讯IEG蓝鲸日志平台的数据流示意图。 蓝鲸平台在早期就将日志的各类应用场景作为整个自动化运营中的关键环节，并规划建造出了一套适合中大型企业使用的日志平台。直至目前，蓝鲸日志平台已经历经...
-
大数据平台的数据采集分析
数据采集的设计，几乎完全取决于数据源的特性，毕竟数据源是整个大数据平台蓄水的上游，数据采集不过是获取水源的管道罢了。 在数据仓库的语境下，ETL基本上就是数据采集的代表，包括数据的提取（Extract 、转换(Transform 和加载(Load 。在转...
-
Linux系统日志采集
Linux系统日志采集 一、 任务描述 二、 任务目标 三、 任务环境 四、 任务分析 五、 任务实施 步骤1、操作步骤 未经许可，禁止以任何形式转载，若要引用，请标注链接地址 全文共计1821字，阅读大概需要3分钟 一、...
-
抖音数据采集教程，逆向神器 frida 介绍
抖音数据采集教程，逆向神器 frida 介绍 短视频、直播数据实时采集接口，请查看文档： TiToData 免责声明：本文档仅供学习与参考，请勿用于非法用途！否则一切后果自负。<br> frida是啥？ 首先，frida...
-
一文带你了解Python爬虫（一）——基本原理介绍
一、“大数据时代”，数据获取的方式： 1. 企业生产的用户数据： 大型互联网公司有海量用户，所以他们积累数据有天然的优势。有数据意识的中小型企业，也开始积累的数据。2. 数据管理咨询公司： 通常这样的公司有很庞大的数据采集团队，一般会通过市场调研、问卷...
-
php链路追踪框架skywalking介绍
+ 目录 Skywalking介绍 Skywalking是一个国产的开源框架，2015年有吴晟个人开源，2017年加入Apache孵化器，国人开源的产品，主要开发人员来自于华为，2019年4月17...
-
NatWest和IBM合作推出生成式AI计划，提升客户体验
NatWest（国民西敏寺银行）和IBM宣布改进该银行的虚拟助手Cora，引入生成式AI功能，通过对话互动为客户提供更多信息。该银行将成为英国首批在数字服务中部署生成式AI虚拟助手的银行，从而提供更好的客户体验。 图源备注：图片由AI生成，图片授权服务商...
-
目前CIO们仍在谨慎地探索GenAI在企业中的应用价值
多数CIO已经开始探索GenAI，以确保企业跟上技术发展的趋势，但许多人发现，市场上的技术还没有达到理想的水平。米其林全球CIO Yves Caseau表示：“在对GitHub Copilot和ChatGPT进行了六个多月的试验后，GenAI的发展速度令...
-
AI公司「卓视智通」获数千万Pre-B+轮融资 推进视觉大模型研发
据36氪消息，北京卓视智通科技有限责任公司近日完成了数千万元 Pre-B + 轮融资，由中交资本和腾飞资本共同投资。 卓视智通成立于2012年，是一家基于 AI 的视频融合感知及车路协同解决方案提供商。公司主要从路端切入，致力于交通场景的识别和应用落地。...
-
度小满自动机器学习平台实践
一、机器学习平台 首先介绍一下度小满机器学习平台的背景、发展过程以及现状。 1、业务场景 度小满是一家金融科技公司，公司内部的业务场景主要分为三个方面： 智能风控：涉及关系数据挖掘、文本数据挖掘、情感分析等 NLP 技术，及人脸识别等 CV 技术。...