-
字节跳动算力监控系统的落地与实践
背景 随着字节跳动业务的快速发展,数据中心服务器规模增长迅速,以满足日益增长的算力需求。当规模到一定程度时,就需要平衡好机器成本与效率、资源之间的关系,有针对性地优化数据中心性能,以降低计算成本。 参考行业内的实践,从 2019 年起,STE 团队开始...
-
使用SpreadJS 开发在线问卷系统,构筑CCP(云数据采集)平台
什么是CCP(云数据采集)平台? 图片来自于网络 CCP(云数据采集)平台诞生于大数据时代的背景下,通过实时数据挖掘,在海量的云端数据中发现隐藏其中的价值。 在线问卷系统,作为CCP(云数据采集)平台的信息采集接口,通过网络信息收集,帮助问卷设计...
-
警惕超范围采集隐私-移动APP违规十宗罪
随着科技的高度发展及互联网的广泛应用,智能手机成了人们工作生活中的必需品。但与此同时,智能手机在非法App的操纵下很可能沦为泄密“黑洞”。对此,监管部门应该强化监管,严厉追究这些流氓App开发者及平台的相关责任。 用户的个人信息成为移动互联网抢夺的目标,...
-
体验TiDB V6.0.0 之Clinic
作者:边城元元 原文来源:https://tidb.net/blog/6b2cf9a8 体验TiDB V6.0.0 之Clinic 一、背景 TiDB的生态越来越完善,带来利好的同时,也增加了运维不可确定性,clinic的出现 减...
-
体验 TiDB v6.0.0 之 Clinic
\n> 原文来源:https://tidb.net/blog/6b2cf9a8\n\n## 一、背景 TiDB 的生态越来越完善,带来利好的同时,也增加了运维不可确定性。 Clinic 的出现降低了运维成本和可以快速准确定位的集群中的问题。...
-
Android车辆运动轨迹大数据采集最佳实践
csdn源码下载地址:https://download.csdn.net/download/geduo_83/10841480 前言: 最近帝都的天气有些冷,天寒地冻,天气虽冷,但也无法阻挡我写文章的热情,之前很少写文章,记得写文章已经是很久很...
-
关于7个款来抓数据的开源爬虫软件工具
一、爬虫是什么? 爬虫:是一种按照一定的规则,自动地抓取万维网,信息的程序或者脚本。使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 1.QuickRecon QuickRecon是一个简单的信息收集工具,它可以帮助你查找子域名名称、Perform...
-
数据采集知识分享|4大数据采集方式是什么?
数据分析中,不可或缺“数据收集”这一环节。数据收集是通过借助数据分析工具利用一定的收集方法,将想要利用的数据信息收集起来用于后面的数据分析、数据挖掘。所以数据收集也是数据分析的基础和上限。例如,某运动APP想要针对某部分用户制定某训练课程,需要收集这部分用...