-
基于TableStore/MaxCompute的数据采集分析系统介绍
摘要 在互联网高度发达的今天,ipad、手机等智能终端设备随处可见,运行在其中的APP、网站也非常多,如何采集终端数据进行分析,提升软件的品质非常重要,例如PV/UV统计、用户行为数据统计与分析等。虽然场景简单,但是数据量大,对系统的吞吐量、实时性、分析...
-
使用百度EasyDL实现电动车进电梯自动预警
项目说明 业务背景 近年来,电动车进楼入户发生火灾的事故屡见不鲜,针对该问题,社区物业已明令禁止电动车入户,但是依然有住户忽视这个问题的严重性。 业务难点 由于小区电梯多,人工监控很难及时发现电瓶车入户违规,最终造成严重的人员伤亡事故。 同...
-
腾讯云容器服务日志采集最佳实践
概述 本文介绍如何利用腾讯云容器服务 TKE 的日志功能对日志进行采集、存储与查询,分析各种功能用法与场景,给出一些最佳实践建议。 注: 本文仅适用于 TKE 集群。 如何快速上手 ? TKE 的日志功能入口在 集群运维-日志规则,更多关...
-
我在超化研究上的日志采集架构设计
软件工程师罗小东,多年平台架构和落地经验,在与社区团队研究超自动化方面的设计和产品方向。 背景 以下是针对超化管理超化的设计,因此会偏向技术方向的阐述。 目前对于超化的关注点似乎更多集中在方法论方面,而较少关注具体实现,目前仍处于探...
-
数栈技术分享:如何使用数栈进行数据采集?
数栈是云原生—站式数据中台PaaS,我们在github和gitee上有一个有趣的开源项目:FlinkX,FlinkX是一个基于Flink的批流统一的数据同步工具,既可以采集静态的数据,也可以采集实时变化的数据,是全域、异构、批流一体的数据同步引擎。大家喜欢...
-
基于TableStore的数据采集分析系统介绍
摘要 在互联网高度发达的今天,ipad、手机等智能终端设备随处可见,运行在其中的APP、网站也非常多,如何采集终端数据进行分析,提升软件的品质非常重要,例如PV/UV统计、用户行为数据统计与分析等。虽然场景简单,但是数据量大,对系统的吞吐量、实时性、分析...