-
国产核心器件构建多通道模拟量采集系统的精度分析与设计
差分析模型，为关键器件选型建立了理论依据，并通过基于国产16通道模拟开关和8通道12位开关电容ADC设计的128通道模拟量采集系统进行了验证;结果表明:该系统的绝对测量精度优于1.6 mV，小于 AD...
-
我在超化研究上的日志采集架构设计
软件工程师罗小东，多年平台架构和落地经验，在与社区团队研究超自动化方面的设计和产品方向。 背景 以下是针对超化管理超化的设计，因此会偏向技术方向的阐述。 目前对于超化的关注点似...
-
09丨数据采集：如何用八爪鱼采集微博上的“D&G”评论
分三步： 1.输入网页：每个采集需要输入你想要采集的网页。在新建任务的时候，这里是必填项。 2.设计流程：这个步骤最为关键，你需要告诉八爪鱼，你是如何操作页面的、想要提取页面上的哪些信息等。因为数...
-
高帧频CMOS相机图像采集系统的设计资料说明
研究高速瞬态现象发生机理和运动规律的一种直观地测试技术和手段。以某型号炸点坐标测量经纬仪为应用背景，设计了一种高帧频图像采集系统。论文介绍了高帧频CMOS图像采集系统的发展现状，根据功能需求把整个采集...
-
直击痛点，详解 K8s 日志采集最佳实践
《6 个 K8s 日志系统建设中的典型问题，你遇到过几个？》 第二篇：《一文看懂 K8s 日志系统设计和实践》 第三篇：《9 个技巧，解决 K8s 中的日志输出问题》 Kubernetes 日志...
-
设计一个网络爬虫(Python)
请求 = 每月 1 亿个请求 每秒 400 个请求 = 每月 10 亿个请求 第 2 步：创建高级设计 概述包含所有重要组件的高级设计。 第三步：设计核心组件 深入...
-
爬虫与反爬虫技术分析
对恶意用户制造假数据 4.封禁 直接封禁恶意用户 5.监控： 监控恶意用户,进行恶意分析 反爬虫系统设计： 分析了3个反爬虫架构，架构大体上都非常的相似，其实和waf的实现雷同。这是其中一个架构图...
-
Python爬虫之Scrapy框架系列（1）——初识Scrapy框架【安装+简介+运行流程+组件介绍】
爬取网站数据，提取结构性数据而编写的应用框架。 其最初是为了页面抓取 (更确切来说, 网络抓取 所设计的，也可以应用在获取API所返回的数据(例如 Amazon Associates Web Ser...
-
构建日志采集方案的三要素和四原则
和数据丢失问题，方案复杂度就提升了。方案的复杂度会影响方案的实施难度和维护难度，复杂度太高的方案即使设计出来也比较难落地。 考虑到这三种因素，我们在选择日志采集方案的时候要考虑到四个原则。 •...
-
matlab语音信号的采集与处理,基于MATLAB的语音信号的采集与处理详解
数字信号处理 2.设计目的 本次课程设计的课题为《基于MATLAB的语音信号采集与处理》，学会运用MATLAB的信号处理功能，采集语音信号，并对语音信号进行滤波及变换处理，观察其时域和频...