ETL是Extract、Transfrom、Load即抽取、转换、加载三个英文单词首字母的集合：

本文章提供视频讲解，详细见地址：https://www.bilibili.com/video/BV1uC4y1h7nN

随着传统企业的发展，企业数据呈现多样化，海量化，难以实现数据快速分析。MongoDB是当前很多企业使用的，当日积月累数据很大时，就可能会忽略历史数据的价值，可以把数据实时同步到其他储存：HBASE、HIVE、HDFS文件等等。在当前大...

Lepus是一套开源的数据库监控平台，目前已经支持MySQL、Oracle、SQLServer、MongoDB、Redis等数据库的基本监控和告警（MySQL已经支持复制监控、慢查询分析和定向推送等高级功能）。Lepus无需在每台数据库服务器部署脚本或A...

Windows系统由于二进制包安装了半个小时，还是卡在进度条不动。因此决定使用压缩包进行安装。下载安装包下载地址下载完成后将其解压，例如我解压到了F:MongoDB文件下。接下来进入该文...

测试：age添加索引情况语法：db.c1.createIndex({age: 1})继续：db.c1.find({age:18}).explain(‘executionStats’)

Faker是一个Python软件包，可为您生成伪造数据。无论您是需要引导数据库，创建美观的XML文档，填充持久性以进行压力测试还是匿名化来自生产服务的数据，Faker都是您的理想之选。不论您这边需要创建多少条数据，无非是一个for循...

“得到” App 是罗辑思维出品的一款碎片时间学习的 App，其官方网站为 https://www.igetget.com，App 内有很多学习资源。不过 “得到” App 没有对应的网页版，所以信息必须要通过 App 才可以获取。这次我们通过抓取其 App...

如果直接用 Charles 或 mitmproxy 来监听微信朋友圈的接口数据，这是无法实现爬取的，因为数据都是被加密的。而 Appium 不同，Appium 作为一个自动化测试工具可以直接模拟 App 的操作并可以获取当前所见的内容。所以只要 A...

以抓取京东 App 的商品信息和评论为例，实现 Appium 和 mitmdump 二者结合的抓取。抓取的数据分为两部分：一部分是商品信息，我们需要获取商品的 ID、名称和图片，将它们组成一条商品数据；另一部分是商品的评论信息，我们将评论...