最新 最热

kettle 安装 (win)

Kettle(也称为 Pentaho Data Integration, PDI)是一个开源的数据集成工具,主要用于数据的提取、转换和加载(ETL)。它能够帮助用户从不同的数据源中提取数据,进行清洗和转换,然后将数据加载到目标系统中,如数据仓库或数据库。...

2024-09-14
1

试用完几十款ETL工具后的经验总结,ETL工具用这三款就足够了

市面上ETL工具国内外加起来估计得有30种之多,其中近20款工具我都试用过花费了我大把的时间,我现在把试用后总结出来的经验分享一下,目前很多企业在选择ETL工具时不知道怎么选择适合自已的工具也不可能一款一款的去试用,试...

2024-09-12
2

kettle安装(Mac m1)

1、进入到地址:https://sourceforge.net/projects/pentaho/

2023-12-01
3

Kettle 加快数据入库速度

关闭服务器端编译,sql语句在客户端编译好再发送给服务器端。如果为true,sql会采用占位符方式发送。

2023-10-14
1

维度模型数据仓库(十六) —— 间接数据源

(五)进阶技术         11. 间接数据源         本篇讨论如何处理间接数据源。间接数据源与维度表具有不同的粒度,因此不能直接装载进数据仓库。在这里通过修改(五)进阶技术7. “多路径和参差不齐的层次”里的推...

2022-12-02
1

维度模型数据仓库(十一) —— 维度层次

(五)进阶技术         6. 维度层次         大多数维度都具有一个或多个层次。例如,日期维度就有一个四级层次:年、季度、月和日。这些级别用date_dim表里的列来表示。日期维度是一个单路径层次,因为除了年-季度...

2022-12-02
1

维度模型数据仓库(四) —— 初始装载

(三)初始装载         在数据仓库可以使用前,需要装载历史数据。这些历史数据是导入进数据仓库的第一个数据集合。首次装载被称为初始装载,一般是一次性工作。由最终用户来决定有多少历史数据进入数据仓库。例如,数据...

2022-12-02
2

kettle工具的介绍和使用

原文地址链接:https://blog.csdn.net/qq_35731570/article/details/71123413

2022-11-03
1

Data Vault初探(四) —— 初始装载

下面的SQL脚本用于完成Data Vault的初始装载过程。USE dv;    SET AUTOCOMMIT = 0;    -- 清空附属表、链接表、中心表  SET FOREIGN_KEY_CHECKS=0;  TRUNCATE sat_customer;  TRUNCATE sat_order_......

2022-06-14
1

【国产】大数据ETL自动化调度运维专家TASKCTL

批量调度自动化技术是大数据时代数据整合后台不可缺少的重要技术。TASKCTL 是一款企业级免费批量调度系统,支持各类脚本、程序的调度。具备可视化图形拖拽式设计界面,可视化作业管控、计划调度、实时监控、消息提醒和日...

2022-05-27
3