1：kafka定位消息队列，它可以有许多的生产者和消费者，并可以共享一个主题topic队列。而flume是定位数据传输，相比下，flume是一个专用工具被设计为旨在往HDFS，HBASE发送数据。它对HDFS有特殊的优化，并且集成了hadoop的安全特性...

最近公司一个同事离职，由我来接手他手上的一个项目，我负责开发后台，因为设计到脚本统计数据，需要做定时任务将日表数据统计到月表或者年表。于是该项目用到了Kettle，用了之后才发现，这是个好东西啊。...

Kettle是国外免费的开源轻量级ETL工具，是基于Java语言开发的，可以在Windows.Linux,UNIX系统上运行，且绿色不需安装，可用于各种数据库之间的连接。

插件地址 https://download.csdn.net/download/xukun5137/12267874

kettle主要用于数据清洗，即常见ETL工具，拥有图形化界面且免费的优点。其下载包直接解压打开就能用，遇到的问题:

自从大数据的概念被提出后，出现了很多相关技术，其中对大数据发展最有影响力的就是开源分布式计算平台Hadoop，它就像软件发展史上的Window、Linux、Java一样，它的出现给接下来的大数据技术发展带来了巨大的影响。很多知名...

通过Kettle工具抽取CSV文件csv_extract.csv中的数据并保存至数据库extract的数据表csv中。

上一篇文章为大家总结了一些关于Hive的热门考点，得到了一些朋友的肯定与转发，菌菌就觉得花时间去做这些知识整合是非常有价值，有意义的一件事。本篇文章，让我们有幸一起来阅读一下，该怎么准备Hadoop的内容，才有机会在面试过...

导语SuperSQL是腾讯天穹自研的下一代大数据自适应计算平台。通过开放融合的架构，实现一套代码高效解决公有云、私有云、内网的任何大数据计算场景问题。我们通过将异构计算引擎/异构存储服务、计算引擎的智能化/自动化...

前段时间，有个大数据的朋友找我帮忙，问我能不能在不转强类型对象的情况下，对json进行特殊化处理。我跟他说使用第三方json工具，如gson，fastjson等即可。后来他说希望灵活点，死代码不要太多，尽量通用性高。...