安装gtftools（http://www.genemine.org/gtftools.php）

本公众号提供的工具、教程、学习路线、精品文章均为原创或互联网收集，旨在提高网络安全技术水平为目的，只做技术研究，谨遵守国家相关法律法规，请勿用于违法用途，如果您对文章内容有疑问，可以尝试加入交流群讨论或留言私信，如...

解锁TOAST的秘密：如何优化PostgreSQL的大型列存储以最佳性能和可扩展性

分布式存储系统需要一个一致性的协议，去保证所有的 commit 对数据的修改能在不同的情况下，不丢失数据。在设计之初，我们在深刻的考虑部署的复杂性等问题后，我们选择了 raft 协议，然而马上就出现了陷阱。...

一个类只允许创建一个对象（或者实例），那这个类就是一个单例类，这种设计模式就叫作单例设计模式，简称单例模式。

hive是基于大数据开发的一组用于数据仓库的api，其主要功能是将HQL(HIVE SQL)转换成MapReduce执行。所以对hive的优化几乎等于对MapReduce的优化，主要在io和数据倾斜方面进行优化。...

Parquet是面向分析型业务的列式存储格式，由Twitter和Cloudera合作开发，2015年5月从Apache的孵化器里毕业成为Apache顶级项目，最新的版本是1.8.0。

Spark提供的多种持久化级别，主要是为了在CPU和内存消耗之间进行取舍。下面是一些通用的持久化级别的选择建议：

GitHub上下载源码git clone https://github.com/azkaban/azkaban.git也可以直接下载相应的版本源码上传到服务器（需安装git）编译 压缩为tar包cd azkaban/./gradlew distTar注意：如果不是第一次building，最好先clean一......

相信大家经常会碰到上传图片的情景，如果图片过大，上传又有限制。这个时候就需要对图片进行压缩处理，截图有可能模糊或者尺寸依然较大，在线网站压缩又可能有隐私顾虑。...