本文记录的是，在数据处理过程中，遇到了一个sql执行很慢，对一些大型的hive表还会出现OOM，一步一步通过参数的设置和sql优化，将其调优的过程。先上sqlselect t1.create_time from (　　select * from beatles_ods.route wher...

昨天快速搭建了一套自己的知识库感觉一下子有了很多的事情要做，至少得让自己用得舒服些。没想到有了这个小工具之后，我发现我之前过得真是刀耕火种的信息收集。为什么这么说，因为我们每天都会读大量的文章，如果你决定收藏...

腾讯云的电商直播解决方案，具备APP SDK、音视频计算集群、CDN加速网络、基础服务集群、社交互动系统五大技术系统支持，可为电商平台提供了无缝的链接能力，24小时即完成极速接入。电商在互联网时代给...

面临的挑战卓越的运营是IT企业成功的的重要因素。然而，构建支持业务创新并且保持每天的日常运作的运营团队是很有挑战性的。显然，公有云提供了支持迅速变化和增长所需的敏捷性。但是，成功的将应用程序向云计算迁移还需要...

导读：我们现在处在一个新的时代：商业成功取决于比以前更快的从更多的系统和用户中获取可信任的数据。要想在这个时代成功，你必须确保质量数据在更多的系统中传播流畅，是高度可伸缩的，并且由业务用户监控和管理。通过本文详...

我们现在处在一个新的时代：商业成功取决于比以前更快的从更多的系统和用户中获取可信任的数据。这个新时代的核心是大数据，它引进了新技术、新数据源、新数据类型，可以让你更了解顾客、竞争者的关联信息以及你从没想过的...

事先准备：工具类：package com.wazn.learn.util.export;import java.sql.Connection;import java.sql.DriverMa

概述最近，国外的安全研究员发现了一种在文档中使用DynamicData Exchange (DDE)协议发起渗透的方法。使用该方法可以绕过MSWord和MSExcel宏限制，不需要使用MSWord和MSExcel的漏洞就可以执行命令。腾讯反病毒实验室哈勃系...

專 欄❈追梦人物，Python中文社区专栏作者。电子科技大学计算机学院研究生，从事大数据分析研究方向。主要使用 Python 语言进行相关数据的分析，熟练使用 django 开发网站系统。Django开源论坛作者。博客地址：http://www.ji...

某些场景下，开发者希望能够大批量地把实体的数据导入到数据库中。虽然使用实体仓库保存实体列表非常方便，但是其内部实现机制是一条一条的保存到数据库，当实体的个数较多时，效率就会很低。所以 Rafy 设计了批量导入插件程...