最新 最热

深入浅出理解 Spark:环境部署与工作原理

一、Spark 概述 Spark 是 UC Berkeley AMP Lab 开源的通用分布式并行计算框架,目前已成为 Apache 软件基金会的顶级开源项目。Spark 支持多种编程语言,包括 Java、Python、R 和 Scala,同时 Spark 也支持 Hadoop 的底层存...

2019-12-30
0

这种方式整合Quartz你见过吗?

Quartz是一款优秀的任务调度框架,支持内存、JDBC的形式来存储未执行的任务列表,支持多个任务节点同时执行任务,支持任务漂移到不同的节点执行。

2019-12-26
0

大数据平台的整体架构介绍

日志是大数据平台重要数据来源之一,应用程序日志一方面记录各种程序执行状况,一方面记录用户的操作轨迹。Flume 是日志收集常用的工具。

2019-12-23
0

java爬虫系列第二讲-爬取你喜欢电影的下载地址

访问http://m.ady01.com/rs/film/list/1/1,F12开发者模式中找到页面数据来源地址

2019-12-11
0

jpsite-v1环境搭建

git clone https://github.com/xuxueli/xxl-job.git

2019-12-09
0

Nginx学习之定时切割日志

Nginx日志默认情况下写入到一个文件中,为了区分各个域下的日志,我们一般会分开存储。即时这样,文件也会变的越来越大,非常不方便查看分析。通常我们是以每日来做统计的,下面来聊聊以日期来分隔Nginx日志。...

2019-12-05
0

linux创建定时任务

*/2 * * * * /bin/sh /home/admin/jiaoben/buy/deleteFile.sh

2019-12-05
0

分布式任务调度平台XXL-JOB,不了解一下?

任务调度是指基于给定的时间点,给定的时间间隔又或者给定执行次数自动的执行任务。我们可以思考一下在以下场景中,我们应该怎么实现:

2019-12-05
0

一文读懂什么是进程、线程、协程

我们都知道计算机的核心是CPU,它承担了所有的计算任务;而操作系统是计算机的管理者,它负责任务的调度、资源的分配和管理,统领整个计算机硬件;应用程序则是具有某种功能的程序,程序是运行于操作系统之上的。...

2019-12-02
0

如何配置jobs和triggers【Quartz.NET总结(三)】

前两篇文章,已经介绍了Quartz.NET的使用和Cron表达式表达式的写法,今天说一说Quartz的配置,

2019-11-28
0