Mac 中的定时任务

2023-01-12 17:11:29 浏览数 (1)

写了一堆爬虫丢服务器上跑，很显然隔一段时间这个爬虫就会废掉。IP 被封是理所当然的。

所以决定放到本地。第一时间 想到的是crontab , 按照Linux 配置一通，发现任务无法执行。

Mac OS launchd

不用想， 定时器不会被执行的，crontab 已经被 Mac OS废弃了，替代品就是 launchd

launchd 配置目录

用来存放 定时器任务配置文件的 有5个目录 ,官方

  • /System/Library/LaunchDaemons 不用登陆也要运行,Apple 提供的系统守护进程
  • /System/Library/LaunchAgents Apple提供的代理，适用于每个用户的所有用户
  • /Library/LaunchDaemons 不用登陆也要运行，第三方系统守护进程
  • /Library/LaunchAgents 需要root登录并且配置文件归root所有
  • ~/Library/LaunchAgents 需要非root登录，并且配置文件归非root所有
进到对应作业的目录

当然是 不登陆也要运行的，一开机，不输入密码也要搞起来。

代码语言：javascript复制
cd /Library/LaunchDaemons
创建plist配置文件

在对应的目录创建配置文件

代码语言：javascript复制
vi com.vix.cron.plist

内容如下：

代码语言：javascript复制
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE plist PUBLIC "-//Apple//DTD PLIST 1.0//EN" "http://www.apple.com/DTDs/PropertyList-1.0.dtd">
<plist version="1.0">
  <dict>
    <key>Label</key>
    <string>com.vix.cron</string>

    <key>ProgramArguments</key>
    <array>
      <string>/Users/chuchur/crontab-test.sh</string>
    </array>

    <key>Nice</key>
    <integer>1</integer>

    <key>StartInterval</key>
    <integer>60</integer>

    <key>RunAtLoad</key>
    <true />

    <key>StandardErrorPath</key>
    <string>/tmp/test.err</string>

    <key>StandardOutPath</key>
    <string>/tmp/test.out</string>
  </dict>
</plist>

大概意思就是没60秒执行一次 /Users/chuchur/crontab-test.sh

加载配置文件

使用 launchctl加载配置文件

代码语言：javascript复制
launchctl load com.vix.cron.plist
# or
# launchctl load /xxx/xxx/com.alvin.crontabtest.plist

不需要定时器了可以卸载

代码语言：javascript复制
launchctl unload /xxx/xxx/com.alvin.crontabtest.plist

查看有多少作业在执行

代码语言：javascript复制
sudo launchctl list | grep 'cron'

但是看这个只是简单的任务逻辑，复杂的怎么办，时分秒日月周 几个小时，几天执行一次。当然他除了StartInterval还有StartCalendarInterval

代码语言：javascript复制
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE plist PUBLIC "-//Apple//DTD PLIST 1.0//EN" "http://www.apple.com/DTDs/PropertyList-1.0.dtd">
<plist version="1.0">
  <dict>
    <key>Label</key>
    <string>com.vix.cron</string>

    <key>ProgramArguments</key>
    <array>
      <string>/Users/chuchur/crontab-test.sh</string>
    </array>
    <key>StartCalendarInterval</key>
    <dict>
        <key>Day</key>
        <integer>11</integer>
        <key>Hour</key>
        <integer>0</integer>
        <key>Minute</key>
        <integer>0</integer>
        <key>Month</key>
        <integer>7</integer>
        <key>Weekday</key>
        <integer>0</integer>
    </dict>
  </dict>
</plist>

Mac 只是说废弃了crontab，又没说不再支持了，我就是要用crontab 怎么办？

折腾如下：

配置crontab

借鉴下 Linux 定时任务 配置方法

1）确保crontab 在mac上是运行的

代码语言：javascript复制
# 定时任务统统由 launchctl 来管理的，看看 cron 任务有没有在里面
sudo launchctl list | grep cron 

# 有记录。查看一下启动项的配置
locate com.vix.cron

# 创建一个database
sudo launchctl load -w /System/Library/LaunchDaemons/com.apple.locate.plist

# 查看 /etc/crontab 是否存在
ls -alF /etc/crontab

# 创建该文件(如果不存在)
sudo touch /etc/crontab

2）验证crontab是否可以执行

编写定时任务脚本

代码语言：javascript复制
contrab -e

写入定时任务

代码语言：javascript复制
0  */1  * * *   spider todo

每隔一个小时运行一次。查看任务：

代码语言：javascript复制
contrab -l

在mac里 ，crontab 配置文件在这个目录 /usr/lib/cron/tabs/

代码语言：javascript复制
cat /usr/lib/cron/tabs/[user name]

看到的是和 contrab -l看到的一样，可见配置没有问题的。

3）mac开启crontab的权限

  1. 系统偏好设置 -> 安全性与隐私 -> 选择 隐私 -> 左侧菜单找到完全磁盘访问权限
  2. cron 程序所在目录:
  3. 终端输入 whereis cron
  4. 看到：/usr/sbin/cron
  5. 再输入 open /usr/sbin
  6. 在打开的文件夹内找到 cron
  7. 把这个文件直接拖动到 系统偏好设置 右侧应用列表框内。勾选上。

收工。

脚本无法运行的解决

脚本无法运行的可以尝试以下：

1）修改 crontab -e ，如 ：

代码语言：javascript复制
* * * * * whoami >> /Users/[your name]/test.txt

改成

代码语言：javascript复制
* * * * * /usr/bin/whoami >> /Users/[your name]/test.txt

也就是命令要写全路径。

2）修改脚本 头部第二行加上如下代码：

代码语言：javascript复制
#!/usr/bin/env bash
source /etc/profile #加上这一行
bash bash指令 macos linux 爬虫

0 人点赞