采集程序多了后,需要部署运维了。
1、读取每个csv文件的行数。
2、写入运维csv。
3、读取运维CSV的最后第二行和最后一行,计算最后一行减去最后第二行的数值。
4、把结果推送到邮件,邮件关联微信QQ邮箱提醒。
5、任务计划程序的坑。
###########################
1、读取每个csv文件的行数。
代码语言:javascript复制import csv
import datetime
import pandas as pd
代码语言:javascript复制with open('xxx大数据.csv', 'r') as f:
data1 = len(f.readlines())
2、写入运维csv
代码语言:javascript复制 with open('采集部署运维2020.10.25.csv', 'a ', newline = 'n')as f:
w = csv.writer(f)
w.writerow([t1,t2,data1,data2,data3,data4,data5,data6])
print([t1,t2,data1,data2,data3,data4,data5,data6])
3、读取运维CSV的最后第二行和最后一行,计算最后一行减去最后第二行的数值
代码语言:javascript复制with open('采集部署运维2020.10.25.csv', 'r', newline = 'n')as f:
lines = f.readlines()
print(int(lines[-1].split(',')[2])-int(lines[-2].split(',')[2]))
4、把结果推送到邮件,邮件关联微信QQ邮箱提醒。
代码语言:javascript复制#邮件推送
import yagmail
yag_server = yagmail.SMTP(user='3930@qq.com', password='fxmqhobgdi', host='smtp.qq.com',encoding='GBK')
email_to = ['1658@qq.com',]
import datetime
t = datetime.date.today()
email_title = str(heji)
print(email_title)
email_content = ''
yag_server.send(email_to, email_title, email_content)
yag_server.close()
5、任务计划程序的坑。不能像爬虫一样直接运行,先找到默认的运行程序C:Windowspy.exe,添加参数写python脚本的位置。