序言
好久不摸k8s,快忘记怎么玩了,离技术的距离越来越远了。
如果每天都是一个故障,每天都复盘一下,你就知道你的时间都浪费在哪儿了。
强制删除pod
故事背景:
没脑子,所以就在一个2c2g的虚拟机上创建100个pod玩玩,然后就整个挂了,各种oom的日志像疯了一样。
步骤:
各种折腾,关闭kubelet服务,删除rc,停止docker,磁盘疯狂旋转,就像旋转木马,算了,还是重启虚拟机吧。
重新创建一个deployements发现,还有各种残留的pod,居然没有自动回收。
进行强制删除terminating的pod(强制删除,资源立即释放):
--grace-period=-1: Period of time in seconds given to the resource to terminate gracefully. Ignored if negative
--force=false: Immediate deletion of some resources may result in inconsistency or data loss and requires confirmation.
发现新创建的pod一直在pending的状态,查看相关的日志:
发现kubelet服务未启动,启动服务查看状态(node正常,后续就正常了):