最近在基于 CUP 写踩坑之旅, 欢迎大家查看: 附一个昨凌晨写的


# Python 踩坑之旅进程篇其三 pgid 是个什么鬼

## 1.1 踩坑案例

pid, ppid 是大家比较常见的术语, 代表进程号,父进程号. 但 pgid 是个什么鬼?

了解 pgid 之前, 我们先复习下:

- [进程篇其一]( https://mp.weixin.qq.com/s?__biz=MzUxMjIzODQ3Mg==&mid=2247483675&idx=1&sn=4338aef5e4268d01d9197cdbb515b301&chksm=f96637fcce11beea8bbbb617359152311e968b0023f844d90164943235db412286572dc5973e&token=863711821&lang=zh_CN#rd)
- 里面场景是: 一个进程通过`os.system`或者`Popen`家族启动子进程
- 后通过杀死父进程的方式无法杀死它的连带子进程
- 我们通过其他方式进行了解决

这个场景还有个后续就是:

- 如果这个子进程还有孙子怎么办?
- 它还有孙子的孙子怎么办?

这个就是今天我们遇到的坑, 怎么处理孙子进程. 大家注意, 不仅是 Python 会遇到这个问题, 其他语言包括 Shell 都一样会遇到这种"孙子"进程怎么进程异常处理的问题.

## 1.2 填坑解法

本期的坑位解法其实有两种, 第一种比较暴力, 简称穷尽搜索孙子法.

a. 穷尽搜索孙子法, 代码示例

关键点:

- 使用 cup.res.linux 中的 Process 类, 获得该进程所有的子孙进程
- 使用 kill 方法全部杀死

```python
from cup.res import linux
pstatus = linux.Process(pid)
for child in pstatus.children(recursive=True):
os.kill(child, signal.SIGKILL)
```

b. 获得该进程的 PGID, 进行 kill 操作

b1. 先讲个 shell 操作的做法, 使用 ps 获取进程的**pgid**, 注意**不是**pid

```bash
# 以 mysqld 为例, 注意 pgid 项
ps -e -o uid,pid,gid,pgid,cmd|grep mysql
```

结果:

- 注意其中第三列, 该进程和子进程都使用了同样的 pgid **9779**

9790 0 9779 /bin/sh /usr/bin/mysqld_safe --datadir=/home/maguannan/mysql/mysql/....

10171 501 9779 /home/maguannan/bin/mysqld --basedir=/home/maguannan/mysql/....

- 通过`kill -9 -9779`的方式可以杀死该 pgid 底下的所有**子孙**进程

b2. 在讲 Python 里的处理方式

```python
import os
import signal
from cup.res import linux
pstatus = linux.Process(pid)
os.killpg(pstatus.getpgid(), signal.SIGKILL)
```

addr info 挂了, 可能是连接 socket 出了问题. 搞个重试什么的吧

我是先看的 django 然后看的 flask. 后来就再也不想用 django 了

@NoAnyLove RW lock 是有 bug 吗? 欢迎在 github 提 patch :).

近期, 重点在 py2 -> py3 兼容性. 估计要多走些路了.

@WongYukloong 应该是近期两会 github 不稳定, 官网是在 github 上的.

开源到合适的平台比如 github + license 啊.

MAC BOOK 合盖 开盖子, 开箱即用. 1 个月不带关机, 没啥问题. 除了 outlook 不好用(可以用网页版), 其他都挺好的. 也不用担心病毒\乱七八糟的东西.


--------------
https://github.com/baidu/CUP 百度开源 Python 基础库 CUP，欢迎大家了解、使用、一起建设

@tisswb 是不是开会开的. github 被偶尔墙了? 问了很多人, 访问官网都没问题. 和地区 /dns 有关系么?

1. 简单写着玩就用 threading 就可以

2. 如果想正经写, 可以考虑线程池.

cup 的线程池满足你要求:

https://github.com/baidu/CUP/blob/master/cup/services/threadpool.py

3. 或者用异步 shell
cup.shell.oper 中的 ShellExec

看你的选择吧

屌丝聚居地回龙观买的 天天堵车堵死 配套学校不太好 医院最近几年到是起来了.

网盘做大了以后, 成本之高, 投入产出比严重不符. 得变现逻辑合理才行


----------
https://github.com/baidu/CUP 百度开源 Python 基础库 CUP，欢迎大家查看、使用、一起建设

自己的感觉是:

1. 如果混吃等死, 多少岁都没锐气.

2. 如果一直努力, 但是只顾埋头干活, 忘记抬头看路. 费了 200 的劲, 只有 20 的收成. 这个时候会觉得疲惫没有锐气.


埋头努力+抬头看路结合, 定期循环 review roadmap, 工作了快 10 年, 依然觉得活力满满

每天经过大家调侃的 制约互联网发展的 "后厂村路". 开车不堵 20 分钟到, 堵车 40-60min. 经常堵车到怀疑人生, 很烦躁.

去年末自从买了自行车, 一切都那么顺畅起来. 9 公里, 32 分钟. 一点不费劲, 还顺带瘦了 7-10 斤

@Deteriorator

1. 最好养成习惯把 grep 进程 filter 掉

ps -ef|grep xxx|grep -v grep

2. 如果是个 baselib, 最好还把一些 vim emacs vi tail more less 常见的编辑器也 grep -v filter 掉


防止误杀.

肯定要做序列化和反序列化. 如果数据量大, 考虑下有数据压缩的结构什么的. 比如 google 的 protobuf

哈哈, 新东西确实需要 py3. 大家稍等, py3 确实需要进行兼容性建设. 也欢迎有时间和精力的一起来搞 py3 的兼容

@jingxyy 预计在 19 年 H1 末支持, 由于之前 py2 是内部主流, py3 没那么强烈. 近期诉求越来越多, 已在计划中了

@lihongjie0209 看基础功能下面的, 通用服务 /快速构建 Python Service/网络异步库

@ninestep 使用的 github 服务, 没挂呀.