采集了20000条招聘信息,我做了一幅北上广深杭的互联网行业画像
![采集了20000条招聘信息,我做了一幅北上广深杭的互联网行业画像](https://s.hougarden.com/image/18/f6/18f6b0140a27c93fe95fc7eb8ed9290c.jpg?x-oss-process=image/quality,q_80/resize,w_1920/format,webp)
裁员、996 的背景下,互联网工作者该何去何从?
我写 Python 爬虫从智联招聘、前程无忧、Boss 直聘采集了 20000 多条信息(2019 年 4 月末采集的),对这些职位从薪资待遇、行业分布、地理位置分布等角度做了分析,试图参考开智学堂(ID:OpenMindClub)陈虎平老师在第三届开智大会上的主题演讲:《城市演化与人生设计》中的理论,找出互联网从业者相对集中的热门城区,为大家选择就业城市、选择居住地提供一个参考依据。
选取了两个有代表性的岗位,分别是新媒体运营和 Python(工程师),新媒体代表着市场营销方向的工作,Python 是现在最火的编程语言,代表着技术类的工作。
先看一下每个职位的数量:
![hougarden](https://s.hougarden.com/article/ba/0e/ba0ea0a684d6d47ae83e59f7cf598678.jpg?x-oss-process=image/quality,q_80)
对职位数量和人口数据取对数,做线性回归拟合,绘图。
![hougarden](https://s.hougarden.com/article/18/f6/18f6b0140a27c93fe95fc7eb8ed9290c.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/27/6c/276cb4acd526798e8fb24b2ef11e7a73.jpg?x-oss-process=image/quality,q_80)
为什么要取对数呢,因为每个城市的规模不一样啊,放在一起比较稍微显得有点不公平啊。
广州为什么新媒体类的职位那么多?我猜可能的原因是一些做贸易的商业公司对这一类职位有需求,而并不是专业做内容的公司。
每个城市的平均薪资怎么样?
![hougarden](https://s.hougarden.com/article/d6/05/d605d9f83327375a87ea40feecb29621.jpg?x-oss-process=image/quality,q_80)
可以明显看到,技术类工作的工资远高于非技术类工作。
下面是每个城市的详细信息。
1、北京
新媒体:
下图中每个红色的小点代表一家正在招聘新媒体运营的互联网企业。
黄色部分是地铁线路。
![hougarden](https://s.hougarden.com/article/7a/cb/7acba2b18da4b21749f55183592966bc.jpg?x-oss-process=image/quality,q_80)
用 QGIS 统计每个小方格内点的个数,然后用色块标出公司最密集的区域,颜色越深越密集。对北京熟悉的同学能看的出来这些地方是哪里吗?
![hougarden](https://s.hougarden.com/article/96/0c/960c5bb306880c87d9c46b9cdd957272.jpg?x-oss-process=image/quality,q_80)
薪资待遇:
![hougarden](https://s.hougarden.com/article/77/81/7781836237782ce5800609b9bc0514d4.jpg?x-oss-process=image/quality,q_80)
箱线图的读法(如下图),科普:
中位数就是中间值,上四分位数就是前 25% 的值,下四分位数就是前 75% 的值。
上图中的异常值,并不是有问题的数据,而是一些工资超过平均线很多的【新媒体运营总监】职位,加油吧同学们!
![hougarden](https://s.hougarden.com/article/cd/6e/cd6e3e377fc0fe6b3c6fe6226815011f.jpg?x-oss-process=image/quality,q_80)
行业关键词:
![hougarden](https://s.hougarden.com/article/66/da/66da0b2eb27306697ebf9ab73f9cd3af.jpg?x-oss-process=image/quality,q_80)
可见北京的教育培训行业与影视文化传播行业是非常火的。
Python:
直接上图,不废话了。
![hougarden](https://s.hougarden.com/article/b1/a9/b1a9c44374844098bb73af7acb066c02.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/11/f8/11f8c805bafb49dab34a5a8cc0cffdbf.jpg?x-oss-process=image/quality,q_80)
有发现传说中的西二旗吗?
![hougarden](https://s.hougarden.com/article/e1/18/e11887464d67b9af3ba4177fc28a3dc2.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/a6/24/a6249f3ab0fce704853b9a21df0da9e0.jpg?x-oss-process=image/quality,q_80)
2、上海
新媒体:
![hougarden](https://s.hougarden.com/article/4c/6f/4c6f705737f14919fae13ba4e95d7e73.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/b8/e0/b8e08612dde8905bc3776420648bb479.jpg?x-oss-process=image/quality,q_80)
发现吗?上海新媒体编辑需求最多的地方并不是张江,而是靠近市中心的徐家汇。说明这样的职位是越来越下沉了,而不是仅仅局限于科技公司。
一大波总监向我们袭来,不过普通的岗位工资是真的低,前 25% 的水平才刚刚过万……
![hougarden](https://s.hougarden.com/article/ac/de/acde0b2bcbcd9dbf869e78a59c0d5888.jpg?x-oss-process=image/quality,q_80)
行业关键词,教育培训依旧火爆,然后还有快消品、会展公关、法律等……
![hougarden](https://s.hougarden.com/article/1e/4a/1e4a97dec6d9138c97951b3b8f9f79d3.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/29/29/29299ca4766233ef3d1e83ba8c5a4ccf.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/08/45/0845e756494b479f655f68e9cdb072f3.jpg?x-oss-process=image/quality,q_80)
可以看出,技术类的岗位才接近张江。
![hougarden](https://s.hougarden.com/article/ac/7b/ac7b3d897f5fe25d7a799904277136f9.jpg?x-oss-process=image/quality,q_80)
Python 的工资就是高于新媒体编辑。
![hougarden](https://s.hougarden.com/article/98/88/9888bc980bfc22ef4c8c4a1ae381913a.jpg?x-oss-process=image/quality,q_80)
那我们把教育行业的新媒体岗位数据筛选出来看一下吧!
![hougarden](https://s.hougarden.com/article/5d/8d/5d8d5519625000e9f77f512ffd13a079.jpg?x-oss-process=image/quality,q_80)
可以看出,徐家汇、田林,对她来说都是很好的选择。
3、广州
新媒体:
![hougarden](https://s.hougarden.com/article/c9/e6/c9e65b59a347149d636872fc38170c4f.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/76/26/762689b810dcae165d64f81fc220660e.jpg?x-oss-process=image/quality,q_80)
珠江新城,你猜对了吗?
薪资比较低。知乎上有个话题:「为什么感觉在中国月入过万很普遍?」并不普遍,在广州做新媒体编辑很大概率破不了万。
![hougarden](https://s.hougarden.com/article/db/33/db33dd0ea129b65ff669869ce5a0b9e1.jpg?x-oss-process=image/quality,q_80)
现在为啥不管哪个城市教育培训行业都这么火?这是裁员 + 996 逼的大家苦练内功了么……
然后我还看到了大大的「快速消费品」五个字。
![hougarden](https://s.hougarden.com/article/99/f5/99f59c13ff3ddf7996a0073243ed732c.jpg?x-oss-process=image/quality,q_80)
Python:
![hougarden](https://s.hougarden.com/article/d9/05/d905e793f5234712ab022646170b6eae.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/ab/a4/aba4bcfd5e548ed877166352540f8d56.jpg?x-oss-process=image/quality,q_80)
不是在珠江新城了哦,靠近黄浦大道中。
![hougarden](https://s.hougarden.com/article/84/4a/844afa313ef1294ddf96098ab4035413.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/a2/dd/a2dd5a699b8e034fc93f450f4827a245.jpg?x-oss-process=image/quality,q_80)
4、深圳
新媒体:
![hougarden](https://s.hougarden.com/article/09/76/0976e057744722ffc7326e139f796fab.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/4d/9d/4d9ddda88fe49b9dd37a95ad5dd552ae.jpg?x-oss-process=image/quality,q_80)
福田区车公庙,深圳我不熟,为什么历史选择了那里?
![hougarden](https://s.hougarden.com/article/f0/61/f061a9486f856a43a3d4566656fceb1f.jpg?x-oss-process=image/quality,q_80)
深圳的工资比广州的高,看出来没有。
![hougarden](https://s.hougarden.com/article/e0/59/e059d9e29ae865a68fec8ab923e28df6.jpg?x-oss-process=image/quality,q_80)
贸易进出口……深圳的关键词
Python:
![hougarden](https://s.hougarden.com/article/80/9b/809b02b4a208df7c3d1d7be615bf9fb3.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/37/ec/37ece229192e65bcc94bfe2c3a7d3028.jpg?x-oss-process=image/quality,q_80)
技术岗位和市场岗位很重叠啊,那一块可真是个宝地呀。
![hougarden](https://s.hougarden.com/article/ce/12/ce12c9eae8eec8cd85109eec9b4cefdb.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/9b/18/9b181817e88e35abf0c9ea05eaa74481.jpg?x-oss-process=image/quality,q_80)
5、杭州
新媒体:
我只能说,真的很抱歉,杭州我没有找到地铁图,只有非常熟悉杭州的朋友,对着行政区边界图才能看的出来了。
![hougarden](https://s.hougarden.com/article/b7/9e/b79e0bbb211ae3a2a6c6e11823734c9f.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/7d/10/7d10af17a09f1e1dcaf9a130a5adfe63.jpg?x-oss-process=image/quality,q_80)
东南面最红的那个点接近滨江区西兴地铁站,我在地图上找到的,那儿是有名的梦想小镇吗?
我也不懂,没去过杭州,这次标出的所有的点都是根据数据生成的,没有主观因素在里面,只是觉得从前的梦想小镇挺有名的。
![hougarden](https://s.hougarden.com/article/c6/e4/c6e4f7d80c55b13e9e9ed21cc976878e.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/4c/66/4c6667fede0cae90a8c10554b5f74b7d.jpg?x-oss-process=image/quality,q_80)
行业关键词有纺织、皮革、服装……教育培训依旧火爆……
Python:
![hougarden](https://s.hougarden.com/article/f5/84/f58480cc6f7b25d9d92819c4f55f5c22.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/d3/59/d359dc50c00336f517b70730b7dbb3a8.jpg?x-oss-process=image/quality,q_80)
上面那个深蓝色的点是西溪,是程序员聚集地。
![hougarden](https://s.hougarden.com/article/2f/12/2f12a7f00cf5a96ff65b22df5a769ffa.jpg?x-oss-process=image/quality,q_80)
![hougarden](https://s.hougarden.com/article/9b/18/9b181817e88e35abf0c9ea05eaa74481.jpg?x-oss-process=image/quality,q_80)
6、写在后面
通过做词云,我发现每个城市的产业结构的不一样。拿新媒体来说,同样的岗位,可能北京更多的是偏向影视文化传媒,杭州偏向服装贸易,深圳偏向进出口贸易,广州一大堆快消品,上海……抱歉我没看出什么特别明显的特点。那么,做内容的小伙伴,是否应该根据每个城市不同的产业结构特点,选择属于自己的城市呢?而不是凭借一个简单的概念,「XX 城是互联网一线城市」这样。
这次采集数据,做图,让我对中国的互联网行业的就业情况有了一个新的认知,各位小伙伴也可以参考这样的方法,规划自己的就业城市和居住地。