首页 > 科技 > python爬100W数据之后,找到了知乎人均百万的秘密

python爬100W数据之后,找到了知乎人均百万的秘密


知乎的梗

谢邀,人在美国,刚下飞机

博士学位

哈佛毕业

月入百万

从小学习舞蹈国画乐器

家父是一名黑道大哥

评论区戾气太重

圈内人士太多

利益相关

匿了

侵删


不知道,你听说过哪些梗,可以在下方留言讨论,因为知乎的问答邀请机制,衍生出来的很多梗,知乎也被称为逼乎了。

友情提示:文末有....

真假

当然,不能轻易听信传闻,人均985,年薪百万,这个问题,我们可以通过python做数据分析之后由大家来评判了。

思路

为保证数据的质量,避免爬到一些僵尸号啥的,我选择爬取关注列表而非粉丝列表。我随机挑选了一位粉丝过万的优秀回答者作为起始,爬取他的关注列表,再对列表中的每个人爬取其关注列表,以此类推。

想要啥数据呢?

用户的学校和公司肯定是必须要知道的,我想看看到底这些人是编的还是真的哈哈哈,其次就是性别,职业,相关公司,活跃程度等。

用python开了多线程,下载了大概 6 个小时,爬了 60 多万用户的关注列表,拿到了 奖金15G 的数据。

部分代码,剩余代码看文末

理论上有 1000多万用户,可惜有很多重复的,去重后将数据导入 Elasticsearch,得到 60+ 万用户数据:

数据可视化分析(Elasticsearch+Kibana)

知乎的职业分布?

以下显示知乎主流职业,同样根据知乎用户个人信息里填写的职业为准,我们可以看到一些耳熟能详的公司,阿里、微软、IBM等


知乎职业排名


这幅图里面看到,产品经理,程序猿,不过职业腾讯是什么鬼?这些岗位工资相对来讲还是不错的,人均百万难道是真的?

最多员工的公司top

可以看到 BAT 全部上榜了,紧接着是网易,华为,谷歌,微软,美团。都是厉害的互联网相关企业,当然,我觉得有水份。


知乎用户学历

字体越大代表用户越多

呦嚯嚯,这学历真的很高,这人均985看来还真是那么回事,毕竟学历都还挺高的

知乎关注TOP榜


有熟悉的人吗?不知道他们月收入有多少,先羡慕下。

总结

是不是人均985,年薪百万就由大家自己评判了,也算是强化了下自己的python技能,如果是编程这个行业,年薪百万还是可能的,小编也还可以,嘿嘿嘿,同时代码量远不止展示的那一丢丢,如果你是即将要学的或者已经再学的,可以看下方,学学python,学学爬虫或者数据分析。

小编寄语

最后小编帮助大家整理了一套python教程,下面展示了部分,希望也能帮助对编程感兴趣,想做数据分析,人工智能或者希望从事编程开发的小伙伴,毕竟python工资还可以,如果能帮到你请点赞、点赞、点赞。

python视频系列

电子书系列:

获取方式

点赞,收藏并转发文章后点击小编头像或昵称

点赞才有哦,举手之劳,非常感谢,你觉得知乎还有什么梗?欢迎留言讨论。

本文来自投稿,不代表本人立场,如若转载,请注明出处:http://www.souzhinan.com/kj/282438.html