Python爬虫44万条数据揭秘:如何成为网易音乐评论区的网红段子手
发布时间:2019-10-21 05:39:15 所属栏目:教程 来源:嗨学python
导读:【大咖·来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 获取数据 其实逻辑并不复杂: 爬取歌单列表里的所有歌单url。 进入每篇歌单爬取所有歌曲url,去重。 进入每首歌曲首页爬取热评,汇总。 歌单列表是这样的: 翻页并观察它的url变化,注意
按照点赞数排个序。
![]() 再看看哪些热评是被复制粘贴搬来搬去的。
![]() 第一个和第三个只是末尾有没有句号的区别,可以归为一类。这样的话,重复次数最多个这句话竟然重复了412次,额~~ 看看上热评次数次数最多的是哪位大神?从他的身上我们能学到什么经验?
按照 user_id 汇总一下,排序。 ![]() 成功“捕获”一枚“段子手”,上热评次数高达347,我们再看看这位大神究竟都评论些什么?
![]() 这位“失眠的陈先生”看来各种情话娴熟于手啊,下面就以他举例来看看如何成为网易云音乐评论里的热评段子手吧。 数据可视化 先看看这347条评论的赞数分布。
![]() 很明显,赞数并不多,大部分都在500赞之内,几百赞却能跻身热评,这也侧面说明了这些歌曲是比较小众的,看来是经常在新歌区广撒网。 我们使用len() 求出每条评论的字符串长度,再画个分布图 ![]() 评论的字数集中在18—30字之间,这说明在留言时要注意字数,保险的做法是不要太长让人读不下去,也不要太短以免不够经典。 做个词云。 ![]()
(编辑:晋中站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |