大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

2021-06-18 21:27:41 40点赞 242收藏 22评论

开一个新的系列,爬数据分析coser小姐姐,达到一定数量热度,我就更新下一期 。

爬数据都是设置好参数,软件自己来跑的,这期用cosplay的关键词来搜coser小姐姐 ,爬到931位的数据,最后两个晚上,经过人手查看网页内容,精选制作了一份我们“值男”喜爱的列表。

爬数据的软件是八爪鱼,后附有详细教程

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

一、写作说明

进入大数据时代,跟别人聊天大数据是什么你都不知道,这就尴尬,日常我们接触到的大数据都是掌握在电商、快递、微博等地方,我们能从他们手上爬点数据吗?是可以的,自己学了一下八爪鱼采集器,是一个免费的工具,下载了注册帐号就可以用。

二、爬取数据方式

打开浏览器,我们要搜Cosplay博主,就在微博高级查找里面的标签输入cosplay这个关键词,然后选小姐姐, 看看粉丝最多的小姐姐们为什么可以吸粉无数

先看看爬到哪些小姐姐,节选了20w-100w粉丝的几位小姐姐,都是美美哒,喜欢吧,喜欢就开始我们的爬数据之旅(后面有小姐姐们的微博的传送门)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

三、打开八爪鱼软件,爬数据

打开软件,这里有一个爬微博的现成模板,点进去有搜博主信息的预设模板,

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

但是要输入个人的微博登陆名字和密码,呃这个是大数据软件,输入进去还是不很放心,就有用了另外一个途径

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

首先我们在微博网页里面高级搜索,用cosplay,和小姐姐作为关键词

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

按搜索完,会出现一个地址和结果,还需要翻页,有好多页,点搜索结果的第二页,将看到完整网址复制好备用。

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

新建任务,选批量生成,然后吧刚才的网址粘贴进去,把page=2的2删除,点添加参数,把2的位置用参数1替换,测试生成网址,

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

在点添加参数的时候会出现下面的对话框,设置从第一页开始搜,每次翻一页,共50页,微博默认50

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

确定后会生成50个页面的网址,等下就爬这些搜索结果页了,最后点保存

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

保存后,会自动对第一页进行分析网页数据,看看那些是可以生成结果表格的

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

分析完毕可以看到第一页每个博主的信息已经可以生成一个表格了,这里选择生成采集设置

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

生成之后点击左侧的菜单,会出现一个数据列表,信息4就是我们要的粉丝数量,这里我们可以都不管,因为数据不多,可以全部采集,直接采集

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

点采集,选启动本地采集

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

启动后,软件就会对每页19个博主信息,50个结果网页进行数据采集,一会儿就爬完了

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

最后采集到931条,

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

选Excel导出,方便我们后面处理想要的结果

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

四、处理数据

打开excel表格,其实我们就要把粉丝进行排列,然后按排名靠前,粉丝多的小姐姐的微博进行访问和默默关注就行了

这里也是有教程的

打开ecxel表格,先把微博粉丝XX万这个字段进行处理,

先查找粉丝替换为无内容,然后把万替换为0000

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

接着按粉丝数量来进行排序,我们这次爬到的博主排名第一的有万粉丝挺厉害的啊,

有了列表,链接还不能直接点击,要对第二列对应的网址进行处理,在右侧新建一列,输入“=HYPERLINK(B2)”这个函数,就可以把第二列的文字网址转换为超链接,然后另存为htm文件,就可以拖到顺手的浏览器打开访问了

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

这个就是我处理后的网页文件,直接点击就直达购买页面,呃。。。是博主的微博大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

这次的关键词不够多,肯定没有对所有的玩cosplay的小姐姐全部网罗进来,大数据就是要不断挖掘不断收集,形成一个数据库,慢慢完善。

最后还对对采集到的数据,粉丝数量排名前100的还经过人工评鉴,优化了列表,形成了赏心悦目的精华部分, 灰色的可以不用看了,红色的是精华所在。

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

下一期分析一下,粉丝数量众多的coser,值得我们值男关注的都有哪些代表博主。


最后,看看爬到哪些漂亮的小姐姐呢,我爬到数据,一共931位,未删除不是COSER博主,按931位博主的粉丝来排名,下面是一部分的coser小姐姐的微博

粉丝量排名100的coser @叫我千寻大人

粉丝21.5万,发微博371条,

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

接着是粉丝量排名84的 @浅浅ASAKI

粉丝28.2万,发微博3707条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

粉丝量排名64的 @奶狮_

粉丝35.2万,发微博521条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名50的 @瓜希酱

粉丝44.7万,发微博7339条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名49的 @南桃Momoko

粉丝44.8万,发微博669条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名33的 @HENTAI狩子

粉丝44.8万,发微博669条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名14的 @Misa喵老师

粉丝103.8万,发微博4053条

微博:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名12的 @走路摇ZLY

粉丝129.2万,发微博5049条

微博:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

最后来张一位粉丝只有2.7万的coser @萌萌哒阿晗,我认为是被低估了,还没宣传好,感觉是混血儿

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)


未经授权,不得转载
展开 收起

《矮大紧指北》音频节目

《矮大紧指北》音频节目

100元起

《改善两性关系的秘密第二季》音频节目

《改善两性关系的秘密第二季》音频节目

88元起

《局座讲风云人物》音频节目

《局座讲风云人物》音频节目

99.5元起

《老梁的四大名著情商课》 音频节目

《老梁的四大名著情商课》 音频节目

99.5元起

《蒋勋细说红楼梦》音频节目

《蒋勋细说红楼梦》音频节目

90元起

《涂梦珊:最美声音课堂》音频节目

《涂梦珊:最美声音课堂》音频节目

99元起

《蒋勋:不焦虑的慢生活指南》音频节目

《蒋勋:不焦虑的慢生活指南》音频节目

249元起

《精读中小学必读名著100本》音频节目

《精读中小学必读名著100本》音频节目

49元起

《乐乐课堂:小学语文知识点大全》

《乐乐课堂:小学语文知识点大全》

119.4元起

《李小牧深喉日本》音频节目

《李小牧深喉日本》音频节目

69元起

《小猪佩奇全集:给宝贝的听觉盛宴》音频节目

《小猪佩奇全集:给宝贝的听觉盛宴》音频节目

199元起

《林老师讲日语:零基础定制版》音频节目

《林老师讲日语:零基础定制版》音频节目

192元起

《精读全球好书100本【第一季】》音频节目

《精读全球好书100本【第一季】》音频节目

49.5元起

《舒克贝塔历险记》(上部/下部)音频节目

《舒克贝塔历险记》(上部/下部)音频节目

49.5元起

《河森堡:血脉偾张的人类简史》音频节目

《河森堡:血脉偾张的人类简史》音频节目

121元起

《康震品读古诗词》音频节目

《康震品读古诗词》音频节目

139.3元起
22评论

发表评论请 登录
  • 最新
  • 最热
评论举报

请选择举报理由

相关好价推荐
查看更多好价

相关文章推荐

更多精彩文章
更多精彩文章
最新文章 热门文章
242
扫一下,分享更方便,购买更轻松