当前位置:
文章详情

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

2021-06-18 21:27:41 41点赞 246收藏 23评论

开一个新的系列,爬数据分析coser小姐姐,达到一定数量热度,我就更新下一期 。

爬数据都是设置好参数,软件自己来跑的,这期用cosplay的关键词来搜coser小姐姐 ,爬到931位的数据,最后两个晚上,经过人手查看网页内容,精选制作了一份我们“值男”喜爱的列表。

爬数据的软件是八爪鱼,后附有详细教程

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

一、写作说明

进入大数据时代,跟别人聊天大数据是什么你都不知道,这就尴尬,日常我们接触到的大数据都是掌握在电商、快递、微博等地方,我们能从他们手上爬点数据吗?是可以的,自己学了一下八爪鱼采集器,是一个免费的工具,下载了注册帐号就可以用。

二、爬取数据方式

打开浏览器,我们要搜Cosplay博主,就在微博高级查找里面的标签输入cosplay这个关键词,然后选小姐姐, 看看粉丝最多的小姐姐们为什么可以吸粉无数

先看看爬到哪些小姐姐,节选了20w-100w粉丝的几位小姐姐,都是美美哒,喜欢吧,喜欢就开始我们的爬数据之旅(后面有小姐姐们的微博的传送门)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

三、打开八爪鱼软件,爬数据

打开软件,这里有一个爬微博的现成模板,点进去有搜博主信息的预设模板,

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

但是要输入个人的微博登陆名字和密码,呃这个是大数据软件,输入进去还是不很放心,就有用了另外一个途径

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

首先我们在微博网页里面高级搜索,用cosplay,和小姐姐作为关键词

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

按搜索完,会出现一个地址和结果,还需要翻页,有好多页,点搜索结果的第二页,将看到完整网址复制好备用。

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

新建任务,选批量生成,然后吧刚才的网址粘贴进去,把page=2的2删除,点添加参数,把2的位置用参数1替换,测试生成网址,

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

在点添加参数的时候会出现下面的对话框,设置从第一页开始搜,每次翻一页,共50页,微博默认50

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

确定后会生成50个页面的网址,等下就爬这些搜索结果页了,最后点保存

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

保存后,会自动对第一页进行分析网页数据,看看那些是可以生成结果表格的

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

分析完毕可以看到第一页每个博主的信息已经可以生成一个表格了,这里选择生成采集设置

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

生成之后点击左侧的菜单,会出现一个数据列表,信息4就是我们要的粉丝数量,这里我们可以都不管,因为数据不多,可以全部采集,直接采集

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

点采集,选启动本地采集

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

启动后,软件就会对每页19个博主信息,50个结果网页进行数据采集,一会儿就爬完了

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

最后采集到931条,

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

选Excel导出,方便我们后面处理想要的结果

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

四、处理数据

打开excel表格,其实我们就要把粉丝进行排列,然后按排名靠前,粉丝多的小姐姐的微博进行访问和默默关注就行了

这里也是有教程的

打开ecxel表格,先把微博粉丝XX万这个字段进行处理,

先查找粉丝替换为无内容,然后把万替换为0000

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

接着按粉丝数量来进行排序,我们这次爬到的博主排名第一的有万粉丝挺厉害的啊,

有了列表,链接还不能直接点击,要对第二列对应的网址进行处理,在右侧新建一列,输入“=HYPERLINK(B2)”这个函数,就可以把第二列的文字网址转换为超链接,然后另存为htm文件,就可以拖到顺手的浏览器打开访问了

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

这个就是我处理后的网页文件,直接点击就直达购买页面,呃。。。是博主的微博大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

这次的关键词不够多,肯定没有对所有的玩cosplay的小姐姐全部网罗进来,大数据就是要不断挖掘不断收集,形成一个数据库,慢慢完善。

最后还对对采集到的数据,粉丝数量排名前100的还经过人工评鉴,优化了列表,形成了赏心悦目的精华部分, 灰色的可以不用看了,红色的是精华所在。

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

下一期分析一下,粉丝数量众多的coser,值得我们值男关注的都有哪些代表博主。


最后,看看爬到哪些漂亮的小姐姐呢,我爬到数据,一共931位,未删除不是COSER博主,按931位博主的粉丝来排名,下面是一部分的coser小姐姐的微博

粉丝量排名100的coser @叫我千寻大人

粉丝21.5万,发微博371条,

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

接着是粉丝量排名84的 @浅浅ASAKI

粉丝28.2万,发微博3707条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

粉丝量排名64的 @奶狮_

粉丝35.2万,发微博521条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名50的 @瓜希酱

粉丝44.7万,发微博7339条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名49的 @南桃Momoko

粉丝44.8万,发微博669条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名33的 @HENTAI狩子

粉丝44.8万,发微博669条

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名14的 @Misa喵老师

粉丝103.8万,发微博4053条

微博:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

排名12的 @走路摇ZLY

粉丝129.2万,发微博5049条

微博:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

最后来张一位粉丝只有2.7万的coser @萌萌哒阿晗,我认为是被低估了,还没宣传好,感觉是混血儿

微博地址:传送门

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)

大数据分析,爬取微博Cosplay博主粉丝量,看看哪位小姐姐值得关注(第一期)


展开 收起
23评论

  • 精彩
  • 最新
  • 这居然没人收藏评论?不科学啊***

    校验提示文案

    提交
    刚刚发没多久,没人看到吧 [小眼睛]

    校验提示文案

    提交
    收起所有回复
  • 下次请来一份一键爬取coser微博照片的教程 [高兴]

    校验提示文案

    提交
  • 脸形好奇怪,是P的吗

    校验提示文案

    提交
    cosplay都是化妆+美颜拉满的啊

    校验提示文案

    提交
    还有年薪百万国宝级PTU

    校验提示文案

    提交
    收起所有回复
  • 这种文章我一般原则先收藏 [高兴]

    校验提示文案

    提交
  • 好活儿 紫薯布丁 [高兴] [高兴] [高兴]

    校验提示文案

    提交
  • 不是特别好看(○`ε´○)

    校验提示文案

    提交
  • 都是10级美颜拉满

    校验提示文案

    提交
  • 我称之为好活 [装大款]

    校验提示文案

    提交
  • 竟然没发现鸽王

    校验提示文案

    提交
  • 软件效果不错

    校验提示文案

    提交
  • 以前学了一阵的八爪鱼,因为很多小地方需要用那个什么语言定位的,其实不难。我是用八爪鱼来爬淘宝京东,爬出来结果差强人意吧,因为每个网页关键词定位,数据位置略有差别的,后来就放弃了,精准度一般,还是吩咐下去人工采集,准确~毕竟也才几百个数据需要采集搜索。

    校验提示文案

    提交
  • 大腿真粗。。。

    校验提示文案

    提交
  • 我自己会写爬虫代码。感觉还好

    校验提示文案

    提交
  • B站看KleinerPixel,这才是真大神cos

    校验提示文案

    提交
  • 只有我觉得像女装大佬?

    校验提示文案

    提交
  • 这里就不懂了吧,coser有时候会炸号。换个新号没粉丝 [邪恶]

    校验提示文案

    提交
  • 6666 来个抖音的教程可行?

    校验提示文案

    提交
  • 丑得一匹还傲的一匹

    校验提示文案

    提交
    吃不到别说酸~

    校验提示文案

    提交
    收起所有回复
  • 八爪鱼这个软件不错

    校验提示文案

    提交
提示信息

取消
确认
评论举报

相关文章推荐

更多精彩文章
更多精彩文章
最新文章 热门文章
246
扫一下,分享更方便,购买更轻松