用户名
密码
(30天内有效)
注册
注册

首页 > 案 例 >

小白想玩大数据之遇见八爪鱼采集器

我要收藏
2017-12-14

阅读数:725

收藏数 4

最近在网上看到各种大数据的大神分析采集各种数据做出各种吊炸天的数据报告,小白不甘心做一个平凡的小白于是也想来学学。于是在网址上熟练的打出了咱们城市数据派的网站,想借鉴一下咱们的大神四干出酷炫的大数据分析案例的。说干就干,恩,干大数据首先要学爬虫,要学爬虫先学Java,恩,坚定决心这个读书的时候听过,第二J2EE,mysql,jdbc,html,css,javascript,第三……好了,我放弃了。


但是本着初生小白就怕虎,车到山前就走路的小白精神,我决定换一个思维,要不然我怎么能当一个顶天立地的不甘平凡的小白。


于是再问度娘“网络爬虫”,是不是看到了八爪鱼采集器。(啊,没有)看出来没有,这就是小白和你们的不同了。


1513246072767837.png

 

在这里。接下来一堆安装,不懂安装的就一直下一步,自从我们老师教了我这一招以后,什么游戏我都安装得了了,一口气安装5个游戏也不怕了,就算英文我也能对付了。只是最近总觉得电脑卡,还不时弹出几个美女扭腰的动画弄得小白我打游戏都不能认真了。


1513246087440224.png


安装完成后会弹出登录注册的框我用电话注册的,(啥你看出来我电话号码是1213456789了,你厉害)


1513246101558305.png


据说新浪的新闻网页不错于是我打开了新浪新闻首页,怎么进去的,我肯定不能说我在度娘那个框框里面搜出来的呀,要是让度娘知道了,下次他不让我进了。上次就因为我说我从百度进谷歌弄得谷歌都打不开了。

1513246119328147.png


接下来新浪搜索摩拜单车,接下来就发生了神奇的事情了。出来好多摩拜单车单车的视频—额,新闻。

1513246132382029.png


就是这样子,反正我不会注意到新浪新闻搜索下面的那些Array的,因为重复有美感

1513246153400149.png

 

接下来就该八爪鱼上场了,当当当党。

1513246174256737.png

 

作为小白,用向导模式是我的特权,进入了,我不懂所以我看了学习模式,看多了就直接让我采集了。

1513246200222549.png

1513246219583605.png

 

网址输入http://search.sina.com.cn/?q=%E6%91%A9%E6%8B%9C%E5%8D%95%E8%BD%A6&c=news&from=channel&ie=utf-8&col=&range=&source=&country=&size=&time=&a=&page=1&pf=2131425450&ps=2134309112&dpc=1


下一步(好熟悉)点这几个,然后上面就出来了好多标题

1513246247841202.png

 

下一步▼

1513246263139788.png

 

下一步▼

1513246288936204.png

 

选正文,的时候要选全,哈哈,离胜利就只有一步之遥了。

1513246311499065.png

 

开始采集,采集完成后导出excel表格。

1513246335266090.png

导出的excel将文字粘贴复制到

1513246360866751.png

1513246360935314.png

1513246360813516.png

1513246361177223.png


是不是很酷炫。是不是微微感受到了共享单车中摩拜和ofo在战斗,同时还在考虑融资、加速占领市场的味道。


本文版权:城市数据派 

本期编辑:最初印象

未经授权,不得转载,如需转载,请联系城市数据派。


本站声明

本文仅代表作者观点,不代表城市数据派立场;
本文系作者授权城市数据派发表,未经许可,不得转载;
本网站上的所有内容均为虚拟服务,一经购买成功概不退款,请您理解。

分享:
点赞0
  • 联系城市数据派
    info@udparty.com
  • 顶部