不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。

今天是持续写作的第 16 / 100 天。
如果你有想要交流的想法、技术,欢迎在评论区留言。

很多人把技术都放在了一个比较高的位置,但是技术真的只是达成目标的一种手段,完全不懂编程,不想写代码,能不能实现爬虫程序呢案当然是可以。

本系列文章将带你进入无编码写爬虫的大门,人人都可完成爬虫程序,人人都能采集到自己需要的数据。

缓解一下视疲劳

不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。

该插件基于谷歌浏览器与火狐浏览器,但是访问谷歌插件商店需要科学上网,不好弄,建议在搜索引擎直接检索下载,如果检索不到,可以使用我帮你找的下面这个地址。

在打开的页面中,下载文件夹和 crx 文件都可以,安装不存在差异。

不写代码可以写爬虫程序吗师说可以,无编码学爬虫之一。
解决办法非常简单,修改 crx 文件后缀名为 zip,解压之后,通过文件夹进行安装。注意点击 ,选择解压之后的文件夹即可。

不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
如果还不是很清楚安装的过程,可以参照 CSDN 开发助手首页,Web Scraper 的安装过程与开发者助手是一致的。
插件官网:https://plugin.csdn.net/

除了检测插件图标以外,还需要在开发者工具中检查一下功能是否存在。开发者工具在最后增加了一项 ,出现该项就可以啦。

不写代码可以写爬虫程序吗师说可以,无编码学爬虫之一。
打开 Web Scraper 之后,其实很容易就知道下一步该如何操作了,因为这三个按钮中只有第三个可以点击。

点击 表示创建一个网站导览, 理解成爬虫的名称就行,下面的 起始页面地址,可以为多个 URL,本文案例不涉及,后面文章包含该内容。后面我们可以将 就当成一个爬虫程序,这样就比较容易理解了。

不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
此时注意到 已经可以点击,点击之后会罗列出所有的 ,其实就是你可以写多个爬虫程序,这个地方是个清单。

不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
进入到某个具体的爬虫程序之后,上面的下拉列表可以进行操作了,不过暂时忽略。

点击 之后,跳转的页面为下图所示,重要的地方有两个,第一个是 ,该值的选择影响界面输入内容,还有一个需要注意, 父选择器,注意里面的值现在是 。

不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
静态图不是很少查看,使用动态图进行展示,点击该按钮之后,可以进入打开的网页进行选择,例如我点击的位置是文件的标题,点击一个之后,底色变红,在点击第二个,这样之后,Web Scraper 会自动将符合你点选规律的所有内容都选中,也就是下图展示的都为红色。你可以核对一下是否有问题,如无问题,点击窗口中间位置的 即可结束选择。
不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
在 id 中书写一个名称之后,保存该选择器即可。
不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
点击右侧的 之后,出现的界面发现只有一条数据,和我们预期希望获得的多条数据不一致,点击 进入 继续修改。
不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
保存选择器,返回上一界面,在点击 出现多条数据表示本次操作完成。
不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
点击 进入界面需要设置一下请求数量与每个页面的请求延迟,一般保持默认即可。
不写代码可以写爬虫程序吗师说可以,无编码学爬虫之一。
点击页面中的刷新按钮,数据拿到完成任务。
不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
注意最终的本地文件中的列名称如下,前面两个是系统自动生成的忽略即可,最后的一列是我们希望的数据,并且列名为刚才定义的 值。
不写代码可以写爬虫程序吗?老师说可以,无编码学爬虫之一。
到此,第一个案例已经完成。一行代码没有写就完成了一个爬虫程序。

写在后面

肯定第一次学习的时候有朋友会说,好麻烦啊,还不如简单写程序,用 爬取简单呢。其实不然,随着后续课程的展开,你会发现这玩意很好使,在某些网站,尤其是有反爬手段的网站,这个使用起来简单、粗暴、有效。

《爬虫百例教程》点击发现惊喜


如果你想跟博主建立亲密关系,可以关注同名公众号 梦想橡皮擦,近距离接触一个逗趣的互联网高级网虫。
博主 ID:梦想橡皮擦,希望大家点赞、评论、收藏。

来源:梦想橡皮擦

声明:本站部分文章及图片转载于互联网,内容版权归原作者所有,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2020年11月4日
下一篇 2020年11月4日

相关推荐