神箭手客户端

神箭手是云服务,所有操作都可以登录网站后进行。同时,神箭手也提供了客户端软件,方便习惯软件的用户使用。可以通过官网下载最新版客户端软件

神箭手客户端的账户、功能和体验都和网站同步。此外,通过客户端导出数据到本地文件速度更快更稳定;客户端还增加了可视化点选自动生成爬虫代码的功能,适合不会编程的用户自定义爬虫。

其他功能和在官网上的操作是一样的,下面重点介绍如何点选生成爬虫代码

使用步骤

登录神箭手客户端 ——> 创建点选模式的爬虫 ——> 点选要爬取的数据 ——> 启动爬虫

步骤一 登录神箭手客户端

打开安装好的神箭手客户端,输入神箭手账号和密码,登录进入控制台

步骤二 创建点选模式的爬虫

点击 “新建应用” > 选择 “爬虫”,点击 “下一步” > 选择 “自己开发” > 选择 “点选模式”。输入爬虫名称,点击”创建”

步骤三 点选要爬取的数据

1、 打开创建的爬虫,进入 打开点选面板

2、在点选面板中,进行 点选操作

首先,输入一个包含所需数据的url(比如 https://www.leiphone.com/news/201712/WxtDEEQEXXDZLYev.html ),回车加载显示内容:

然后,在显示的网页内容中,点击选择要采集的数据,比如选择采集文章的标题和内容:

点击左侧的高级设置,可以设置爬虫的列表页、内容页url正则表达式、是否自动JS渲染等,提高爬虫效率:

步骤四 启动爬虫

完成点选后,点击 开始爬取。稍等一会,爬虫就会自动开始运行了

常见问题

1、点击点选面板的 查看代码,可以随时查看点选自动生成的爬虫代码,可以拷贝代码到编程模式的爬虫内,进行二次开发