QueryList使用jQuery的方式来做采集,拥有丰富的插件。
下面来演示QueryList使用Baidu搜索引擎插件轻松实现站内搜索。
安装
使用Composer安装:
安装QueryList
composer require jaeger/querylist
GitHub: /jae-jae/Qu…
安装Baidu搜索引擎插件
composer require jaeger/querylist-rule-baidu
GitHub: /jae-jae/Qu…
插件API
● Baidu baidu($pageNumber = 10):获取百度搜索引擎
class Baidu:
● Baidu search($keyword):设置搜索关键词
● Baidu setHttpOpt(array $httpOpt = []):设置HTTP选项,查看: GuzzleHttp options
● int getCount():获取搜索结果总条数
● int getCountPage():获取搜索结果总页数
● Collection page($page = 1,$realURL = false):获取搜索结果
使用
实现一个百度网盘资源搜索引擎:
<?php require 'vendor/autoload.php'; use QLQueryList; use QLExtBaidu; $ql = QueryList::use(Baidu::class); // 搜索百度网盘网站,包含‘百度’关键词的资源 $searcher = $ql->baidu()->search('site: 百度'); // 获取第一页数据,并获取真实URL连接地址 $data = $searcher->page(1,true); print_r($data->all());
抓取结果:
Array ( [0] => Array ( [title] => 百度网盘_享你所想 [link] => / ) [1] => Array ( [title] => 百度网盘 客户端下载 [link] => /download ) [2] => Array ( [title] => 百度网盘-开放平台 [link] => /platform/read ) // .... )