php爬虫怎么运行

php  /  管理员 发布于 7年前   229

说到做爬虫，大家都可能第一时间想到的是python，其实php也是可以用来写爬虫程序的。php一贯简洁、易用，亲测使用PHPspider框架能写出一个简单的爬虫。

匹配方式使用XPach语法。 （推荐学习：PHP视频教程）

<?phprequire '/vendor/autoload.php';use phpspider\core\phpspider;/* Do NOT delete this comment *//* 不要删除这段注释 */$configs = array('name' => '简书','log_show' =>false,'tasknum' => 1,//数据库配置'db_config' => array('host'  => '127.0.0.1','port'  => 3306,'user'  => 'root','pass'  => '','name'  => 'demo',),'export' => array('type' => 'db','table' => 'jianshu',  // 如果数据表没有数据新增请检查表结构和字段名是否匹配),//爬取的域名列表  'domains' => array(    'jianshu',    'www.jianshu.com'), //抓取的起点'scan_urls' => array(    'https://www.jianshu.com/c/V2CqjW?utm_medium=index-collections&utm_source=desktop'),//列表页实例'list_url_regexes' => array(    "https://www.jianshu.com/c/\d+"),//内容页实例//  \d+  指的是变量'content_url_regexes' => array(    "https://www.jianshu.com/p/\d+",),'max_try' => 5,'fields' => array(    array(        'name' => "title",        'selector' => "//h1[@class='title']",        'required' => true,    ),    array(        'name' => "content",        'selector' => "//div[@class='show-content-free']",        'required' => true,    ),),);$spider = new phpspider($configs);$spider->start();

打完代码后，记得根据要抓取的内容建立对应的数据库、数据表，字段要能对对上。

接着cmd，输入

php -f d:\jianshu\spider.php

运行如下

以上就是php爬虫怎么运行的详细内容，更多请关注其它相关文章！