最新文章专题视频专题问答1问答10问答100问答1000问答2000关键字专题1关键字专题50关键字专题500关键字专题1500TAG最新视频文章推荐1 推荐3 推荐5 推荐7 推荐9 推荐11 推荐13 推荐15 推荐17 推荐19 推荐21 推荐23 推荐25 推荐27 推荐29 推荐31 推荐33 推荐35 推荐37视频文章20视频文章30视频文章40视频文章50视频文章60 视频文章70视频文章80视频文章90视频文章100视频文章120视频文章140 视频2关键字专题关键字专题tag2tag3文章专题文章专题2文章索引1文章索引2文章索引3文章索引4文章索引5123456789101112131415文章专题3
当前位置: 首页 - 科技 - 知识百科 - 正文

php爬虫怎么运行

来源:动视网 责编:小采 时间:2020-11-27 14:19:19
文档

php爬虫怎么运行

php爬虫怎么运行:说到做爬虫,大家都可能第一时间想到的是python,其实php也是可以用来写爬虫程序的。php一贯简洁、易用,亲测使用PHPspider框架能写出一个简单的爬虫。匹配方式使用XPach语法。 (推荐学习:PHP视频教程)<php require '/vendor/
推荐度:
导读php爬虫怎么运行:说到做爬虫,大家都可能第一时间想到的是python,其实php也是可以用来写爬虫程序的。php一贯简洁、易用,亲测使用PHPspider框架能写出一个简单的爬虫。匹配方式使用XPach语法。 (推荐学习:PHP视频教程)<php require '/vendor/
 说到做爬虫,大家都可能第一时间想到的是python,其实php也是可以用来写爬虫程序的。php一贯简洁、易用,亲测使用PHPspider框架能写出一个简单的爬虫。

匹配方式使用XPach语法。 (推荐学习:PHP视频教程)

<?php
require '/vendor/autoload.php';
use phpspider\core\phpspider;

/* Do NOT delete this comment */
/* 不要删除这段注释 */

$configs = array(
'name' => '简书',
'log_show' =>false,
'tasknum' => 1,
//数据库配置
'db_config' => array(
'host' => '127.0.0.1',
'port' => 3306,
'user' => 'root',
'pass' => '',
'name' => 'demo',
),
'export' => array(
'type' => 'db',
'table' => 'jianshu', // 如果数据表没有数据新增请检查表结构和字段名是否匹配
),
//爬取的域名列表 
'domains' => array(
 'jianshu',
 'www.jianshu.com'
), 
//抓取的起点
'scan_urls' => array(
 'https://www.jianshu.com/c/V2CqjW?utm_medium=index-collections&utm_source=desktop'
),
//列表页实例
'list_url_regexes' => array(
 "https://www.jianshu.com/c/\d+"
),
//内容页实例
// \d+ 指的是变量
'content_url_regexes' => array(
 "https://www.jianshu.com/p/\d+",
),
'max_try' => 5,

'fields' => array(
 array(
 'name' => "title",
 'selector' => "//h1[@class='title']",
 'required' => true,
 ),
 array(
 'name' => "content",
 'selector' => "//div[@class='show-content-free']",
 'required' => true,
 ),
),
);

$spider = new phpspider($configs);
$spider->start();

打完代码后,记得根据要抓取的内容建立对应的数据库、数据表,字段要能对对上。

接着cmd,输入

php -f d:\jianshu\spider.php

运行如下

文档

php爬虫怎么运行

php爬虫怎么运行:说到做爬虫,大家都可能第一时间想到的是python,其实php也是可以用来写爬虫程序的。php一贯简洁、易用,亲测使用PHPspider框架能写出一个简单的爬虫。匹配方式使用XPach语法。 (推荐学习:PHP视频教程)<php require '/vendor/
推荐度:
标签: 如何 php 运行
  • 热门焦点

最新推荐

猜你喜欢

热门推荐

专题
Top