PHP（外文名:PHP: Hypertext Preprocessor，中文名：“超文本预处理器”）是一种通用开源脚本措辞。语法接管了C措辞、Java和Perl的特点，利于学习，利用广泛，紧张适用于Web开拓领域。PHP 独特的语法稠浊了C、Java、Perl以及PHP自创的语法。它可以比CGI或者Perl更快速地实行动态网页。用PHP做出的动态页面与其他的编程措辞比较，PHP是将程序嵌入到HTML（标准通用标记措辞下的一个运用）文档中去实行，实行效率比完备天生HTML标记的CGI要高许多；PHP还可以实行编译后代码，编译可以达到加密和优化代码运行，使代码运行更快。——百度百科的描述。
二、爬虫有什么用？
爬虫有什么用？先说一下爬虫是什么东西，我认为爬虫便是一个网络信息网络程序，大概我自己的理解有缺点，也请大家给我示正。既然爬虫是一个网络信息网络程序，那便是用来网络信息，并且网络的信息是在网络上面的。如果还是不太清楚爬虫有什么用，我就举几个爬虫运用的例子：搜索引擎就须要爬虫网络网络信息供人们去搜索；大数据的数据，数据从哪里来？便是可以通过爬虫在网络中爬取（网络）而来。
三、常日听到爬虫会想到 Python，但为什么我用 PHP，而不用 Python 呢？
Python 我说实话，我不会 Python。PHP 写东西我一贯都因此为，你只要想出算法程序就已经出来了，不用考虑太多数据类型的问题。PHP 的语法和其他编程措辞差不多，就算你开始不会 PHP，你也可以立时上手。本人实在也是初学 PHP,想通过写一些东西提高自己的水平。四、PHP爬虫第一步
PHP爬虫第一步，第一步......第一步当然便是搭建 PHP 的运行环境，没有环境PHP又怎么能运行呢？就像鱼不能离开水一样。(我见识还不足，可能我举的鱼的例子不足好，请见谅。)在Windows的系统下我利用 WAMP，而在Linux的系统下我利用 LNMP 或者 LAMP。
WAMP：Windows + Apache + Mysql + PHP
LAMP：Linux + Apache + Mysql + PHP
LNMP：Linux + Nginx + Mysql + PHP
Apache 和 Nginx 是 Web 做事器软件。
Apache或Nginx、Mysql 以及 PHP 这些都是 PHP Web 的基本配置环境。网上有 PHP Web 环境的安装包，这些安装包利用很方便，不须要每给东西安装以及配置。但如果你对这些集成安装包担心安全问题，你可以到这些程序的官网下载然后在网上找配置教程就可以了。
五、 PHP爬虫第二步
<?php
// 爬虫核心功能：获取网页源码
$html = file_get_contents(\公众https://www.baidu.com/index.html\"大众);
// 通过 php 的 file_get_contents 函数获取百度首页源码，并传给 $html 变量
echo $html;
// 输出 $html
?>
爬虫网络核心功能已经写出来了，为什么说就这么几行代码就把爬虫核心功能写出来了呢？我猜有人已经明白了吧，实在是由于爬虫是数据获取的程序，就上面几行代码实在已经能够获取数据了，以是爬虫的核心功能已经写出来了。可能有人会说“你这个也太菜了吧！
有什么用？”，虽然我是很菜，但请别说出来，让我好好装个X。
实在爬虫是用来干嘛，紧张看你想让它来干嘛。就像我前些日子为了好玩写了一个搜索引擎网站出来，当然网站很菜，结果排序没有规律，很多都查不到。我的搜索引擎的爬虫便是要写一个适宜于搜索引擎的爬虫。所以为了方便我也就用写搜索引擎的爬虫为目标讲解。当然了，我搜索引擎的爬虫还是不足完善，不完善的地方都是要你们自己去创造，去完善。
六、 搜索引擎爬虫的限定
搜索引擎的爬虫有时候不是不能那个网站的页面获取页面源码，而是有robot.txt文件，有该文件的网站，就代表站主不肯望爬虫去爬取页面源码。
我搜索引擎的爬虫实在还有很多不敷而导致的限定，例如可能由于无法运行 JS 脚本以是无法获取页面源码。又或者网站有反爬虫的机制导致不能获取到页面源码。有反爬虫机制的网站就如：知乎，知乎便是有反爬虫的机制的网站。
七、以弄搜索引擎爬虫为例，准备写该爬虫须要的东西
PHP 编写根本正则表达式、数据库的利用、运行环境。
八、搜索引擎获取页面源码并获取页面的标题信息
<?PHP
// 通过 file_get_contents 函数获取百度页面源码
$html = file_get_contents(\"大众https://www.baidu.com/index.html\公众);
// 通过 preg_replace 函数使页面源码由多行变单行
$htmlOneLine = preg_replace(\公众/\r|\n|\t/\"大众,\"大众\"大众,$html);
// 通过 preg_match 函数提取获取页面的标题信息
preg_match(\公众/<title>(.)<\/title>/iU\公众,$htmlOne,$titleArr);
// 由于 preg_match 函数的结果是数组的形式
$title = $titleArr[1];
// 通过 echo 函数输出标题信息
echo $title;
?>
报缺点示例：
Warning: file_get_contents(\"大众https://https://127.0.0.1/index.php\公众) [function.file-get-contents]: failed to open stream: Invalid argument in E:\website\blog\test.php on line 25
https是SSL加密协议，如果涌现获取页面时报上面的缺点，代表你的 PHP 可能少了OpenSSL 的模块，你可以到网上查找办理办法。
九、搜索引擎爬虫的特点
虽然我没见过像“百度”，“Google”它们的爬虫，可是我自己通过预测，以及在实际爬去过程当中碰着的一些问题，自己总结的几个特点。
通用性通用性是由于我认为搜索引擎的爬虫一开始并不是针对哪一个网站制订的，以是哀求能爬取到的网站尽可能的多，这是第一点。而第二点，便是获取网页的信息便是那些，一开始不会由于某些个别分外小网站而放弃某些信息不提取，举个例子：一个小网站的一个网页meta标签里没有描述信息（description）或者关键词信息（keyword），就直接放弃了描述信息或者关键词信息的提取，当然如果真的某一个页面没有这些信息我会提取页面里的笔墨内容作为添补，反正便是尽可能达到爬取的网页信息每个网页的信息项都要一样。这是我认为的搜索引擎爬虫的通用性，当然我的想法可能是缺点的。
不愿定性不愿定性便是我的爬虫获取什么网页我是掌握不足全面的，只能掌握我能想到的情形，这也是由于我写的算法便是这样的缘故原由，我的算法便是爬取获取到的页面里的所有链接，再去爬去获取到的这些链接，实在是由于搜索引擎并不是搜某一些东西，而是尽可能的多，由于只有更多的信息，才能找到一个最贴切用户想要的答案。以是我就以为搜索引擎的爬虫就要有不愿定性。
十、到现在可能涌现的问题
获取的源码涌现乱码<?PHP
// 乱码办理办法，把其他编码格式通过 mb_convert_encoding 函数统一转为 UTF-8 格式
$html = mb_convert_encoding($html,'UTF-8','UTF-8,GBK,GB2312,BIG5');
// 还有一种由于gzip以是涌现乱码的，我会在往后讲
?>
2. 获取不到标题信息
<?PHP
// 获取不到标题信息办理办法，首先判断是否能获取到页面源码
// 如果能获取到但还是不能获取到标题信息
// 我预测的问题是：由于我教的是利用正则表达式获取的，源码没有变成一行，获取起来就会涌现问题
$htmlOneLine=preg_replace(\"大众/\r|\n|\t/\"大众,\"大众\公众,$html);
?>
3.获取不到页面源码
<?PHP
// 像新浪微博你可能获取到的是“Sina Visitor System”
// 办理办法添加header信息
$opts = array(
'http'=>array(
'method'=>\"大众GET\公众,
\"大众timeout\公众=>20,
'header'=>\"大众User-Agent: Spider \r\n\"大众,
)
);
$context = stream_context_create($opts);
$html = file_get_contents($domain,0,$context,0,150000);
// 这样就能获取到新浪微博的页面了
?>
十一、获取一个网页时的处理思路
我们先不去想很多网页，由于很多网页也便是一个循环。
获取页面源码通过源码提取页面的什么信息提取的信息要怎么处理处理后放不放进数据库十二、按照十一的思路的代码
<?php
// 一、获取源码
// 假设我们要获取淘宝首页
$html = file_get_content(\"大众https://www.taobao.com\"大众);
// 二、提取标题和文本
// 三、提取信息处理
// 处理页面源码，多行变单行
$htmlOneLine = preg_replace(\"大众/\r|\n|\t/\公众,\"大众\"大众,$html);
// 获取标题信息
preg_match(\"大众/<title>(.)<\/title>/iU\"大众,$htmlOneLine,$titleArr);
// 保留标题信息
$titleOK = $titleArr[1];
// 获取页面中的文本信息
// 处理前面不须要的head标签
$htmlText = preg_replace(\"大众/<html>(.)<\/head>/\"大众,\公众\"大众,$htmlOneLine);
// 处理style和script标签及内容
$htmlText = preg_replace(\公众/<style(.)>(.)</style>|<script(.)>(.)</script>/iU\"大众,\"大众\"大众,$htmlText);
// 处理多余标签
$htmlText = preg_replace(\公众/<(\/)?(.+)>/\"大众,\"大众\"大众,$htmlText);
// 四、保存到数据库
// 略
?>
十三、PHP 保存页面的图片思路
获取页面源码获取页面的图片链策应用函数保存图片十四、保存图片示例代码
<?php
// 利用file_get_contents()函数获取图片
$img = file_get_contents(\公众http://127.0.0.1/photo.jpg\公众);
// 利用file_put_contents()函数保存图片
file_put_contents(\公众photo.jpg\"大众,$img);
?>
