首页后端开发PHP十分钟带你了解PHP实现爬虫的过程

十分钟带你了解PHP实现爬虫的过程

时间2024-02-02 07:46:02发布访客分类PHP浏览992
导读:收集整理的这篇文章主要介绍了十分钟带你了解PHP实现爬虫的过程,觉得挺不错的,现在分享给大家,也给大家做个参考。文字信息我们尝试获取表的信息,这里,我们就用某校的课表来代替: 接下来我们就上代码:a.php <?php header...
收集整理的这篇文章主要介绍了十分钟带你了解PHP实现爬虫的过程,觉得挺不错的,现在分享给大家,也给大家做个参考。

文字信息

我们尝试获取表的信息,这里,我们就用某校的课表来代替:

接下来我们就上代码:

a.php

 ?php  header( "Content-tyPE:text/htML;
    Charset=utf-8" );
     $ch = curl_init();
            $url ="表的链接";
            curl_setopt ( $ch , CURLOPT_USERAGENT ,"mozilla/5.0 (Windows NT 10.0;
     Win64;
     x64) Applewebkit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.113 Safari/537.36" );
            curl_setopt($ch,CURLOPT_URL,$url);
            curl_setopt($ch, CURLOPT_RETURNtransfer, 1);
            $content=curl_exec($ch);
            preg_match_all("/td rowspan=\"\d\">
    (.*?)\/td>
    \ntd rowspan=\"\d\">
    (.*?)\/td>
    td rowspan=\"\d\" align=\"\w+\">
    (.*?)\/td>
    td rowspan=\"\d\" align=\"\w+\">
    (.*?)\/td>
    td>
    (.*?)\/td>
    \ntd>
    (.*?)\/td>
    td>
    (.*?)\/td>
    /",$content,$matchs,PREG_SET_ORDER);
    //匹配该表所用的正则        var_dump($matchs);
    

然后咱们就运行一下:

成功获取到课表;

图片获取

绝对链接

我们以百度图库的首页为例

b.php

  ?php  header( "Content-type:text/html;
    Charset=utf-8" );
          $ch = curl_inIT();
        $url="http://image.baidu.COM/";
        curl_setopt ( $ch , CURLOPT_USERAGENT ,"Mozilla/5.0 (Windows NT 10.0;
     Win64;
     x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.113 Safari/537.36" );
        curl_setopt($ch,CURLOPT_URL,$url);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        $content=curl_exec($ch);
        $string=file_get_contents($url);
         preg_match_all("/img([^>
    ]*)\s*src=('|\")([^'\"]+)('|\")/",                     $string,$matches);
        $new_arr=array_unique($matches[3]);
     foreach($new_arr as $key){
             echo "img src=$key>
    ";
     }
    

然后,我们就获得了下面的页面:

相对链接

百度图库的图片的链接大部分是绝对链接,那么当我们遇到网页图片为相对链接的时候,我们该怎么处理呢?其实很简单,我们只需要将循环那部分改为

那么我们就可以同样在浏览器中输出图片了;

感谢大家的阅读,希望大家有所收益。

推荐教程:《php教程》

以上就是十分钟带你了解PHP实现爬虫的过程的详细内容,更多请关注其它相关文章!

声明:本文内容由网友自发贡献,本站不承担相应法律责任。对本内容有异议或投诉,请联系2913721942#qq.com核实处理,我们将尽快回复您,谢谢合作!


若转载请注明出处: 十分钟带你了解PHP实现爬虫的过程
本文地址: https://pptw.com/jishu/596558.html
手把手教你用php实现图片上传功能 PHP如何操作json?方法介绍

游客 回复需填写必要信息