濮阳杆衣贸易有限公司

主頁 > 知識(shí)庫 > PHP封裝的遠(yuǎn)程抓取網(wǎng)站圖片并保存功能類

PHP封裝的遠(yuǎn)程抓取網(wǎng)站圖片并保存功能類

熱門標(biāo)簽:寶安400電話辦理 合肥外呼系統(tǒng)app 智能外呼電銷系統(tǒng) 哈爾濱400電話辦理到易號(hào)網(wǎng) 電銷機(jī)器人-快迭智能 沈陽人工智能電銷機(jī)器人公司 拉薩打電話機(jī)器人 h5 地圖標(biāo)注 高識(shí)別電銷機(jī)器人

本文實(shí)例講述了PHP封裝的遠(yuǎn)程抓取網(wǎng)站圖片并保存功能類。分享給大家供大家參考,具體如下:

?php
/**
 * 一個(gè)用于抓取圖片的類
 *
 * @package default
 * @author WuJunwei
 */
class download_image
{
  public $save_path;         //抓取圖片的保存地址
  //抓取圖片的大小限制(單位:字節(jié)) 只抓比size比這個(gè)限制大的圖片
  public $img_size=0;
  //定義一個(gè)靜態(tài)數(shù)組,用于記錄曾經(jīng)抓取過的的超鏈接地址,避免重復(fù)抓取
  public static $a_url_arr=array();
  /**
   * @param String $save_path  抓取圖片的保存地址
   * @param Int  $img_size   抓取圖片的保存地址
   */
  public function __construct($save_path,$img_size)
  {
    $this->save_path=$save_path;
    $this->img_size=$img_size;
  }
  /**
   * 遞歸下載抓取首頁及其子頁面圖片的方法 ( recursive 遞歸)
   *
   * @param  String $capture_url 用于抓取圖片的網(wǎng)址
   *
   */
  public function recursive_download_images($capture_url)
  {
    if (!in_array($capture_url,self::$a_url_arr))  //沒抓取過
    {
      self::$a_url_arr[]=$capture_url;  //計(jì)入靜態(tài)數(shù)組
    } else  //抓取過,直接退出函數(shù)
    {
      return;
    }
    $this->download_current_page_images($capture_url); //下載當(dāng)前頁面的所有圖片
    //用@屏蔽掉因?yàn)樽ト〉刂窡o法讀取導(dǎo)致的warning錯(cuò)誤
    $content=@file_get_contents($capture_url);
    //匹配a標(biāo)簽href屬性中?之前部分的正則
    $a_pattern = "|a[^>]+href=['\" ]?([^ '\"?]+)['\" >]|U";
    preg_match_all($a_pattern, $content, $a_out, PREG_SET_ORDER);
    $tmp_arr=array(); //定義一個(gè)數(shù)組,用于存放當(dāng)前循環(huán)下抓取圖片的超鏈接地址
    foreach ($a_out as $k => $v)
    {
      /**
       * 去除超鏈接中的 空'','#','/'和重復(fù)值
       * 1: 超鏈接地址的值 不能等于當(dāng)前抓取頁面的url, 否則會(huì)陷入死循環(huán)
       * 2: 超鏈接為''或'#','/'也是本頁面,這樣也會(huì)陷入死循環(huán),
       * 3: 有時(shí)一個(gè)超連接地址在一個(gè)網(wǎng)頁中會(huì)重復(fù)出現(xiàn)多次,如果不去除,會(huì)對(duì)一個(gè)子頁面進(jìn)行重復(fù)下載)
       */
      if ( $v[1]  !in_array($v[1],self::$a_url_arr) !in_array($v[1],array('#','/',$capture_url) ) )
      {
        $tmp_arr[]=$v[1];
      }
    }
    foreach ($tmp_arr as $k => $v)
    {
      //超鏈接路徑地址
      if ( strpos($v, 'http://')!==false ) //如果url包含http://,可以直接訪問
      {
        $a_url = $v;
      }else  //否則證明是相對(duì)地址, 需要重新拼湊超鏈接的訪問地址
      {
        $domain_url = substr($capture_url, 0,strpos($capture_url, '/',8)+1);
        $a_url=$domain_url.$v;
      }
      $this->recursive_download_images($a_url);
    }
  }
  /**
   * 下載當(dāng)前網(wǎng)頁下的所有圖片
   *
   * @param  String $capture_url 用于抓取圖片的網(wǎng)頁地址
   * @return Array  當(dāng)前網(wǎng)頁上所有圖片img標(biāo)簽url地址的一個(gè)數(shù)組
   */
  public function download_current_page_images($capture_url)
  {
    $content=@file_get_contents($capture_url);  //屏蔽warning錯(cuò)誤
    //匹配img標(biāo)簽src屬性中?之前部分的正則
    $img_pattern = "|img[^>]+src=['\" ]?([^ '\"?]+)['\" >]|U";
    preg_match_all($img_pattern, $content, $img_out, PREG_SET_ORDER);
    $photo_num = count($img_out);
    //匹配到的圖片數(shù)量
    echo 'h1>'.$capture_url . "共找到 " . $photo_num . " 張圖片/h1>";
    foreach ($img_out as $k => $v)
    {
      $this->save_one_img($capture_url,$v[1]);
    }
  }
  /**
   * 保存單個(gè)圖片的方法
   *
   * @param String $capture_url  用于抓取圖片的網(wǎng)頁地址
   * @param String $img_url    需要保存的圖片的url
   *
   */
  public function save_one_img($capture_url,$img_url)
  {
    //圖片路徑地址
    if ( strpos($img_url, 'http://')!==false )
    {
      // $img_url = $img_url;
    }else
    {
      $domain_url = substr($capture_url, 0,strpos($capture_url, '/',8)+1);
      $img_url=$domain_url.$img_url;
    }
    $pathinfo = pathinfo($img_url);  //獲取圖片路徑信息
    $pic_name=$pathinfo['basename'];  //獲取圖片的名字
    if (file_exists($this->save_path.$pic_name)) //如果圖片存在,證明已經(jīng)被抓取過,退出函數(shù)
    {
      echo $img_url . 'span style="color:red;margin-left:80px">該圖片已經(jīng)抓取過!/span>br/>';
      return;
    }
    //將圖片內(nèi)容讀入一個(gè)字符串
    $img_data = @file_get_contents($img_url);  //屏蔽掉因?yàn)閳D片地址無法讀取導(dǎo)致的warning錯(cuò)誤
    if ( strlen($img_data) > $this->img_size )  //下載size比限制大的圖片
    {
      $img_size = file_put_contents($this->save_path . $pic_name, $img_data);
      if ($img_size)
      {
        echo $img_url . 'span style="color:green;margin-left:80px">圖片保存成功!/span>br/>';
      } else
      {
        echo $img_url . 'span style="color:red;margin-left:80px">圖片保存失敗!/span>br/>';
      }
    } else
    {
      echo $img_url . 'span style="color:red;margin-left:80px">圖片讀取失敗!/span>br/>';
    }
  }
} // END
set_time_limit(120);   //設(shè)置腳本的最大執(zhí)行時(shí)間 根據(jù)情況設(shè)置
$download_img=new download_image('E:/images/',0);  //實(shí)例化下載圖片對(duì)象
$download_img->recursive_download_images('http://www.oschina.net/');   //遞歸抓取圖片方法
//$download_img->download_current_page_images($_POST['capture_url']);   //只抓取當(dāng)前頁面圖片方法
?>

更多關(guān)于PHP相關(guān)內(nèi)容感興趣的讀者可查看本站專題:《php socket用法總結(jié)》、《php字符串(string)用法總結(jié)》、《PHP數(shù)學(xué)運(yùn)算技巧總結(jié)》、《php面向?qū)ο蟪绦蛟O(shè)計(jì)入門教程》、《PHP數(shù)組(Array)操作技巧大全》、《PHP數(shù)據(jù)結(jié)構(gòu)與算法教程》、《php程序設(shè)計(jì)算法總結(jié)》及《PHP網(wǎng)絡(luò)編程技巧總結(jié)》

希望本文所述對(duì)大家PHP程序設(shè)計(jì)有所幫助。

您可能感興趣的文章:
  • PHP 抓取新浪讀書頻道的小說并生成txt電子書的代碼
  • 使用PHP curl模擬瀏覽器抓取網(wǎng)站信息
  • php抓取并保存網(wǎng)站圖片的實(shí)現(xiàn)代碼
  • PHP抓取、分析國(guó)內(nèi)視頻網(wǎng)站的視頻信息工具類
  • php抓取網(wǎng)站圖片并保存的實(shí)現(xiàn)方法
  • thinkphp 抓取網(wǎng)站的內(nèi)容并且保存到本地的實(shí)例詳解
  • php抓取頁面與代碼解析 推薦
  • PHP實(shí)現(xiàn)抓取HTTPS內(nèi)容
  • php抓取頁面的幾種方法詳解
  • PHP實(shí)現(xiàn)的抓取小說網(wǎng)站內(nèi)容功能示例

標(biāo)簽:梅州 成都 林芝 巴中 泰州 威海 張家口 山東

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《PHP封裝的遠(yuǎn)程抓取網(wǎng)站圖片并保存功能類》,本文關(guān)鍵詞  PHP,封,裝的,遠(yuǎn)程,抓取,網(wǎng)站,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《PHP封裝的遠(yuǎn)程抓取網(wǎng)站圖片并保存功能類》相關(guān)的同類信息!
  • 本頁收集關(guān)于PHP封裝的遠(yuǎn)程抓取網(wǎng)站圖片并保存功能類的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章
    土默特右旗| 辛集市| 昆山市| 湖口县| 葫芦岛市| 黄龙县| 手游| 含山县| 永和县| 津市市| 突泉县| 中山市| 介休市| 永丰县| 灌阳县| 南投县| 鄢陵县| 黎平县| 仲巴县| 宕昌县| 称多县| 图片| 五家渠市| 龙南县| 包头市| 且末县| 宁河县| 乌鲁木齐市| 黔南| 西青区| 墨玉县| 乐山市| 厦门市| 金门县| 深水埗区| 荆州市| 泗水县| 阿克苏市| 宝丰县| 攀枝花市| 大荔县|