PHP获取网页所有连接的方法(附demo源码下载)
来源:易贤网 阅读:927 次 日期:2016-08-31 14:35:36
温馨提示:易贤网小编为您整理了“PHP获取网页所有连接的方法(附demo源码下载)”,方便广大网友查阅!

本文实例讲述了PHP获取网页所有连接的方法。分享给大家供大家参考,具体如下:

function getHtml($url, $charset='utf-8')

{

  $curl = curl_init();

  //curl_setopt($curl, CURLOPT_HTTPHEADER, array('X-FORWARDED-FOR:192.168.168.1', 'CLIENT-IP:192.168.168.1'));//IP

  curl_setopt($curl, CURLOPT_URL, $url);

  curl_setopt($curl, CURLOPT_REFERER, "");  //来路

  $user_agent = isset($_SERVER['HTTP_USER_AGENT']) ? $_SERVER['HTTP_USER_AGENT'] : 'Mozilla/5.0 (Windows NT 5.1) AppleWebKit/537.31 (KHTML, like Gecko) Chrome/26.0.1410.43 Safari/537.31';

  curl_setopt($curl, CURLOPT_USERAGENT, $user_agent);

  // 只需返回HTTP header

  // curl_setopt($curl, CURLOPT_HEADER, 1);

  // 页面内容我们并不需要

  // curl_setopt($curl, CURLOPT_NOBODY, 1);

  // 返回结果,而不是输出它

  curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

  $html = curl_exec($curl);

  //$info = curl_getinfo($curl);

  //echo var_dump($info);

  if ($html === false) {

    //echo "cURL Error: " . curl_error($ch);

    return '';

  }

  curl_close($curl);

  if ($charset != 'utf-8')

  {

    $html = iconv($charset, "UTF-8", $html);

  }

  return $html;

}

header("Content-type: text/html; charset=utf-8");

include('simple_html_dom.php');

// 要打开 extension=php_mbstring.dll

//$url = 'http://www.baidu.com/s?wd=kaka';

$url = 'http://www.163.com/';

$str_html = getHtml($url, 'gbk');

$html = str_get_html($str_html);

$links = $html->find('a');

foreach($links as $link)

{

  $txt = trim($link->plaintext);

  echo $link->href . '[' . $txt . ']<br>';

}

$html = null;

希望本文所述对大家PHP程序设计有所帮助。

更多信息请查看网络编程
由于各方面情况的不断调整与变化,易贤网提供的所有考试信息和咨询回复仅供参考,敬请考生以权威部门公布的正式信息和咨询为准!
关于我们 | 联系我们 | 人才招聘 | 网站声明 | 网站帮助 | 非正式的简要咨询 | 简要咨询须知 | 加入群交流 | 手机站点 | 投诉建议
工业和信息化部备案号:滇ICP备2023014141号-1 云南省教育厅备案号:云教ICP备0901021 滇公网安备53010202001879号 人力资源服务许可证:(云)人服证字(2023)第0102001523号
云南网警备案专用图标
联系电话:0871-65317125(9:00—18:00) 获取招聘考试信息及咨询关注公众号:hfpxwx
咨询QQ:526150442(9:00—18:00)版权所有:易贤网
云南网警报警专用图标