您的位置:阿里西西 > 编程技术 > PHP教程 > PHP模拟登陆抓取页面内容

PHP模拟登陆抓取页面内容

  本站整理   互联网   2016-11-09   点击:   我要评论

php模拟登陆

  平时开发中经常会遇到抓取某个页面内容, 但是有时候某些页面需要登陆才能访问, 最常见的就是论坛, 这时候我们需要来使用curl模拟登陆。 大致思路:需要先请求提取 cookies 并保存,然后利用保存下来的这个cookies再次发送请求来获取页面内容,下面我们直接上代码

  1. <?php 
  2. /** 
  3.  * @Brief PHP读取Curl模拟登陆, 获取cookie, 带cookie进行请求 
  4.  * @Date: 2016/10/20
  5.  * @Time: 9:41 
  6.  */ 
  7. //设置cookie保存位置 
  8. $cookieFile = dirname(__FILE__).'cookie.curl.tmp'
  9. //第一步:获取cookie 
  10. $url = 'http://www.aseoe.com'
  11. $data = array
  12.     'username'  => 'aseoe'
  13.     'password'  => 'aseoe'
  14. ); 
  15. //curl初始化 
  16. $ch = curl_init(); 
  17. curl_setopt($ch, CURLOPT_URL, $url); 
  18. //设置为post请求 
  19. curl_setopt($ch, CURLOPT_POST, true); 
  20. //设置附带返回header信息为空 
  21. curl_setopt($ch, CURLOPT_HEADER, 0); 
  22. //post数据 
  23. curl_setopt($ch, CURLOPT_POSTFIELDS, $data); 
  24. //cookie保存文件位置 
  25. curl_setopt($ch, CURLOPT_COOKIEJAR, $cookieFile); 
  26. //设置数据返回作为变量储存,而不是直接输出 
  27. curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); 
  28. //执行请求 
  29. $ret = curl_exec($ch); 
  30. //关闭连接 
  31. curl_close($ch); 
  32. //第二步:附带cookie请求需要登陆的页面 
  33. $url = 'http://www.aseoe.com'
  34. //curl初始化 
  35. $ch = curl_init(); 
  36. curl_setopt($ch, CURLOPT_URL, $url); 
  37. //设置为post请求 
  38. curl_setopt($ch, CURLOPT_POST, true); 
  39. //设置附带返回header信息为空 
  40. curl_setopt($ch, CURLOPT_HEADER, 0); 
  41. //设置cookie信息文件位置, 注意与第二步中的获取不同,这里是读取 
  42. curl_setopt($ch, CURLOPT_COOKIEFILE, $cookieFile); 
  43. //设置数据返回作为变量储存,而不是直接输出 
  44. curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); 
  45. //执行请求 
  46. $ret = curl_exec($ch); 
  47. //关闭连接 
  48. curl_close($ch); 
  49. //打印抓取内容 
  50. var_dump($ret); 

  这样我们就抓取到了需要登陆才能访问页面的内容, 注意上面的地址只是一个示例,需要换成你想要抓取页面的地址。

http://www.aseoe.com/ true PHP模拟登陆抓取页面内容 http://www.aseoe.com/show-21-894-1.html report 3320.5   平时开发中经常会遇到抓取某个页面内容, 但是有时候某些页面需要登陆才能访问, 最常见的就是论坛, 这时候我们需要来使用curl模拟登陆。 大致思路:需要先请求提取 cookies 并保存,然后利用保存下来



更多关于 的文章
相关阅读
会员评论所有会员评论

  

相关排行总榜

ASP教程

PHP教程

.NET教程