当前位置:首页 > 开发 > 编程语言 > 编程 > 正文

CURL学习一

发表于: 2012-12-23   作者:dcj3sjt126com   来源:转载   浏览次数:
摘要: <?php //初始化一个CURL对象 $curl = curl_init(); //设置你需要抓取的URL curl_setopt($curl, CURLOPT_URL, "http://www.baidu.com"); //设置CURL参数,要求结果保存到字符串中还是输出到屏幕上 curl_setopt($curl

<?php

//初始化一个CURL对象
$curl = curl_init();

//设置你需要抓取的URL
curl_setopt($curl, CURLOPT_URL, "http://www.baidu.com");

//设置CURL参数,要求结果保存到字符串中还是输出到屏幕上
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

//运行CURL,请求网页
echo $data = curl_exec($curl); //$data为获取的内容,echo就输入内容了

//关闭URL请求
curl_close($curl);

?>
使用curl 能快捷的抓取网页、模拟POST、GET请求,当然也不仅仅是HTTP协议的一些封装,还支持FTP、代理、HTTPS、LDAP等应用。
curl并不是PHP特有的,很多语言中都有,一个东西好用,自然就会被推广开,就像很多年前的log4j一样的道理,刚开始是JAVA版本,随后也出现log4c,log4c++⋯⋯curl 也是一样的道理。 curl 并非PHP默认支持,需要在配置里打开此项的加载 extension= php_curl.dll 在linux 下就记得编译PHP的时候./ configure 加上参数-with-curl。要查看curl 扩展是否打开,通过phpinfo(); 应该是可以看到的。

1) 基本用法(调用的一般顺序)

curl_init : 初始化,
curl_setopt :设置参数选项
curl_exec:执行当前curl对象
curl_close:关闭当前curl对象

示例:访问下面代码另存为的PHP网页,我们看到了126 邮箱的网页。

$curl  =  curl_init();

//  设置你需要抓取的URL
curl_setopt( $curl ,  CURLOPT_URL ,  ' http://126.com ' );

//  设置header 是否显示头部信息
//curl_setopt($curl, CURLOPT_HEADER, 1);

// 设置cURL 参数,要求结果保存到字符串中还是输出到屏幕上。
//curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);

// 运行cURL,请求网页
$data  =  curl_exec( $curl );

//  关闭URL请求
curl_close( $curl );

//  显示获得的数据
var_dump ( $data );

2) POST 方式发送数据
? php
$phoneNumber  =  ' 13912345678 ' ;
$message  =  ' This message was generated by curl and php ' ;
$curlPost  =  ' pNUMBER= '   .  urlencode ( $phoneNumber .  ' &MESSAGE= '  .  urlencode ( $message .  ' &SUBMIT=Send ' ;
$ch  =  curl_init();
curl_setopt( $ch ,  CURLOPT_URL ,  ' http://www.example.com/sendSMS.php ' );
curl_setopt( $ch ,  CURLOPT_HEADER ,  1 );
curl_setopt( $ch ,  CURLOPT_RETURNTRANSFER ,  1 );
curl_setopt( $ch ,  CURLOPT_POST ,  1 );
curl_setopt( $ch ,  CURLOPT_POSTFIELDS ,  $curlPost );
$data  =  curl_exec();
curl_close( $ch );
?

3) 代理服务器
? php 
$ch  =  curl_init();
curl_setopt( $ch ,  CURLOPT_URL ,  ' http://www.example.com ' );
curl_setopt( $ch ,  CURLOPT_HEADER ,  1 );
curl_setopt( $ch ,  CURLOPT_RETURNTRANSFER ,  1 );
curl_setopt( $ch ,  CURLOPT_HTTPPROXYTUNNEL ,  1 );
curl_setopt( $ch ,  CURLOPT_PROXY ,  ' fakeproxy.com:1080 ' );
curl_setopt( $ch ,  CURLOPT_PROXYUSERPWD ,  ' user:password ' );
$data  =  curl_exec();
curl_close( $ch );
?

4) 
关于SSL和Cookie

关于SSL也就是HTTPS协议,你只需要把CURLOPT_URL连接中的http://变成https://就可以了。当然,还有一个参数叫CURLOPT_SSL_VERIFYHOST可以设置为验证站点。

关于Cookie,你需要了解下面三个参数:

CURLOPT_COOKIE,在当面的会话中设置一个cookie

CURLOPT_COOKIEJAR,当会话结束的时候保存一个Cookie

CURLOPT_COOKIEFILE,Cookie的文件。

5)  HTTP服务器认证
﹤?php 
$ch = curl_init();
curl_setopt( $ch, CURLOPT_URL, 'http://www.example.com');
curl_setopt( $ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt( $ch, CURLOPT_HTTPAUTH, CURLAUTH_BASIC);
curl_setopt(CURLOPT_USERPWD, '[username]:[password]')

$data = curl_exec();
curl_close( $ch);
?﹥

总结:虽然后面附加了几个例子,其实顺序跟第一个介绍的都一样,只是会根据不同情况,在 curl_setopt 函数会有所不同。我们也发现这个函数的参数非常多,非常灵活。

以下关于此函数各项使用参数:

bool curl_setopt (int ch, string option, mixed value)

curl_setopt()函数将为一个CURL会话设置选项。option参数是你想要的设置,value是这个选项给定的值。

下列选项的值将被作为长整形使用(在option参数中指定):
 

* CURLOPT_INFILESIZE: 当你上传一个文件到远程站点,这个选项告诉PHP你上传文件的大小。
* CURLOPT_VERBOSE: 如果你想CURL报告每一件意外的事情,设置这个选项为一个非零值。
* CURLOPT_HEADER: 如果你想把一个头包含在输出中,设置这个选项为一个非零值。
* CURLOPT_NOPROGRESS: 如果你不会PHP为CURL传输显示一个进程条,设置这个选项为一个非零值。注意:PHP自动设置这个选项为非零值,你应该仅仅为了调试的目的来改变这个选项。
* CURLOPT_NOBODY: 如果你不想在输出中包含body部分,设置这个选项为一个非零值。
* CURLOPT_FAILONERROR: 如果你想让PHP在发生错误(HTTP代码返回大于等于300)时,不显示,设置这个选项为一人非零值。默认行为是返回一个正常页,忽略代码。
* CURLOPT_UPLOAD: 如果你想让PHP为上传做准备,设置这个选项为一个非零值。
* CURLOPT_POST: 如果你想PHP去做一个正规的HTTP POST,设置这个选项为一个非零值。这个POST是普通的 application/x-www-from-urlencoded 类型,多数被HTML表单使用。
* CURLOPT_FTPLISTONLY: 设置这个选项为非零值,PHP将列出FTP的目录名列表。
* CURLOPT_FTPAPPEND: 设置这个选项为一个非零值,PHP将应用远程文件代替覆盖它。
* CURLOPT_NETRC: 设置这个选项为一个非零值,PHP将在你的 ~./netrc 文件中查找你要建立连接的远程站点的用户名及密码。
* CURLOPT_FOLLOWLOCATION: 设置这个选项为一个非零值(象 “Location: “)的头,服务器会把它当做HTTP头的一部分发送(注意这是递归的,PHP将发送形如 “Location: “的头)。
* CURLOPT_PUT: 设置这个选项为一个非零值去用HTTP上传一个文件。要上传这个文件必须设置CURLOPT_INFILE和CURLOPT_INFILESIZE选项.
* CURLOPT_MUTE: 设置这个选项为一个非零值,PHP对于CURL函数将完全沉默。
* CURLOPT_TIMEOUT: 设置一个长整形数,作为最大延续多少秒。
* CURLOPT_LOW_SPEED_LIMIT: 设置一个长整形数,控制传送多少字节。
* CURLOPT_LOW_SPEED_TIME: 设置一个长整形数,控制多少秒传送CURLOPT_LOW_SPEED_LIMIT规定的字节数。
* CURLOPT_RESUME_FROM: 传递一个包含字节偏移地址的长整形参数,(你想转移到的开始表单)。
* CURLOPT_SSLVERSION: 传递一个包含SSL版本的长参数。默认PHP将被它自己努力的确定,在更多的安全中你必须手工设置。
* CURLOPT_TIMECONDITION: 传递一个长参数,指定怎么处理CURLOPT_TIMEVALUE参数。你可以设置这个参数为TIMECOND_IFMODSINCE 或 TIMECOND_ISUNMODSINCE。这仅用于HTTP。
* CURLOPT_TIMEVALUE: 传递一个从1970-1-1开始到现在的秒数。这个时间将被CURLOPT_TIMEVALUE选项作为指定值使用,或被默认TIMECOND_IFMODSINCE使用。

下列选项的值将被作为字符串:
 

* CURLOPT_URL: 这是你想用PHP取回的URL地址。你也可以在用curl_init()函数初始化时设置这个选项。
* CURLOPT_USERPWD: 传递一个形如[username]:[password]风格的字符串,作用PHP去连接。
* CURLOPT_PROXYUSERPWD: 传递一个形如[username]:[password] 格式的字符串去连接HTTP代理。
* CURLOPT_RANGE: 传递一个你想指定的范围。它应该是”X-Y”格式,X或Y是被除外的。HTTP传送同样支持几个间隔,用逗句来分隔(X-Y,N-M)。
* CURLOPT_POSTFIELDS: 传递一个作为HTTP “POST”操作的所有数据的字符串。
* CURLOPT_REFERER: 在HTTP请求中包含一个”referer”头的字符串。
* CURLOPT_USERAGENT: 在HTTP请求中包含一个”user-agent”头的字符串。
* CURLOPT_FTPPORT: 传递一个包含被ftp “POST”指令使用的IP地址。这个POST指令告诉远程服务器去连接我们指定的IP地址。这个字符串可以是一个IP地址,一个主机名,一个网络界面名(在UNIX下),或是‘-’(使用系统默认IP地址)。
* CURLOPT_COOKIE: 传递一个包含HTTP cookie的头连接。
* CURLOPT_SSLCERT: 传递一个包含PEM格式证书的字符串。
* CURLOPT_SSLCERTPASSWD: 传递一个包含使用CURLOPT_SSLCERT证书必需的密码。
* CURLOPT_COOKIEFILE: 传递一个包含cookie数据的文件的名字的字符串。这个cookie文件可以是Netscape格式,或是堆存在文件中的HTTP风格的头。
* CURLOPT_CUSTOMREQUEST: 当进行HTTP请求时,传递一个字符被GET或HEAD使用。为进行DELETE或其它操作是有益的,更Pass a string to be used instead of GET or HEAD when doing an HTTP request. This is useful for doing or another, more obscure, HTTP request. 注意: 在确认你的服务器支持命令先不要去这样做。下列的选项要求一个文件描述(通过使用fopen()函数获得): 
* CURLOPT_FILE: 这个文件将是你放置传送的输出文件,默认是STDOUT.
* CURLOPT_INFILE: 这个文件是你传送过来的输入文件。
* CURLOPT_WRITEHEADER: 这个文件写有你输出的头部分。
* CURLOPT_STDERR: 这个文件写有错误而不是stderr。用来获取需要登录的页面的例子,当前做法是每次或许都登录一次,有需要的人再做改进了.

常用函数:

curl_close — 关闭一个curl会话 
curl_copy_handle — 拷贝一个curl连接资源的所有内容和参数 
curl_errno — 返回一个包含当前会话错误信息的数字编号 
curl_error — 返回一个包含当前会话错误信息的字符串 
curl_exec — 执行一个curl会话 
curl_getinfo — 获取一个curl连接资源句柄的信息 
curl_init — 初始化一个curl会话 
curl_multi_add_handle — 向curl批处理会话中添加单独的curl句柄资源 
curl_multi_close — 关闭一个批处理句柄资源 
curl_multi_exec — 解析一个curl批处理句柄 
curl_multi_getcontent — 返回获取的输出的文本流 
curl_multi_info_read — 获取当前解析的curl的相关传输信息 
curl_multi_init — 初始化一个curl批处理句柄资源 
curl_multi_remove_handle — 移除curl批处理句柄资源中的某个句柄资源 
curl_multi_select — Get all the sockets associated with the cURL extension, which can then be "selected" 
curl_setopt_array — 以数组的形式为一个curl设置会话参数 
curl_setopt — 为一个curl设置会话参数 
curl_version — 获取curl相关的版本信息

CURL学习一

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
curl安装: xp下面的安装 :修改php.ini文件的设置,找到php_curl.dll //取消下在的注释 extension=
概念: cURL(Client URL Library Functions)is a command line tool for transfering data with U
啥都不说,先上代码 <?PHP /*   *  @author  小伍   */ echo "<pre>"; $proxy = a
例1.一个简单的 curl 获取百度 html 的爬虫程序(crawler): spider.php <?php /* 获取百度html
代码: login.php <?php $data = 'tbUserName=huangdi0912&tbPassword=******&chkRemember=1'; $
http://www.paehl.com/open_source/?CURL_7.28.0 http://www.paehl.com/open_source/?CURL_7.28.0 c
先写一个简单的抓取页面函数 [php] view plaincopy <?php function GetSources($Url,$User_Agent
最近发现一款新的性能测试工具,觉得对其进行一番研究和学习,下面是我从各个网站收集到的资料: 第
最近发现一款新的性能测试工具,觉得对其进行一番研究和学习,下面是我从各个网站收集到的资料: 第
curl是一个利用URL语法在命令行方式下工作的文件传输工具。 详细命令参数可到http://xukaizijian.bl
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号