一、libcurl简介
libcurl是一个跨平台的网络协议库,支持http, https, ftp, gopher, telnet, dict, file, 和ldap 协议。libcurl同样支持HTTPS证书授权,HTTP POST, HTTP PUT, FTP 上传, HTTP基本表单上传,代理,cookies,和用户认证。
libcurl的官网 http://curl.haxx.se/
库下载https://github.com/curl/curl/releases/tag/curl-7_71_1 下面例子访问百度官网步骤: 解压
lbw@ubuntu:~/httpHandler$ tar xvf curl-7.71.1.tar.bz2
配置 要安装指定路径要加–prefix=
lbw@ubuntu:~/httpHandler/curl-7.71.1$ ./configure --prefix=$PWD/_install
编译
lbw@ubuntu:~/httpHandler/curl-7.71.1$ make
安装
lbw@ubuntu:~/httpHandler/curl-7.71.1$ make install
编译文件
lbw@ubuntu:~/httpHandler$ gcc demo1.c -I ./curl-7.71.1/_install/include/ -L ./curl-7.71.1/_install/lib/ -lcurl
配置环境变量
lbw@ubuntu:~/httpHandler$ export LD_LIBRARY_PATH=./curl-7.71.1/_install/lib/
运行文件
lbw@ubuntu:~/httpHandler$ ./a.out
查看百度官网代码
vi /tmp/get.html
二、libcurl的使用
调用curl_global_init() 初始化libcurl 调用curl_easy_init() 函数得到 easy interface 型指针 调用curl_easy_setopt() 设置传输选项 根据curl_easy_setopt() 设置的传输选项,实现回调函数以完成用户特定任务 调用curl_easy_perform() 函数完成传输任务 调用curl_easy_cleanup() 释放内存
三、函数简介
1.函数只能用一次。(其实在调用curl_global_cleanup 函数后仍然可再用)
CURLcode curl_global_init(long flags);
如果这个函数在curl_easy_init 函数调用时还没调用,它讲由libcurl库自动调用,所以多线程下最好主动调用该函数以防止在线程中curl_easy_init 时多次调用。
注意:虽然libcurl是线程安全的,但curl_global_init 是不能保证线程安全的,所以不要在每个线程中都调用curl_global_init ,应该将该函数的调用放在主线程中。 参数:flags
CURL_GLOBAL_ALL
CURL_GLOBAL_SSL
CURL_GLOBAL_WIN32
CURL_GLOBAL_NOTHING
2 .结束libcurl使用的时候,用来对curl_global_init 做的工作清理。类似于close 的函数。
void curl_global_cleanup(void);
注意:虽然libcurl是线程安全的,但curl_global_cleanup 是不能保证线程安全的,所以不要在每个线程中都调用curl_global_init ,应该将该函数的调用放在主线程中。
3.打印当前libcurl库的版本。
char *curl_version();
4.curl_easy_init 用来初始化一个CURL 的指针(有些像返回FILE类型的指针一样). 相应的在调用结束时要用curl_easy_cleanup 函数清理.
CURL *curl_easy_init();
一般curl_easy_init 意味着一个会话的开始. 它会返回一个easy_handle (CURL* 对象), 一般都用在easy系列的函数中.
5 .这个调用用来结束一个会话.与curl_easy_init 配合着用.
void curl_easy_cleanup(CURL *handle);
参数: CURL 类型的指针.
6 .这个函数最重要了.几乎所有的curl 程序都要频繁的使用它.它告诉curl库.程序将有如何的行为. 比如要查看一个网页的html 代码等.(这个函数有些像ioctl 函数)参数: 1 CURL 类型的指针 2 各种CURLoption 类型的选项.(都在curl.h库里有定义,man 也可以查看到) 3 parameter 这个参数 既可以是个函数的指针,也可以是某个对象的指针,也可以是个long 型的变量.它用什么这取决于第二个参数. CURLoption 这个参数的取值很多.具体的可以查看man手册.
CURLcode curl_easy_setopt(CURL *handle, CURLoption option, parameter);
7 .在初始化CURL类型的指针 以及curl_easy_setopt 完成后调用. 就像字面的意思所说perform 就像是个舞台.让我们设置的 option 运作起来.参数: CURL 类型的指针.
CURLcode curl_easy_perform(CURL *handle);
四、 curl_easy_setopt函数部分选项介绍
本节主要介绍curl_easy_setopt 中跟http相关的参数。该函数是curl中非常重要的函数,curl所有设置都是在该函数中完成的,该函数的设置选项众多,注意本节的阐述的只是部分常见选项。
1 CURLOPT_URL 设置访问URL
2 CURLOPT_WRITEFUNCTION ,CURLOPT_WRITEDATA 回调函数原型为:size_t function( void *ptr, size_t size, size_t nmemb, void *stream); 函数将在libcurl接收到数据后被调用,因此函数多做数据保存的功能,如处理下载文件。CURLOPT_WRITEDATA 用于表明CURLOPT_WRITEFUNCTION 函数中的stream指针的来源。
如果你没有通过CURLOPT_WRITEFUNCTION 属性给easy handle 设置回调函数,libcurl会提供一个默认的回调函数,它只是简单的将接收到的数据打印到标准输出。你也可以通过 CURLOPT_WRITEDATA 属性给默认回调函数传递一个已经打开的文件指针,用于将数据输出到文件里。
3 CURLOPT_HEADERFUNCTION,CURLOPT_HEADERDATA 回调函数原型为 size_t function( void *ptr, size_t size,size_t nmemb, void *stream); libcurl一旦接收到http 头部数据后将调用该函数。CURLOPT_WRITEDATA 传递指针给libcurl,该指针表明CURLOPT_HEADERFUNCTION 函数的stream指针的来源。
4 CURLOPT_READFUNCTION CURLOPT_READDATA libCurl需要读取数据传递给远程主机时将调用CURLOPT_READFUNCTION 指定的函数,函数原型是:size_t function(void *ptr, size_t size, size_t nmemb,void *stream); CURLOPT_READDATA 表明CURLOPT_READFUNCTION 函数原型中的stream指针来源。
5 CURLOPT_NOPROGRESS ,CURLOPT_PROGRESSFUNCTION ,CURLOPT_PROGRESSDATA 跟数据传输进度相关的参数。CURLOPT_PROGRESSFUNCTION 指定的函数正常情况下每秒被libcurl调用一次,为了使CURLOPT_PROGRESSFUNCTION 被调用,CURLOPT_NOPROGRESS 必须被设置为false,CURLOPT_PROGRESSDATA 指定的参数将作为CURLOPT_PROGRESSFUNCTION 指定函数的第一个参数
6 CURLOPT_TIMEOUT ,CURLOPT_CONNECTIONTIMEOUT : CURLOPT_TIMEOUT 由于设置传输时间,CURLOPT_CONNECTIONTIMEOUT 设置连接等待时间
7 CURLOPT_FOLLOWLOCATION 设置重定位URL
8 CURLOPT_RANGE: CURLOPT_RESUME_FROM: 断点续传相关设置。CURLOPT_RANGE 指定char *参数传递给libcurl,用于指明http域的RANGE头域,例如: 表示头500个字节:bytes=0-499 表示第二个500字节:bytes=500-999 表示最后500个字节:bytes=-500 表示500字节以后的范围:bytes=500- 第一个和最后一个字节:bytes=0-0,-1 同时指定几个范围:bytes=500-600,601-999 CURLOPT_RESUME_FROM 传递一个long参数给libcurl,指定你希望开始传递的 偏移量。
五、代码示例
1.基本的http GET/POST操作
#include <stdio.h>
#include <curl/curl.h>
bool getUrl(char *filename)
{
CURL *curl;
CURLcode res;
FILE *fp;
if ((fp = fopen(filename, "w")) == NULL)
return false;
struct curl_slist *headers = NULL;
headers = curl_slist_append(headers, "Accept: Agent-007");
curl = curl_easy_init();
if (curl)
{
curl_easy_setopt(curl, CURLOPT_HTTPHEADER, headers);
curl_easy_setopt(curl, CURLOPT_URL,"http://www.baidu.com");
curl_easy_setopt(curl, CURLOPT_WRITEDATA, fp);
curl_easy_setopt(curl, CURLOPT_HEADERDATA, fp);
res = curl_easy_perform(curl);
if (res != 0) {
curl_slist_free_all(headers);
curl_easy_cleanup(curl);
}
fclose(fp);
return true;
}
}
bool postUrl(char *filename)
{
CURL *curl;
CURLcode res;
FILE *fp;
if ((fp = fopen(filename, "w")) == NULL)
return false;
curl = curl_easy_init();
if (curl)
{
curl_easy_setopt(curl, CURLOPT_COOKIEFILE, "/tmp/cookie.txt");
curl_easy_setopt(curl, CURLOPT_POSTFIELDS, "&logintype=uid&u=xieyan&psw=xxx86");
curl_easy_setopt(curl, CURLOPT_URL, " http://mail.sina.com.cn/cgi-bin/login.cgi ");
curl_easy_setopt(curl, CURLOPT_WRITEDATA, fp);
res = curl_easy_perform(curl);
curl_easy_cleanup(curl);
}
fclose(fp);
return true;
}
int main(void)
{
getUrl("/tmp/get.html");
postUrl("/tmp/post.html");
}
修改一个回调函数用来读取数据
#include <stdio.h>
#include <curl/curl.h>
#include <string.h>
#define true 1
#define false 0
typedef unsigned int bool;
size_t readData( void *ptr, size_t size, size_t nmemb, void *stream)
{
char buf[1024] = {'\0'};
strncpy(buf, ptr, 1024);
printf("=======================get Data=========================\n");
printf("%s\n",buf);
}
bool getUrl(char *filename)
{
CURL *curl;
CURLcode res;
FILE *fp;
if ((fp = fopen(filename, "w")) == NULL)
return false;
struct curl_slist *headers = NULL;
headers = curl_slist_append(headers, "Accept: Agent-007");
curl = curl_easy_init();
if (curl)
{
curl_easy_setopt(curl, CURLOPT_HTTPHEADER, headers);
curl_easy_setopt(curl, CURLOPT_URL,"http://www.baidu.com");
curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, readData);
res = curl_easy_perform(curl);
if (res != 0) {
curl_slist_free_all(headers);
curl_easy_cleanup(curl);
}
fclose(fp);
return true;
}
|