设为首页 加入收藏

TOP

c++使用libcurl
2016-12-06 20:24:34 】 浏览:226
Tags:使用 libcurl

最近一直在写个抓取天猫数据的小工具,用到libcurl库

#include 
  
   
#include "curl/curl.h"
using namespace std;

void tcurl();
size_t myWrite( void *ptr, size_t size, size_t nmemb, void *stream);

int main(int argc, char const *argv[])
{
    tcurl();
    return 0;
}

void tcurl(){
    cout << "start" << endl;
    char *version = curl_version();
    CURL *curl;
    curl = curl_easy_init();
    string url="",res="";
    url = "http://book.weibo.com";
    cout << version;

    //抓取http数据
    curl_easy_setopt(curl,CURLOPT_URL,url.c_str());
    curl_easy_setopt(curl, CURLOPT_WRITEDATA, (void *)&res);
    curl_easy_setopt(curl,CURLOPT_WRITEFUNCTION, myWrite);
    curl_easy_setopt(curl, CURLOPT_HEADER, 0);
    //超时,不接受其他信号
    curl_easy_setopt(curl, CURLOPT_NOSIGNAL, 1);
    curl_easy_setopt(curl, CURLOPT_CONNECTTIMEOUT, 3);
    curl_easy_setopt(curl, CURLOPT_TIMEOUT, 3);
    //执行
    curl_easy_perform(curl);
    //关闭
    curl_easy_cleanup(curl);
    //cout << version << endl;
    cout << res << endl;
}
//数据的获取
size_t myWrite( void *ptr, size_t size, size_t nmemb, void *stream){
    string *str = dynamic_cast
   
    ((string*)stream); if( 0 == size || NULL == ptr){ return -1; } char* pData = (char*)ptr; str->append(pData,nmemb*size); return nmemb*size; }
   
  

g++ tcurl.cpp -lcurl 运行即可

参考

libcurl的使用
http://blog.csdn.net/huyiyang2010/article/details/7664201
http://blog.chinaunix.net/uid-20692625-id-3203258.html
libcurl的函数说明
http://blog.csdn.net/w13770269691/article/details/8847800

】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇RNN递归神经网络 C++实现 下一篇C++溢出对象虚函数表指针

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目