一区二区久久-一区二区三区www-一区二区三区久久-一区二区三区久久精品-麻豆国产一区二区在线观看-麻豆国产视频

PHP CURL獲取cookies模擬登錄的方法

要提取google搜索的部分?jǐn)?shù)據(jù),發(fā)現(xiàn)google對(duì)于軟件抓取它的數(shù)據(jù)屏蔽的厲害,以前偽造下 USER-AGENT 就可以抓數(shù)據(jù),但是現(xiàn)在卻不行了。利用抓包數(shù)據(jù)發(fā)現(xiàn),Google 判斷了 cookies,當(dāng)你沒有cookies的時(shí)候,直接返回 302 跳轉(zhuǎn),而且是連續(xù)幾十個(gè)302跳轉(zhuǎn),根本抓不了數(shù)據(jù)。
因此,在發(fā)送搜索命令時(shí),需要先提取 cookies 并保存,然后利用保存下來的這個(gè)cookies再次發(fā)送搜索命令即可正常抓數(shù)據(jù)了。這其實(shí)和論壇的模擬登錄一個(gè)道理,先POST登錄,獲取cookies并保存,然后利用這個(gè)cookies訪問就可以了。
php 代碼如下:
復(fù)制代碼 代碼如下:
<?php
header('Content-Type: text/html; charset=utf-8');

$cookie_file = dirname(__FILE__).'/cookie.txt';
//$cookie_file = tempnam("tmp","cookie");

//先獲取cookies并保存
$url = "http://www.google.com.hk";
$ch = curl_init($url); //初始化
curl_setopt($ch, CURLOPT_HEADER, 0); //不返回header部分
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); //返回字符串,而非直接輸出
curl_setopt($ch, CURLOPT_COOKIEJAR,  $cookie_file); //存儲(chǔ)cookies
curl_exec($ch);
curl_close($ch);

//使用上面保存的cookies再次訪問
$url = "http://www.google.com.hk/search?oe=utf8&ie=utf8&source=uds&hl=zh-CN&q=qq";
$ch = curl_init($url);
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file); //使用上面獲取的cookies
$response = curl_exec($ch);
curl_close($ch);

echo $response;
?>

php技術(shù)PHP CURL獲取cookies模擬登錄的方法,轉(zhuǎn)載需保留來源!

鄭重聲明:本文版權(quán)歸原作者所有,轉(zhuǎn)載文章僅為傳播更多信息之目的,如作者信息標(biāo)記有誤,請(qǐng)第一時(shí)間聯(lián)系我們修改或刪除,多謝。

主站蜘蛛池模板: 二区久久国产乱子伦免费精品 | 91在线视频免费观看 | 精品久久久中文字幕一区 | 国内精品免费麻豆网站91麻豆 | 久久久噜噜噜久久中文字幕色伊伊 | 久久lu| 成人伊人网 | 国产精品一区二区三 | 国内精品一区二区2021在线 | 久久亚洲日本不卡一区二区 | 精品伊人久久久香线蕉 | 中文字幕 亚洲一区 | 在线观看亚洲精品国产 | 精品久久久久久久 | 男人女人做刺激视频免费 | 中文字幕一区二区三区有限公司 | 天堂在线观看 | 国产熟睡乱子伦视频观看软件 | 米奇狠狠 | 国产精品露脸国语对白手机视频 | 思思久久99热免费精品6 | 激情欧美一区二区三区 | 亚洲区欧美区小说区图片区 | 午夜看片网址 | 午夜精品视频 | 一级毛片无遮挡免费全部 | 欧美yw精品日本国产精品 | 黄色在线免费观看网址 | 一区二区三区国产精品 | 国产美女福利在线 | 午夜大片免费完整在线看 | 午夜视频在线观看一区 | 大色网小色网 | 亚洲国产91在线 | 99精品视频一区在线视频免费观看 | 福利毛片 | 女人被爽到呻吟娇喘的视频动态图 | 国产短视频精品区第一页 | 中文字幕在线视频一区 | 美女无遮挡免费视频 | 热99re久久精品香蕉 |