网络爬虫：互联网就像一个巨大的蜘蛛网，里面存储着大量的数据。爬虫是一种沿着网络线路获取所需数据的小型蜘蛛。数据采集??是指我们向目标网站发送请求，获取数据后提取有用数据的程序。需要用到的技术是模拟浏览器向站点发送请求的行为，将站点返回的各种数据保存到本地，过滤有用的数据。有很多爬虫框架。Scrapy是一个用纯Python编写的用于爬取网站数据和提取结构化数据的应用程序框架。它具有广泛的用途。这几天使用PHP爬虫框架爬取了一些数据，发现还是挺方便的。这里直接在PHP程序中配置agent的简单例子，做个小笔记，供自己学习。["proxy"=>PROXY_SERVER,"Header"=>$headers,"Method"=>"Get",'Request_Fulluri'=>TRUE,],'SSL'=>Array('Sni_enabled'=>True,//为Http代理禁用Sni''=>$sniServer)];打印（$网址）；$context=stream\_context\_create($options);$result=file\_get\_contents($url,false,$context);变量转储（$结果）；//访问HTTPS页面print($urls);$context=stream\_context\_create($options);$result=file\_get\_contents($urls,false,$context);变量转储（$结果）；虽然只是一个小例子，但也是我自己学习的基石。希望自己可以多积累，多学习技术
