python怎么写爬虫-Python学习网

python怎么写爬虫

小妮浅浅

2021-05-20 16:54:382337浏览 · 0收藏 · 0评论

一、python写爬虫的方法

1、将urllib2库引用进来。

2、调用库中的方法，将请求回应封装到response对象中。

3、调用response对象的read（）方法，将回应字符串赋给hhtml变量。

4、打印。

import urllib2  #将urllib2库引用进来
response=urllib2.urlopen("http://www.xiaofamao.com") #调用库中的方法，将请求回应封装到response对象中
html=response.read() #调用response对象的read（）方法，将回应字符串赋给hhtml变量
print html  #打印出来

拓展内容：

1、爬虫的介绍

网络爬虫，其实叫作网络数据采集更容易理解。

就是通过编程向网络服务器请求数据（HTML表单），然后解析HTML，提取出自己想要的数据。

2、使用流程

根据url获取HTML数据；

解析HTML，获取目标信息；

存储数据；

重复第一步。

以上就是用python写爬虫的方法，大家学会后就可以动手尝试运行代码了。当然光有爬虫还是远远不够的，也可以使用优质的ip代理服务让爬虫更好的工作，希望对大家有所帮助。更多常见问题解决：爬虫

python爬虫相关知识点推荐：

如何写简单的python爬虫代码？