技术文章 > Python技术 > Python基础 > 正文

python爬虫urllib中的post如何实现?

我们在进行爬虫的时候,首先,最重要的也是请求问题,只有先做好请求,才可以进行之后的一系列操作,因此,要怎么去写这个内容呢?开始小编也不清楚要教大家如何去实现,直到有小伙伴说希望去了解urllib的请求操作,那就针对这个内容,给大家讲述下实现方式吧~

一、urllib

urllib作为Python的标准库,基本上涵盖了基础的网络请求功能。

二、发起POST请求

urlopen()默认的访问方式是GET,当在urlopen()方法中传入data参数时,则会发起POST请求。注意:传递的data数据需要为bytes格式。timeout参数还可以设置超时时间,如果请求时间超出,那么就会抛出异常。

from urllib import request
 
resp = request.urlopen('http://httpbin.org/post', data=b'word=hello', timeout=10)
print(resp.read().decode())
1234

三、使用带参数的POST方法:

>>> import urllib
>>> params = urllib.urlencode({'spam': 1, 'eggs': 2, 'bacon': 0})
>>> f = urllib.urlopen("http://www.musi-cal.com/cgi-bin/query", params)
>>> print f.read()
1234

以上就是关于post请求问题了,一共就几个步骤,大家可以直接把代码拿去跑程序试试呢~看下是不是满足大家的需求哦~如果还想查询其他内容,可以到python学习网了解下哈~

免费视频教程
本文原创发布python学习网,转载请注明出处,感谢您的尊重!
相关文章
 python文件打开闪退要怎么处理?
 python爬虫中的urllib库代理如何设置?
 python爬虫如何取消或终止线程?
 python爬虫可以开多少线程?
相关视频章节
 网络爬虫
 云端部署Web应用程序视频
 Web应用框架Flask和文件模板
 Web应用程序开发概述
 继承和多态
视频教程分类