爬虫如何post

来源：蜘蛛抓取(WebSpider) 时间：2021-11-28 05:52 标签：



我们可以看到在请求部分里/s? 之後出现一个长长的字符串，其中就包含我们要查询的关键词“爬虫”于是我们可以尝试用默认的GET方式来发送请求。

# 转换成url编码格式
贴吧Φ每个页面URL不同之处就是最后的pn值，其余的都是一样的其pn = (page - 1) * 50
# 输入需爬取的起始页和终止页
# 调用贴吧爬虫函数，爬取数据

Request请求对象里有data参數这就是用在POST里的，我们要传送的数据就是这个参数datadata是一个字典，里面要有匹配键值对

以下以有道词典翻译网站为例为模拟POST请求。

POST方式：以有道词典翻译网站为例

  • 数据结构与算法--从平衡二叉树(AVL)到红黑树 上节学习了二叉查找树.算法的性能取决于树的形状,而树的形状取决於插入键的顺序.在最好的情况下,n个结点的树是完全平衡的,如下图"最好情况&q ...

  • const是常量的意思,它可以定义一个不可改变的量,主要用于以下几个地方: 1. 修饰变量,使之不可改变 举个例子: const int var = 3; 此时var的值就不能改变了.也正是因为con ...

我要回帖

 

随机推荐