xpah 的语法认识闲话少说，直接上图 xpath 爬取图片代码如下 import requests from lxml import etree import os if __name__ == "__main__": # 创建

简单地使用bs4实现数据解析因为正则表达式本身有难度，所以在这里为大家介绍一下 bs4 实现数据解析。除此之外还有 xpath 解析。因为 xpath 不仅可以在 python 中使用，所以 bs4 和 正则解析一样，仅仅是简单地写两个案例

上一篇的翻页爬取图片代码话不多说，直接上代码 import requests import re import os if __name__ == "__main__": # 创建文件夹 if not os.path.ex

正则解析爬取图片因为讲的是正则解析，而不是正则表达式，所以我就默认大家会正则表达式了。最多在这里给大家看一下正则的语法。 这也是我从B站上截图截下来的。因为我自己都是学的半懂不懂的，实在没那脸说在这里讲正则表达式怎么写。 如果感觉学不会怎么

药监局爬取是不是在看到 “ 药监局 ” 这三个字的时候，突然想到爬虫可能会进局子的事实？ 说到局子，我突然想到另一件事，因为前面写的是很基础的代码，没有代理池，所以在写的时候，特别是爬取翻页的时候，尽量减少爬取的页数，不然，额，后果自负。

肯德基餐厅地址查询前面我们学习了破解百度翻译，知道了 AJAX 的工作原理和爬取，那么我们今天就来巩固我们的学习成果吧。 首先我们打开肯德基的官网，点击 “餐厅查询”然后是没有地址的网页，然后我们输入地址 我们发现不论有没有搜索，网址都没有

“破解”百度翻译翻译是一件麻烦的事情，如果可以写一个爬虫程序直接爬取百度翻译的翻译结果就好了，可当我打开百度翻译的页面，输入要翻译的词时突然发现不管我要翻译什么，网址都没有任何变化，那么百度翻译要怎么爬取呢？ 爬取百度翻译之前，我们先要明白

简易网页搜集器（2）前面我们学会了如何用 UA 伪装骗过服务器爬取我们想要的网页数据，不知道你们会不会和我一样在学会 UA 伪装的兴奋后突然想到另一个问题——就是我们爬取一个页面就要改一次 url 吗？ 答案当然是否定的。 我们观察下面两个

简易网页搜集器前面我们已经学会了简单爬取浏览器页面的爬虫。但事实上我们的需求当然不是爬取搜狗首页或是B站首页这么简单，再不济，我们都希望可以爬取某个特定的有信息的页面。 不知道在学会了爬取之后，你有没有跟我一样试着去爬取一些搜索页面，比如说

爬虫的流程：在开始学习爬虫，我们必须了解爬虫的流程框架。在我看来爬虫的流程大概就是三步，即不论我们爬取的是什么数据，总是可以把爬虫的流程归纳总结为这三步： 指定 url， 可以简单的理解为指定要爬取的网址 发送请求。requests 模块