药监局爬取是不是在看到 “ 药监局 ” 这三个字的时候，突然想到爬虫可能会进局子的事实？ 说到局子，我突然想到另一件事，因为前面写的是很基础的代码，没有代理池，所以在写的时候，特别是爬取翻页的时候，尽量减少爬取的页数，不然，额，后果自负。

肯德基餐厅地址查询前面我们学习了破解百度翻译，知道了 AJAX 的工作原理和爬取，那么我们今天就来巩固我们的学习成果吧。 首先我们打开肯德基的官网，点击 “餐厅查询”然后是没有地址的网页，然后我们输入地址 我们发现不论有没有搜索，网址都没有

“破解”百度翻译翻译是一件麻烦的事情，如果可以写一个爬虫程序直接爬取百度翻译的翻译结果就好了，可当我打开百度翻译的页面，输入要翻译的词时突然发现不管我要翻译什么，网址都没有任何变化，那么百度翻译要怎么爬取呢？ 爬取百度翻译之前，我们先要明白

简易网页搜集器（2）前面我们学会了如何用 UA 伪装骗过服务器爬取我们想要的网页数据，不知道你们会不会和我一样在学会 UA 伪装的兴奋后突然想到另一个问题——就是我们爬取一个页面就要改一次 url 吗？ 答案当然是否定的。 我们观察下面两个

简易网页搜集器前面我们已经学会了简单爬取浏览器页面的爬虫。但事实上我们的需求当然不是爬取搜狗首页或是B站首页这么简单，再不济，我们都希望可以爬取某个特定的有信息的页面。 不知道在学会了爬取之后，你有没有跟我一样试着去爬取一些搜索页面，比如说

爬虫的流程：在开始学习爬虫，我们必须了解爬虫的流程框架。在我看来爬虫的流程大概就是三步，即不论我们爬取的是什么数据，总是可以把爬虫的流程归纳总结为这三步： 指定 url， 可以简单的理解为指定要爬取的网址 发送请求。requests 模块

Welcome to Hexo! This is your very first post. Check documentation for more info. If you get any problems when using Hex