帮粉丝写爬虫第一篇,接到一个简单的任务,让我爬取一下河北单招学校相关的信息,那最后这10篇博客,第一篇就从这里开始吧。(其实写到现在,我甚至想继续写下去了,没准能凑个爬虫108篇~哈哈哈)
当我把源码发给他的时候,以下是对话内容,“这就完啦?!”,“啊,不然呢?”
文章目录
-
- 写在前面
- 编码开始
-
- read_html函数说明
- 爬取河北单招学校信息
- 写在后面
- 广宣时间
写在前面
首先介绍下这种爬虫其实属于定向爬虫的一种,就是指定要获取某些特定的数据,例如本案例中的河北单招学校信息,由于并没有描述必须去爬取哪个网站或者获取哪些数据,对于爬虫编写者来说,扩展点和突破点都比较多了,可以自由的去查找相应的资源,不用太局限,当然难点也是存在的,就是翻来翻去找不到合适爬取的网址,还不如直接给一个网站,说:就爬取这个呢。
话不多说,经过我的一番查找,最终还是搜到了一个我觉得还不错,并且还能写一些独特爬虫知识点的网站。所