python爬虫实战——图片自动下载器
之前介绍了那么多基本知识【Python爬虫】入门知识(没看的赶紧去看)大家也估计手痒了。想要实际做个小东西来看看,毕竟:
talk is cheap show me the code!
这个小工程的代码都在github上,感兴趣的自己去下载:
https://github.com/hk029/Pickup
顺便通过这个小例子,可以掌握一些有关制作爬虫的基本的步骤。
一般来说,制作一个爬虫需要分以下几个步骤:
分析需求(对,需求分析非常重要,不要告诉我你老师没教你)
分析网页源代码,配合F12(没有F12那么乱的网页源代码,你想看死我?)
编写正则表达式或者XPath表达式(就是前面说的那个神器)
正式编写python爬虫代码
效果运行: