Web Scraping with Python 在线电子书 图书标签: Python  Scrapy  Scraping  Programming  计算机  Web  爬虫  py   

喜欢 Web Scraping with Python 在线电子书 的读者还喜欢

入门教程，但非常全面。NLP, 图像处理，机器学习。最重要的是守法，写爬虫前要先咨询下你的律师

可惜维基被墙了，代码没法运行

读得是最新版，跟老版侧重点有点不同，主要学习了urllib，beautifulsoup，requests，selenium这几个包的用法，读完爬虫差不多能入门了。由于写得比较简洁，对毫无爬虫和网页经验的人来说还是会有看不懂的地方，比如scrapy和API两章，看完也完全不知道在讲什么。

When I am going to read this book, I find that the new version just came out! Hooray. 如同作者所说，这本书不适合读者当作Python的入门书。而我初读前两章的感受是这本书的内容需要读者要对Python甚至Web Scraping有一定的了解。每一个点可能浅尝辄止，例子不够深入，但是作者提到的方法能够完善我对数据挖掘的认知。 更新：对于一个新手来说，内容可以开眼界，但是书中有很多代码都不能直接运行！累了我这种一无所知的小白。 更新-180921：终于读完了！虽然很多代码要修改才能跑动，后面的章节比较概况，但是看完之后我对爬虫技术有了新的理解（自己顺带学了很多搭建网页的技术）。

读得是最新版，跟老版侧重点有点不同，主要学习了urllib，beautifulsoup，requests，selenium这几个包的用法，读完爬虫差不多能入门了。由于写得比较简洁，对毫无爬虫和网页经验的人来说还是会有看不懂的地方，比如scrapy和API两章，看完也完全不知道在讲什么。

我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看...

1.可以尝试使用Google API 2.对于容易被封杀的站点使用tor来匿名 3.使用Tesseract识别验证码，可以训练特殊字体提高识别率 4.爬取整个网站的外链链接是件容易的事情 5.使用selenium作为测试网站的框架 6.注意cookie和request header的使用，努力让网站不把你当做爬虫对待  

我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看过了 我看...

第177页的代码从逻辑上就不对啊，import的pytesseract就没用，而是通过subprocess调用，这应该是第一版的思路，不过我也搞不清这是作者还是译者的锅，把代码改成如下更合理 import time from urllib.request import urlretrieve from PIL import Image import pytesseract from...  

第三章有好几个地方出现“分号”，但又实在不明白哪里有分号，只好查了原文。 原文是 colons，也就是冒号。 写在这里，给其他同学提个醒。 ： 这是冒号 ； 这是分号 公平地说，原书中也有一些低级错误，比如第七章开始不久，有个函数里把 input 写成了content，中文版照抄了...