爬取整个网站的构思

爬取整个网站的构思

当用户在浏览网页时，会看图片。

点击网址看到的图片，是用户输入网址-DNS服务器-服务器主机-服务器请求-服务器解析-发送浏览器HTML、JS、CSS-浏览器解析

爬虫需要爬取，有HTML代码构成的网页，然后获取图片和文字!环境配置

环境配置总是最重要的一个环境，做过测试的都知道。python也一样，需要掌握几款好用的IDE，我们来看看常用的几个：

1、Notepad++，简单，但是提示功能不强

2、PyCharm，用于一般IDE具备的功能，比如，调试、语法高亮、代码跳转、等等，同时可用于Django开发，支持Google App Engine，更酷的是，PyCharm支持IronPython! 好的开发工具是一切工作完成的前提。

爬取这么多数据，赚钱岂不是分分钟~技能快学起来吧!

python爬虫工资多高

Python 爬虫的工资首先得看你是在那个城市

一般一线城市【北京为例】爬虫工程师97.3%的薪资在10K以上，技术比较过硬的会更高

新一线/二线城市【杭州为例】 85.7%的薪资水平是在10K 以上占比最大的是10K-15K

由此可看，Python现在已然是站在了风口浪尖上，学习Python，还是非常有前景的!