程序员有时候很难和外行人讲明白自己的工作是什么，讲一下“爬虫工程师”的工作内容是什么，需要掌握哪些技能，难点和好玩的地方等等，讲到哪里算哪里吧。 一、爬虫工程师是干嘛的？ 1、主要工作内容？ 互联网是由一个一个的超链接组成的，从一个网页的链接可以跳到另一个网页，在新的网页里，又有很多链接。理论上讲，从任何一个网页开始，不断点开链接、链接的网页的链接，就可以走遍整个互联网！这个过程是不是像蜘蛛沿着网一样爬？这也是“爬虫”名字的由来。 作为爬虫工程师，就是要写出一些能够沿着网爬的”蜘蛛“程序，保存下…