A. 请教各位大大，有意向往爬虫工程师发展，需要具备哪些
没有任何专业知识，不过找到一篇博客应该对你有帮助：
如何成为一名爬虫工程师？（顺带提供工作机会）
B. 的爬虫工程师用五分钟教零基础的小白如何写一个爬虫
监理工程师是指经全国统一考试合格，取得《监理工程师资格证书》并经注册登记的工程建设监理人员。 监理工程师是代表业主监控工程质量，是业主和承包商之间的桥梁。它不仅要求执业者懂得工程技术知识、成本核算，还需要其非常清楚建筑法规。
C. python工程师要具备哪些技能
1、Python基础知识，这些是必须要掌握的，需要掌握基本的用法，还需要在实战之中进行开发练习;
2、Pythonweb开发与实战的知识，web开发是前端技术，包括html，JavaScript，css，其他框架比如vuejs。
3、爬虫技术，是必须学习的内容，通过学习爬虫掌握各种基础http协议，掌握爬虫技巧，最后不要忘记实战练习。
4、自动化运维，自动化运维的知识，建议每个程序员都需要认真的学习一下，对日后的发展有很大的帮助。
5、学习数据挖掘以及机器学习的内容，要熟悉掌握Python各种各样的库，掌握数据处理以及图像处理。
D. 学习Python编程 有哪些爬虫技术需要掌握
想学爬虫，首先你得熟悉tcp、http协议，这是理论基础。其次，python常用的爬虫库urllib、urllib2、requests等得熟悉，碰到反爬网站强的可以用phontomjs+selenium等模拟浏览器等爬取方式，信息提取这块常用的是beautifulsoup或xpath等工具，正则匹配也要熟，爬虫量比较大得用分布式，常用的爬虫框架scrapy-redis你得熟，代理ip这块你也得了解该怎么用，碰到棘手的例如加密内容，你得懂js代码，因为加密过程一般在js代码中，暂时你要学的大致就是这么多了，爬虫这条路也不简单，后面涉及到APP爬虫还有数据存储分析这款
E. 学python爬虫，已有基础入门知识，是自己从零学怎么编写爬虫好还是直接学怎么用框架实现功能好
直接框架。爬虫基本内容逻辑不复杂。
框架解决非主要逻辑问题，你把焦点放在业务主要逻辑上。
自己写，各种异常请求，多线程，断点，连续访问，代理等等，非常耗时间。
F. 要做程序员需要具备哪些基础才能开始学习程序员课程的
程序设计语言C
数据结构
这两个最基础的，一般是基础中的基础
然后是操作系统、组成原理、 这两个也是计算机基础，对于做硬件的必须学习
做软件的话需最好学学离散数学
G. 想做一个Python工程师，有哪些技能是必备的
跟大家分享一份系统的python学习路线图！
第一阶段Python基础与Linux数据库。
这是Python的入门阶段，也是帮助零基础学员打好基础的重要阶段。你需要掌握Python基本语法规则及变量、逻辑控制、内置数据结构、文件操作、高级函数、模块、常用标准库模块、函数、异常处理、MySQL使用、协程等知识点。
学习目标：掌握Python基础语法，具备基础的编程能力；掌握Linux基本操作命令，掌握MySQL进阶内容，完成银行自动提款机系统实战、英汉词典、歌词解析器等项目。
第二阶段WEB全栈。
这一部分主要学习Web前端相关技术，你需要掌握HTML、CSS、JavaScript、jQuery、BootStrap、Web开发基础、VUE、Flask Views、Flask模板、 数据库操作、Flask配置等知识。
学习目标：掌握WEB前端技术内容，掌握WEB后端框架，熟练使用Flask、Tornado、Django，可以完成数据监控后台的项目。
第三阶段数据分析+人工智能。
这部分主要是学习爬虫相关的知识点，你需要掌握数据抓取、数据提取、数据存储、爬虫并发、动态网页抓取、scrapy框架、分布式爬虫、爬虫攻防、数据结构、算法等知识。
学习目标：可以掌握爬虫、数据采集，数据机构与算法进阶和人工智能技术。可以完成爬虫攻防、图片马赛克、电影推荐系统、地震预测、人工智能项目等阶段项目。
第四阶段高级进阶。
这是Python高级知识点，你需要学习项目开发流程、部署、高并发、性能调优、Go语言基础、区块链入门等内容。
学习目标：可以掌握自动化运维与区块链开发技术，可以完成自动化运维项目、区块链等项目。
按照上面分享的Python学习路线图学习完后，你基本上就可以成为一名合格的Python开发工程师。
H. 爬虫工程师要学什么技术
学习 python 爬虫的路线
学习Python有个学习方向能够少走点弯路，就像在实习的时候，能够遇到一个好老大，给你稍微指一下方向，比你自己瞎jb琢磨的结果肯定结果相差很大。毕竟人家认知比你高上一截。
基本的 Python 语法
要用 Python 来写爬虫，当然是需要 Python 的基本语法了。Python的基本语法不难，之前我就写了一个小教程，讲的是 Python3 的一些基本使用，可以看看这里：python3入门基础有趣的教程
抓包工具
爬虫要去抓取网页上的内容，一些请求参数和返回数据信息，需要去分析和抓取，熟悉一下抓包工具的使用还是很有必要的，这不，我也写了一个关于 Fiddler 的使用：Fiddler抓包工具完全使用教程，还顺便装了个逼！
爬虫常用到的模块
Python 有一些内置的库，专门对一些网页数据的请求和解析使用的，比如urllib，http。
正则表达式
抓包获取到的数据，有很多数据是你不想要的，我们只需要拿到我们想要的数据就可以了，那么这个时候呢，正则表达式就派上用场了，常用的有：re，Xpath，BeautifulSoup。
反爬机制
有些网站被爬取怕了，做了一些爬虫的限制，要学点反爬机制才行，header，robot，时间间隔，ip代理，UA限制，Cookie限制等。
数据存储
爬取到的数据要存储下来吧，那么就要会数据库的操作，比如mysql。还要会数据去重操作。
爬虫效率
提高爬取数据的效率，就需要使用多线程，分布式。
爬虫的框架
站在巨人的肩膀上尿尿，那么就需要知道框架怎么使用，比如Scrapy，PySpider，简直牛逼。