python网络爬虫工程师

Python环境安装Linux/Windows/MacOS
如何优雅的运行python代码
Python开发工具及运行环境
可视化ipython编程及数据呈现

整形数和浮点数操作
字符串定义，应用场景及Bytes操作
元组和列表操作
字典与顺序字典、映射数据类型及转换
集合与frozenset

Python经典语句及应用经典
Python 库介绍及使用
Python模块创建及应用案例
大型程序程序模块组织及包封装
熟用import语句，加速二次开发及程序整合的进程
Python代码发布及开源贡献

系统内置函数介绍、熟用系统内置函数
解决代码冗余及代码复用问题
函数定义及抽象设计
函数参数设计与参数详解
LEGB规则应用
函数闭包操作
函数高级特性及函数经典设计

让思想更加抽象，逻辑与数据分离
面向对象思想
python 类别与类型区分
class定义与抽象逻辑编写
类与方法设计，分割功能与程序模块化
满足业务能力的函数变形—装饰器
经典类与新式类的区分

程序运行规则
异常捕获及处理方式
编写异常事件及警告

访问不同类型文件
创建、读取、更新和删除文件使用正则表达式
Microsoft word、Excel和CSV数据操作及数据渲染
创建、删除目录，排列及文件搜索
python与echarts实现数据美颜可视化显示，让数据更加惊艳

Python MySQL API操作
数据库增、删、改、查及批量操作
专注程序、抽象编写数据库驱动程序使用对象关系映射SQLAlchemy

 Python操作NoSQL数据库

多线程编程、多进程编程与队列应用
Python网络编程
Python GUI编程思路及PyQT图形化编程
Python获取互联网数据及WEB表单自动填充
Python XML与HTML处理

互联网资源获取
数据整理与清洗
表单自动化填写
Beautifulsoup实践

利用模块快速组织应用编程
Python工具编程实践

1）完成项目指定网页url地址和网页结构的分析。
提供的网站中有get和post请求，讲解firefox、ie的基本插件使用；讲解html的标签基本常识；讲解网站对服务器发起请求的原理和url的作用。
2）完成项目指定的网站的源码爬取
通过以上方式结合python爬虫模块，将网页的源代码抓取下来，讲解网站爬取时的编码问题，和常见的爬取过程当中发生的网络报错，比如404,500
3）完成项目指定的内容的爬取.
在第二部的基础之上，我们要完成对指定网页当中的指定信息的筛选，在这里会讲到：lxml、re、beautifulsoup ，使用这些匹配规则对获取到的源码进行分析匹配，从而获得指定的内容。
4）完成整个网站的爬取
在上面三个实训项目完成之后，我们开始用递归实现，多线程实现，面向过程实现，面向对象实现，这样在工作当中经常用到的编程理念来实现这个项目指定的一个或多个网站的爬取！
这里会涉及到python多线程，python递归，python面向对象，python 面向过程的知识