石家庄Python+大数据开发高级工程师

Python大数据专业能从事的领域有很多，如: Python全栈工程师，Python爬虫工程师，Python开发工程师，金融自动化交易，Linux运维工程师，自动化开发工程师，前端开发工程师，大数据分析和数据挖掘等。

实验班 — Python编程基础

知识点分布

1，Python基础语法

1.变量 | 2.数据类型 | 3.运算符 | 4.流程控制语句

2，Python数据处理

1.字符串 | 2.列表 | 3.元组 | 4.字典

3，函数

1.函数定义 | 2.函数传参 | 3.函数返回值 | 4.可变不可变类型 | 5.包的用法

4，文件读写

1.文件的打开、关闭、读写 | 2.文件目录操作 | 3.OS模块文件与目录操作

5，面向对象

1.面向对象的概念 | 2.对象的创建 | 3.继承 | 4.重写

6，异常处理

1.异常的概念 | 2.异常的捕获 | 3.异常的传递

7，模块和包

1.模块的概念 | 2.模块的导入 | 3.包的概念 | 4.包的导入

进阶班 — Python编程进阶

知识点分布

1，网络编程

1.IP地址及端口号介绍 | 2.*CP、Socket介绍 | 3.*CP网络应用开发流程 | 4.基于TCP通信程序开发

2，多任务编程

1.多进程编程 | 2.多线程编程 | 3.线程同步

3，高级用法

1.闭包 | 2.装饰器 | 3.迭代器 | 4.深浅拷贝 | 5.正则

进阶班 — MySQL数据库

知识点分布

1，mysql与SQL

1.数据库的概念和作用 | 2.***ql数据类型 | 3.数据完整性和约束 | 4.数据库、表的基本命令 | 5.***re子句 | 6.分组聚合 | 7.连接查询 | 8.外键使用

2，Kettle与BI工具

1.****le基本操作 | 2.****le数据转换 | 3.使用SQL脚本组件 | 4.****le Job开发 | 5.****BI操作

3，PyMySQL

1.环境搭建 | 2.****on操作数据库

进阶班 — 大数据Hadoop技术栈

知识点分布

1，Linux

1.***ux命令 | 2.远程登录和拷贝 | 3.权限管理 | 4.vi编辑器 | 5.集群搭建准备

2，大数据基础和硬件介绍

1.大数据特点 | 2.分布式概念 | 3.服务器种类 | 4.网络拓扑、IDC、Raid

3，Zookeeper

1.应用场景 | 2.架构原理 | 3.存储模型 | 4.选取机制 | 5.客户端操作 | 6.集群搭建

4，HDFS

1.**FS特点 | 2.架构 | 3.读写流程 | 4.集群搭建

5，MapReduce

1.架构原理 | 2.运算机制 | 3.序列化、排序与压缩

6，Yarn

1.原理架构 | 2.高可用 | 3.资源封装 | 4.调度策略 | 5.模式搭建

7，Hive

1.*QL操作 | 2.数据类型 | 3.分区、分桶、临时表 | 4.内置函数 | 5.数据压缩、存储格式

进阶班 — Pandas技术栈

知识点分布

1，Pandas及可视化

1.数据结构和数据类型 | 2.索引及列操作 | 3.数据增删改查 | 4.常用函数 | 5.数据读取保存及交互 | 6.可视化

进阶班 — Spark

知识点分布

1，Spark基础

1.基础环境搭建 | 2.S*****lone环境搭建 | 3.S*******neHA环境搭建 | 4.S******Yarn环境搭建

2，Spark Core

1.架构和原理 | 2.*DD开发和原理 | 3.广播变量 | 4.*AG原理

3，Spark SQL

1.架构和原理 | 2.D****rame、DataSet、SQL开发 | 3.多数据源整合 | 4.*QL执行计划原理 | 5.*QL性能调优

4，实施计算

1.流式处理基本概念 | 2.架构 | 3.流式运算基本使用 | 4.组件整合

进阶班 — 实时计算基础

知识点分布

1，万亿级NoSQL海量数据存储

1.***SE原理及架构 | 2.预分区、LSM结构 | 3.优化查询

2，Flume实时数据采集

1.原理及架构 | 2.文件数据源及相关配置 | 3.断点续传

3，分布式流处理平台

1.***ka原理及架构分析 | 2.分布式实时计算架构及思想

4，NoSQL社交场景大数据分析实战

1.社交APP场景实战 | 2.大数据架构剖析 | 3.数据采集 | 4.数据ETL | 5.数据分析

进阶班 — 就业指导

知识点分布

1，SQL实战

1.*QL优化加强 | 2.面试题

2，Hive数据分析

1.**ve数仓构建实例 | 2.面试题

3，Spark数据分析

1.离线分析 | 2.面试题

4，NoSQL数据分析

1.***ka加强 | 2.***SE加强 | 3.面试题

5，大数据多行业架构剖析

1.数据分析流程 | 2.数据架构剖析

进阶班 — 大数据实时技术栈

知识点分布

1，Flink Core

1.基础概念

2，Flink Data Stream

1.使用操作 | 2.***ka+Flink

3，Flink SQL

1.开发技术 | 2.**ve+Flink SQL

4，Flink Runtime

1.W****Mark | 2.C*****oint | 3.任务调度与负载均衡 | 4.状态管理

5，Flink 高级

1.性能监控 | 2.***nk调优 | 3.***nk SQL 执行计划

6，电商案例实战

Flume+Kafka+Flink+HBASE+ Sqoop+Canal+MySQL实战