黑马课程 带你斩获职场技能

  • 掌握硬核技能

    Python大数据需要学什么? 大厂级前沿技术
    覆盖企业所需
    核心技术栈
  • 积累工作经验

    Python大数据处理与分析 80+技术解决方案
    覆盖职场
    常见技术难题
  • 适应职场节奏

    大数据的岗位有哪些 遵循大厂开发
    标准流程 涵盖
    500+核心技能点
  • 搞定面试就业

    Python大数据面试题 真场景实战项目
    整合电商/金融/
    零售等行业项目
我要C位出道

循序渐进 从小白到职场大牛

Python编程

主要内容

Python基础语法Python数据处理函数文件读写异常处理模块和包面向对象网络编程 多任务编程高级语法

可掌握的核心能力

1.掌握Python开发环境基本配置;
2.掌握运算符、表达式、流程控制语句、数组等的使用;
3.掌握字符串的基本操作;
4.初步建立面向对象的编程思维;
5.熟悉异常捕获的基本流程及使用方式;
6.掌握类和对象的基本使用方式;
7.掌握网络编程技术,能够实现网络通讯;
8.知道通讯协议原理;
9.掌握开发中的多任务编程实现方式;
10. 知道多进程多线程的原理。

阶段案例实战

Python编程综合项目

SQL&ETL实战

主要内容

MySQL与SQLKettle与BI工具PymysqlETL概念与工具Python ETL实战BI

可掌握的核心能力

1. 掌握MySQL数据库的使用;
2. 掌握SQL语法;
3. 掌握Kettle数据迁移工具的使用;
4. 熟练使用BI可视化工具;
5. 对数据开发有一定认知,掌握BI工程师所具备的基本技能;
6 掌握ETL的相关概念;
7. 掌握基于Python语言完成ETL任务开发实战;
8. 基于ETL实战锻炼Python编程能力,包括(元数据管理、数据模型、项目配置、单元测试、工具方法抽取等);
9. 掌握BI数据分析实战。

阶段案例实战

新零售行业ETL实战项目

Hadoop&离线数仓

主要内容

YARNHive基础Hive高阶大数据部署运维:Cloudera Manager分析决策需求:数据仓库数据采集:sqoop数据分析:Hive历史数据快照:拉链表数据更新后的统计分析:拉链表数据调度:oozie+shellOLAP系统存储:MySQLFineBI数据展示大数据部署运维:Cloudera Manager分析决策需求:数据仓库数据采集:sqoop数据分析:Hive+presto历史数据快照:拉链表数据更新后的统计分析:拉链表数据调度:dsOLAP系统存储:MySQLFineBI数据展示

可掌握的核心能力

1.掌握Linux常用命令,为数据开发后续学习打下的良好基础;
2.掌握大数据的核心框架Hadoop以及其生态体系,完成HDFS、MapReduce及Yarn机制基本理解与使用;能顾搭建Hadoop高可用HA集群;
3.掌握Hive的使用和调优;
4.具备Hadoop开发能力、离线数据仓库开发能力;
5.掌握零售行业离线数仓的分层与建模,从需求、设计、研发、测试到落地上线的完整项目流程;
6.掌握教育行业离线数仓的分层与建模,从需求、设计、研发、测试到落地上线的完整项目流程;
7.真实业务逻辑,共涉及20多个主题,100多个指标,提升学员在教育行业中的核心竞争力;
8.新增数据和更新数据的抽取和分析;
9.Hive函数的具体应用;
10.ClouderaManager可视化、自动部署和配置、Git、CodeReview功能。

阶段案例实战

Hadoop、Hive及新零售项目
教育项目
企业级离线数仓大数据平台构建开发

Spark实战

主要内容

Pandas基础Pandas数据处理实战Spark基础Spark CoreSpark SQLSparkSQL案例项目核心架构和业务流程Hive数仓建模 Sqoop数据同步开发 DolphinScheduler任务调度使用lag,sum等窗口函数使用UDAF函数计算有效保单数字段计算现金价值计算和准备金分区表的使用 指标汇总计算Shuffle优化

可掌握的核心能力

1.掌握Spark的RDD、DAG、CheckPoint等设计思想;
2.掌握SparkSQL结构化数据处理,Spark On Hive;
3.掌握Structured Streaming整合多数据源完成实时数据处理;
4.具备Spark全栈开发能力,满足大数据行业多场景统一技术栈的数据开发,提供就业核心竞争力;
5.快速搭建保险行业大数据平台;
6.基于Hive+Spark SQL搭建离线数据仓库;
7.基于SparkSQL应对轻松应对复杂的迭代计算;
8.完成基于国内头部保险公司大数据项目开发;
9.掌握基于Spark分析12亿报单表和8千万客户等数据;
10.对保单汇总计算(业务发展类指标,成本费用类指标等),并向业务人员做数据展示。

阶段案例实战

Spark框架及保险行业大数据开发项目

实时计算基础&企业级用户画像解决方案

主要内容

万亿级NoSQL海量数据存储Flume实时数据采集分布式流处理平台Spark Structured StreamingNoSQL社交场景大数据分析实战1SparkSQL整合ES自定义数据源DS任务界面化调度用户画像标签构建规则用户画像规则类标签构建用户画像统计类标签构建

可掌握的核心能力

1.掌握Redis原理及架构、命令操作、及数据结构;
2.掌握HBase原理及架构,HBase命令操作、MapReduce编程;
3.掌握Phoneix二级索引优化查询;
4.掌握ELK开发掌握Kafka原理及架构;
5.掌握Flume原理及架构,掌握HBase原理及架构;
6.掌握HBase命令操作、MapReduce编程;
7.掌握Phoneix二级索引优化查询;
8.掌握ELK开发掌握Kafka原理及架构;
9. SparkSQL整合ES自定义数据源;
10. DS任务界面化调度;
11. 用户画像标签构建规则,用户画像规则类标签构建,用户画像统计类标签构建。

阶段案例实战

Spark企业级用户画像项目实战
构建通用行业用户画像标签体系

Flink技术栈&亚秒级实时计算

主要内容

Flink CoreFlink DataStreamFlink SQLFlink RuntimeFlink高级Flink电商案例实战

可掌握的核心能力

1.掌握基于Flink进行实时和离线数据处理、分析;
2.掌握基于Flink的多流并行处理技术;
3.掌握千万级高速实时采集技术。

阶段案例实战

掌握Flink技术强化面试技巧和能力
掌握湖仓一体化解决方案项目

亚秒级实时进阶课

主要内容

FlinkFlinkSQLFlinkCDCDorisHudiHudi on Hive FIneBI

可掌握的核心能力

1.湖仓一体化解决方案基于Flink+Hudi湖仓一体技术架构;
2.基于FlinkCDC完成MySQL等数据源的数据采集;
3.FlinkSQL流批一体架构实现实时数据计算;
4.使用Apache Doris进行海量多维分析;
5.掌握数据报表分析;
6.掌握业务数据实时大屏场景实现。

职后提升持续成长

深入Flink技术栈源码剖析,Flink源码二次开发、数据湖及全栈数据开发平台

获取详细课程>>

拒绝设限 打开双重晋升通道

Python大数据发展前景如何?

数据工程师 2-4年开发经验

  • 技术晋升

    资深数据分析师/数据工程师 数据科学家/数据架构师 CDO(首席数据官)/CTO
  • 管理晋升

    项目经理 项目总监 CIO
Get晋升技能

热门实战 轻松上手工作

Python大数据应用实例

千亿级数仓可视化平台

项目介绍

真实的数据结构,复杂的SQL实现过程,学生学习以后可以达到离线数仓的高级开发水平。

黑马头条

项目介绍

黑马头条项目是一款汇集科技资讯、技术文章和问答交流的用户移动终端产品。用户可以轻松获取新资讯,发布资讯文章。

今日指数证券

项目介绍

本项目基于Flink框架搭建,结合HBase、Druid进行实时OLAP分析,在实时分析的平台上搭建监察预警体系,包括预警规则管理、实时预警、历史预警等。

自动化运维中台

项目介绍

自动化运维中台是一套基于DevOps理念的运维造化管理系统。它整合了CMDB、CI/CD、监控、自动化工具、项目管理、版本管理等常用运维系统。

天天生鲜

项目介绍

天天生鲜是围绕着老百姓餐桌的生鲜B2C电商平台。以品质生活为目标,服务每一个家庭,覆盖了水果蔬菜、海鲜肉禽、牛奶零食等全品类。

黑马监控与链路追踪

项目介绍

引入链路追踪与监控,构建可观测的服务系统,提高系统的可观测性,减少低效劳动,多维度、快速定位并解决问题。
立即线上体验

大厂持续引进教研大牛

Python大数据难学吗

教研团队课程升级/技术迭代/课程接轨企业需求

原老师

北大硕士 大型项目经验丰富 精通后端常用开发语言

史老师

多年IT教学经验 后端开发研究深入 授课认真细致,由浅入深

谢老师

曾任职360 授课风格风趣幽默 知识讲解结构层次分明

孔老师

11年开发经验 曾任途牛旅游网架构师 万亿级数据优化处理经验

魏老师

涉足Java、大数据、云计算等领域 拥有丰富的企业级大数据应用架构及开发经验

张老师

Flink技术专家 曾任职技术总监 主导项目研发

讲师团队名师面授/经验丰富/技术点讲透

Python大数据教研团队

魏老师

高级讲师 精通Python语言 专注B2B电商数据分析领域

许老师

十年开发经验 美国Intel多核多线程认证 ARM认证工程师资格证

刘老师

善于实战驱动教学 注重课堂气氛 理论与实践紧密结合

曹老师

曾任职京东/小米有品 拥有万亿级数据处理经验 数据领域和云平台研发经验

孙老师

高级讲师 10年大数据开发经验 曾任职搜狐基础数据平台

康老师

硕士 高级讲师 数据库与数据挖掘研究方向
和名师对话

TLIAS智能教学系统
学练测辅多方位护航

Python大数据就业方向

讲师闭环面授教学

讲师面授 互动教学 问题解答 作业批改 即时答疑 不让问题过夜

TLIAS教学辅助

阶段测试 进度评估 讲练测考 测评反馈 专属题库 查漏补缺

学习提效服务

封闭管理 严查出勤/学风 学练结合 离就业岗位更近 实时更新 贴近企业需求

增值服务

简历优化 秒过筛选 1V1模拟面试 复盘全程 就业跟踪 线上答疑
更多服务内容

学友伴学 校园氛围更浓厚

江苏传智播客教育科技股份有限公司版权所有

Copyright 2006-2022, All Rights Reserved 苏ICP备16007882号-1

我要报名 立即咨询