大数据开发工程师
大数据领域中坚技术层
大数据中从业人员缺口最大的领域
薪资范围:15k-30k/月
-
-
-
电商网站KPI统计
HOT
-
本课程主要讲解了电商网站KPI实战项目,该项目通过采用MapReduce计算模型结合mahout机器学习来实现用户相似度、商品关联度和降维分析等协同过滤算法。利用该系统,直接促成商业交易额大幅度提升。
-
-
-
-
征服Spark一入门与提高篇
HOT
-
本课程全程实战演练,讲解Spark核心概念和技术原理
解读Spark与Hadoop的优势对比
从0起步进行Spark的两种安装方式与集群的构建
讲解Spark的核心概念Resilient Distributed Dataset.
详细演示Maven的工作原理以及本地Maven仓库服务器的搭建与配置
结合书籍同步讲解Spark集群的部署模式以及shell的应用
讲解Spark编程与运行。
-
-
-
-
征服Spark 二 Spark项目编译运行篇
HOT
-
sbt(simplebuild tool)以及弃用的原因
使用maven对Spark的项目进行编译和运行
演示addFile的操作原理和Spark的整体概述
实战演练maven的pom文件的配置
详细讲解eclipse下maven的使用与spark项目的构建以及仓库的配置。
-
-
-
-
征服Spark 三 Spark中数据的加载与保存
HOT
-
讲解spark中分别使用java和scala语言创建sparkContext对象,
介绍SparkContext中几种元数据,master、appName、version等.
介绍并演示addFile文件的意图和常见错误.
通过案例展示flatMap的RDD扁平化处理机制.
讲解csv文件的spark数据处理。
-
-
-
-
Scala精通与实战编程
HOT
-
Scala运行环境的安装与搭建
Scala语法基础与编程模式
Scala操作符重载与控制结构
Scala异常处理与函数。
-
免费
-
-
-
第一季 Docker实战之Dockerfile和持续集成
HOT
-
1.中国第一套docker实战视频课程
2.课程内容结合实际经验讲述
3.课程内容源代码开放
4.真实案例分享
5.涵盖最常用的Docker镜像(nginx,tomcat,msyql,wordpress等)
6.零基础的人都可以通过学习该课程变成Docker专家
7.视频课程中涵盖docker基础,容器管理,镜像创建,详解Dockerfile,Docker网络,Docker存储,容器日志管理,容器服务编排Compose, Docker Swarm集群以及持续集成使用Docker的项目实战内容。
-
免费
-
-
-
第二季 Docker实战之监控报警及日志管理、网络管理
HOT
-
中国第一套docker实战视频课程
2.课程内容结合实际经验讲述
3.课程内容源代码开放
4.真实案例分享
5.涵盖最常用的Docker镜像(nginx,tomcat,msyql,wordpress等)
6.零基础的人都可以通过学习该课程变成Docker专家
7.视频课程中涵盖docker基础,容器管理,镜像创建,详解Dockerfile,Docker网络,Docker存储,容器日志管理,容器服务编排Compose, Docker Swarm集群以及持续集成使用Docker的项目实战内容。
-
-
-
-
第三季 Docker实战之持续部署以及弹性伸缩 存储管理
HOT
-
1.中国第一套docker实战视频课程
2.课程内容结合实际经验讲述
3.课程内容源代码开放
4.真实案例分享
5.涵盖最常用的Docker镜像(nginx,tomcat,msyql,wordpress等)
6.零基础的人都可以通过学习该课程变成Docker专家
7.视频课程中涵盖docker基础,容器管理,镜像创建,详解Dockerfile,Docker网络,Docker存储,容器日志管理,容器服务编排Compose, Docker Swarm集群以及持续集成使用Docker的项目实战内容。
-
免费
-
-
-
Hive高级操作
HOT
-
本课程主要讲解了Hive高级操作,包括以下知识点:
创建分区表,手动添加分区表,导出数据到本地和到HDFS目录,
查询、使用数学函数、聚合、函数,内外链接,试图、索引等。
-
-
-
-
Sqoop:Hadoop与关系数据库转换
HOT
-
sqoop适用于关系型数据库和HDFS分布式数据系统之间进行数据转换,在企业中,是构建数据仓库的一大工具。本课程主要介绍了Sqoop的安装和配置、导出创建Sqoop job、导入MySQL数据到Hive表和hbase表等操作。
-
-
-
-
Flume使用进阶
HOT
-
本课程讲解了以下内容:
1.SpooldirSource
2.udp源-tcp源-multcp源-http源
3.exec调错-http源-hdfs block手动合成
4.hive Sink集成
5.hbase async集成-channel
6.HiveSink错误解决-spillableMemory通道
7.Sink容灾-SinkGroup
8.Sink负载均衡-拦截器
9.自定义拦截器
-
-
-
-
信息安全基础入门
HOT
-
本课程首先讲述了信息安全的整体框架,然后从框架具体知识点出发,讲述了涉及密码学,数字签名,密钥管理,PKI,认证技术,网络协议安全性分析,计算机病毒和防护墙技术,以及攻击和防范技术等众多内容。
-
优质课程
支持考试