博睿云-IT技术在线教育学习平台

课程概览
授课讲师
课程大纲

课程概览
授课讲师
课程大纲

本门课程主要对天猫订单成交数据，进行数据存储、数据清洗、数据分析、数据可视化等操作，来进行简述关于天猫订单的销售现状、挖掘潜在规律、发现存在问题、提出可行性建议。

课程概览

通过本课程你将学习到以下内容。
第1章：介绍了Linux基础知识。
第2章：介绍了 Hadoop集群搭建。
第3章～第5章：介绍了Maven、MapReduce分布式计算框架以及Scala编程语言。
第6章：介绍了Spark大数据处理框架特性。
第7章：介绍了PythonWeb常用前端UI框架、不同数据返回方式。
第8章：介绍了利用SparkSql构建指标，进行项目开发和部署。

授课讲师

伍伟邦

伍老师有10年的Java开发、大数据开发工作经验，精通Java、Scala、js、Python、sql等编程语言。熟练运用Java，运用各级框架的组合开发。并能熟悉基于Oracle、MySQL等多种数据库编程，有千万级的电信大数据处理经验；曾带领团队主导研发CRM大型项目。熟悉linux/unix平台；熟悉redis、solr、nginx、apache集群、负载均衡等等技术解决系统多并发的问题。精通Hadoop、hive、Spark等大数据组件，及华为大数据平台与数据挖掘知识体系。项目经验： 1、广东电信营业厅效能评估子系统 2、广东电信渠道绩效业务支撑系统 3、某银行定期存款业务预测项目 4、某电商日志数据消费行为分析项目 5、AFC地铁售票机管理系统 6、广东移动销售绩效评估系统

课程大纲

第1章 Linux基础知识
第1节Linux安装
第2节 Linux命令行
第3节Linux VIM编辑器
第4节Linux用户管理
第5节Linux安装Java环境
第6节 Linux安装MariaDB环境

第2章 Hadoop集群搭建
第1节Hadoop介绍
第2节Hadoop读写流程
第3节Hadoop的前期准备
第4节Hadoop安装
第5节Hadoop测试
第6节HDFS的shell命令

第3章 Maven的概述
第1节Maven介绍
第2节 JDK安装
第3节Maven安装
第4节Idea集成Maven环境
第5节Maven POM项目描述
第6节使用Java操作HDFS数据

第4章MapReduce分布式计算框架
第1节认识MapReduce
第2节 MapReduce工作流程
第3节MapReduce词频统计
第4节MapReduce编程示例
第5节Yarn资源管理器

第5章Scala语言基础
第1节 Scala介绍
第2节Scala安装
第3节Scala基本语法
第4节Idea集成Scala环境
第5节Scala学习步骤

第6章Spark大数据处理框架
第1节 Spark介绍
第2节Spark安装
第3节Spark RDD常用操作
第4节Spark词频统计程序
第5节 Spark词频统计编程开发
第6节 Spark词频统计本地调试
第7节Spark SQL概述
第8节 Spark DataFrames操作
第9节Spark读写Mysql操作

第7章 PythonWeb框架
第1节PythonWeb前端UI框架
第2节 PythonWeb-Flask框架
第3节PythonWeb连接Mysql
第4节饼图通过数据库返回数据
第5节柱图通过后台返回数据

第8章综合案例
第1节Spark分析天猫的订单数据
第2节Spark项目工程构建指标
第3节PythonWeb前端页面实现
第4节PythonWeb应用开发
第5节项目程序效果图

第9章1章
第1节节

节数	上课时间	星期一	星期二	星期三	星期四	星期五	星期六	星期天
第1节	08:00 - 08:40
第2节	09:00 - 09:40
第3节	10:00 - 10:40
第4节	11:00 - 11:40
第5节	14:00 - 14:40
第6节	15:00 - 15:40
第7节	16:00 - 16:40
第8节	17:00 - 17:40

天数	上课日期	上课时间	内容

手机号验证登录

大数据离线分析项目实践

课程概览

授课讲师

课程大纲

相关课件更多

网站导航

手机号验证登录

大数据离线分析项目实践

课程概览

授课讲师

课程大纲

相关课件 更多

相关课程

网站导航

相关课件更多