大数据专业主要学什么 有哪些课程

文/叶丹

数据科学与大数据技术,强调交叉学科特点,以大数据分析为核心,以统计学、计算机科学和数学为三大基础支撑性学科,培养面向多层次应用需求的复合型人才。

大数据专业主要学什么

大数据开设课程

数学分析、高等代数、普通物理数学与信息科学概论、数据结构、数据科学导论、程序设计导论、程序设计实践、离散数学、概率与统计、算法分析与设计、数据计算智能、数据库系统概论、计算机系统基础、并行体系结构与编程、非结构化大数据分析等。

大数据的学习阶段

第一阶段:大数据前沿知识及hadoop入门,大数据前言知识的介绍,课程的介绍,Linux和unbuntu系统基础,hadoop的单机和伪分布模式的安装配置。

第二阶段:hadoop部署进阶。Hadoop集群模式搭建,hadoop分布式文件系统HDFS深入剖析。使用HDFS提供的api进行HDFS文件操作。Mapreduce概念及思想。

第三阶段:大数据导入与存储。mysql数据库基础知识,hive的基本语法。hive的架构及设计原理。hive部署安装与案例。sqoop安装及使用。sqoop组件导入到hive。

第四阶段:Hbase理论与实战。Hbase简介。安装与配置。hbase的数据存储。项目实战。

第五阶段:Spaer配置及使用场景。scala基本语法。spark介绍及发展历史,spark stant a lone模式部署。sparkRDD详解。

第六阶段:spark大数据分析原理。spark内核,基本定义,spark任务调度。sparkstreaming实时流计算。sparkmllib机器学习。sparksql查询。

猜你喜欢

学大数据可以从事什么职业 有哪些岗位

2021-04-13

大数据专业学什么 从事什么职业

2021-01-30

软件工程好还是大数据好就业

2021-01-29

2021大数据大专生好就业吗

2021-01-27

2021高考志愿大数据查询:输入成绩查询你能上的大学

2021-01-26

2021大数据专业哪个学校好

2021-01-23

2021大数据就业前景和方向

2021-01-22

女生学大数据很累吗 都学什么东西

2021-01-22

2021大数据专业就业方向

2021-01-21

2021女生大数据就业前景

2021-01-15