千锋教育-做有情怀、有良心、有品质的职业教育机构

400-811-9990
手机站
千锋教育

千锋学习站 | 随时随地免费学

千锋教育

扫一扫进入千锋手机站

领取全套视频
千锋教育

关注千锋学习站小程序
随时随地免费学习课程

上海
  • 北京
  • 郑州
  • 武汉
  • 成都
  • 西安
  • 沈阳
  • 广州
  • 南京
  • 深圳
  • 大连
  • 青岛
  • 杭州
  • 重庆
当前位置:郑州千锋IT培训  >  行业资讯  >  千锋郑州大数据培训学员分享常用目录及Hadoop入门知识

千锋郑州大数据培训学员分享常用目录及Hadoop入门知识

来源:千锋教育
发布人:Yolanda
时间: 2019-01-25 16:02:00

  经过在千锋郑州大数据培训班这些日子的阶段性学习,我完成了对Hadoop生态圈的学习,对于Linux的操作也越发的熟练,也有了一些自己的感悟。学习一个新的知识对目录结构的了解是十分重要的,以下是我对常用目录的总结。

  1、sbin目录:存放启动或停止hadoop相关服务的脚本

  2、bin目录:存放对hadoop相关服务(HDFS,YARN)进行操作的脚本

  3、etc目录:hadoop的配置文件目录,存放hadoop的配置文件

  4、share目录:存放hadoop的依赖jar包和文档,文档可以被删除掉

  5、lib目录:存放hadoop的本地库(对数据进行压缩解压缩功能)

  6、conf目录:主要存放配置文件

图片4

  想要学好Hadoop文件系统,你首先要了解以下三个问题:

  1、什么是分布式文件系统?

  管理网络中跨多台计算机存储的文件系统称为分布式文件系统。

  2、为什么需要分布式文件系统了?

  原因很简单,当数据集的大小超过一台独立物理计算机的存储能力时候,就有必要对它进行分区并存储到若干台单独计算机上。

  3、分布式系统比传统的文件的系统更加复杂

  因为分布式文件系统架构在网络之上,因此分布式系统引入了网络编程的复杂性,所以分布式文件系统比普通文件系统更加复杂。

  4、Hadoop的文件系统

  很多同学会把hdfs等价于hadoop的文件系统,其实hadoop是一个综合文件系统抽象,而hdfs是hadoop旗舰级文件系统,hadoop除了hdfs还能集成其他文件系统。Hadoop的这个特点充分体现了hadoop的优良的可扩展性。

  Hadoop基础知识学完之后,我们还要学习Hadoop的一系列工具,每个工具都在大数据处理中有特定的功能,可以帮助我们更快更高效的解决问题,我们必须要熟练的掌握他们。

  有多少付出就有多少回报,在千锋郑州大数据培训班,我可能比别的同学少了一些基础,那我就要努力补回来!在千锋,我学会了要朝着自己的目标奋勇前进!现在的日子虽然每天学习压力非常大,但我绝对不会放弃。

声明:本站稿件版权均属千锋教育所有,未经许可不得擅自转载。

猜你喜欢LIKE

大数据培训要花多少钱

2023-04-12

计算机前端怎么学

2023-04-12

大数据都需要学什么?难不难

2023-03-30

最新文章NEW

javaee是前端还是后端,都学什么

2023-03-24

it前端是做什么的

2023-03-24

大数据培训要多久?你了解多少

2023-03-09

相关推荐HOT

更多>>

快速通道 更多>>

最新开班信息 更多>>

网友热搜 更多>>