大数据系列教程(二):Hadoop集群坏境CentOS安装

作者 : 开心源码 本文共1007个字,预计阅读时间需要3分钟 发布时间: 2022-05-14 共305人阅读

前言

前面我们主要分析了搭建Hadoop集群所需要准备的内容和少量提前规划好的项,还没有看的朋友可以点击下方跳转至上一篇文章

↓↓↓

大数据系列教程(一):Hadoop集群坏境搭建配置

本篇我们主要来分析如何安装CentOS操作系统,以及少量基础的设置,闲言少叙,我们进入本篇的正题。

技术准备

VMware虚拟机、CentOS 6.8 64 bit

安装流程

由于我的笔记本是Window7操作系统,而后内存配置,只有8G,内存配置太低了,当然为了演示,我会将Hadoop集群中的主节点分配2GB内存,而后剩余的三个节点都是1GB配置。

所有的节点存储我都设置为50GB。

在安装操作系统之前,我们需要提前规划好操作系统的分区如何设置,我们知道,在Linux系统中,它的磁盘分区并不同于Windows系统,它是通过目录挂载的方式进行分区,简单点说的话就是将不同的系统内置目录进行分配到不同的逻辑分区中,而后我们在进行存储的时候只要要根据目录进行存放即可以了。

上面的这种分区方式是和Windows操作系统有区别的,当然在Linux操作系统中还存在磁盘格式的不同,比方一般常见的格式为:ext2,ext3,ext4等,我们当前最常用的就是ext3,关于每种格式的不同点和应用场景大家有兴趣的可以网上查阅,这里不再赘述。

那么我们来分析一下Linux系统中最常见的几种目录分区方式

  • /boot 系统引导目录,用来存放与Linux系统启动相关的程序,比方启动引导装载程序等。建议大小200MB。
  • /usr 存放系统中安装的应用程序,一般的数据都比较多,所以建议大于3GB。
  • /var 用来存放Linux系统中经常变化的数据以及日志文件,建议大于1GB。
  • /home 存放普通客户的数据,是普通客户的宿主目录,一般一个客户就会创立一个home目录,建议大小为剩下的空间。
  • / 为Linux系统的根目录,所有的目录都挂在到这个目录下面,建议大小为大于5GB以上。
  • /tmp 临时文件存放的地方,一般需要独立的分区,这样可以避免系统被塞满后系统的稳固性。建议大小为500MB以上。
  • swap 这个是虚拟内存,一般建议为物理内存的1——2倍。

以上为我基于我们的50GB的存储空间做的一个规划,假如生产或者者物理机大家可以根据需要成比例递增。

下面,咱们进去CentOS操作系统的详细安装过程。

1、首先需要在VMWare中创立一个新的计算机,而后指定CentOS的镜像路径和客户名和密码。

大数据系列教程(二):Hadoop集群坏境CentOS安装

说明
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » 大数据系列教程(二):Hadoop集群坏境CentOS安装

发表回复