HDFS核心概念与架构
HDFS是Hadoop项目的核心子项目，在大数据开发中通过分布式计算对海量数据进行存储与管理，它基于流数据模式访问和处理超大文件的需求而开发，可以运行在廉价的商用 ......![]()
Hadoop NameNode启动后自动关闭解决方法
Hadoop NameNode启动后过一会自动关闭了，查看日志文件报内存溢出异常： tail -100 /bigdata/logs/hadoop/hadoop-root-namenode-node1.log 解决方法： 修改配置文 ......![]()
Hadoop环境安装与配置
1.基础操作系统环境安装（略） 2.JDK的安装与配置 当前各大数据软件如Hadoop等，仍然停留在Java 8上，在本实验选用的是Java 8。在自己的Linux系统中，jdk可以使用如下 ......![]()
HBase 安装与配置及常用Shell命令
HBase 安装与配置 首要配置 配置时间同步（所有节点上执行） yum -y install chrony vi /etc/chrony.conf 写入(7版本用server；8版本用pool): server time1.aliyun ......![]()
大数据学习（02）——HDFS入门
提到大数据，Hadoop是一个绕不开的话题，我们来看看Hadoop本身包含哪些模块。 Common是基础模块，这个是必须用的。剩下常用的就是HDFS和YARN。 MapReduce现在用的比较 ......![]()
分布式文件系统HDFS-部署和配置
HDFS的基本操作可以分为集群管理和文件系统操作两种类型： 集群管理：包括Namenodede 的格式化、集群的启动和停止、集群信息查看等。 文件系统：包括对目录、文件和权限 ......Centos7搭建hadoop3.3.4分布式集群
目录 1、背景 2、集群规划 2.1 hdfs集群规划 2.2 yarn集群规划 3、集群搭建步骤 3.1 安装JDK 3.2 修改主机名和host映射 3.3 配置时间同步 3.4 关闭防火墙 3.5 配置s ......![]()
<转>单机版搭建Hadoop环境
安装过程： 一、安装Linux操作系统 二、在Ubuntu下创建hadoop用户组和用户 三、在Ubuntu下安装JDK 四、修改机器名 五、安装ssh服务 六、建立ssh无密码登录本机 七、安装 ......![]()
大数据学习（03）——HDFS的高可用
先上一张搜索来的图。 如上图，HDFS的高可用其实就是NameNode的高可用。 上一篇里，SecondaryNameNode是NameNode单节点部署才会有的角色，它只帮助NameNode完成日志 ......![]()
HDFS05 NameNode和SecondaryNameNode
NameNode和SecondaryNameNode(了解) 目录 NameNode和SecondaryNameNode(了解) NN 和 2NN 工作机制 NameNode工作机制 Secondary NameNode Fsimage 和 Edits 解析 ......![]()
↓ 按住下拉
V2AS = Way To Ask
V2AS 一个技术分享与创造的静土
手机扫一扫
移动阅读更方便
近15日热搜文章