V2AS
问路
意见反馈
↓ 按住下拉
笃情开源:我和 Apache DolphinScheduler 社区的故事
背景 本文的主人翁是 2 次飞机参会现场交流,四天研究就把 DolphinScheduler 用上生产的来自车联网行业的大数据 boy - 黄立同学。怎么样,听起来是不是有点 crazy? ......
社区
DolphinScheduler
Apache
开源
ds
分布式文件系统HDFS-部署和配置
HDFS的基本操作可以分为集群管理和文件系统操作两种类型: 集群管理:包括Namenodede 的格式化、集群的启动和停止、集群信息查看等。 文件系统:包括对目录、文件和权限 ......
HDFS
hdfs
dfs
节点
namenode
一文理解Hadoop分布式存储和计算框架入门基础
目录 概述 定义 发展历史 发行版本 优势 生态项目 架构 组成模块 HDFS架构 YARN架构 部署 部署规划 前置条件 部署步骤 下载文件(三台都执行) 创建目录(三台都 ......
value
property
hadoop
Hadoop
commons
[JAVA/Maven/IDEA]解决JAR包冲突
1 前言 想必这个问题,诸多同仁都遇到过。 很不凑巧,这段时间咱也屡次撞上这问题好几次了。 因此,实在是有必要说说怎么解决好这问题了0.0 2 诊断:包冲突的异常信息 ......
jar
jetty
root
冲突
server
chunjun同步两个带Kerberos认证的CDH集群数据
最近在项目中遇到同步两个 CDH 数据文件的需求,调研了一圈,发现 datax 不支持两个 cdh 同时进行 kerberos 认证,因此切换到 chunjun,chunjun 在 kerberos 认证的 ......
dfs
集群
properties
hdfs
kerberos
利用cm压缩包手动安装cm和cdh
安装准备: 1.操作系统为centos6.9 CentOS-6.9-x86_64-bin-DVD1to2 2.安装Oracle JDK (1.8u121) 下载jdk-8u121-linux-x64.tar.gz(/home/cdhadoop/Downloads) 解 ......
mysql
安装
mysqld
log
java
【深入浅出 Yarn 架构与实现】5-3 Yarn 调度器资源抢占模型
本篇将对 Yarn 调度器中的资源抢占方式进行探究。分析当集群资源不足时,占用量资源少的队列,是如何从其他队列中抢夺资源的。我们将深入源码,一步步分析抢夺资源的 ......
队列
资源
Yarn
抢占
Resource
大数据安全与RANGER学习和使用
概述 再说ranger之前需要明白一下大数据的安全体系的整体介绍,安全体系其实也就是权限可控,先说说权限:权限管理的目标,绝对不是简单的在技术层面建立起用户,密码 ......
权限
用户
Kerberos
组件
Ranger
【CDH数仓】Day01:概念、环境搭建、CDH数仓搭建、用户行为数仓搭建
一、数仓之
Cloudera
Manager 1、CM简介 拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具 快速安装,快速运维,提高集群的效率 CM架构 2、阿里云服务器 ......
CDH
搭建
连接数
数仓
安装
namenode和datanode启动失败
1.namenode启动失败,查看错误原因,是无法格式化,再看日志,根据日志提示,清空对应的目录,即可解决这个问题。 2.datanode启动失败: Can't open /var/run/
cloudera
- ......
datanode
hadoop
namenode
hdfs
启动
V2AS = Way To Ask
V2AS 一个技术分享与创造的静土
手机扫一扫
移动阅读更方便
近15日热搜文章
Paxos协议超级详细解释+简单实例
DevStack部署OpenStack开发环境 - 问题总结
C++20初体验——concepts
4
Linux下安装ffmpeg,视频格式转换
5
C# 检测某版本VC++是否安装
6
std::sort为什么保证严格弱序?
7
UPX源码分析——加壳篇
8
Knockout.Js官网学习(数组observable)
9
卷积及理解图像卷积操作的意义
10
再来一个tensorflow的测试性能的代码