《Hadoop大数据技术开发实战》新书上线
当今互联网已进入大数据时代，大数据技术已广泛应用于金融、医疗、教育、电信、政府等领域。各行各业每天都在产生大量的数据，数据计量单位已从B、KB、MB、GB、TB发展到PB、E ......![]()
不想引入mq？试试debezium
有句话叫做“如无必要，勿增实体"。 在一些小型项目当中，没有引入消息中间件，也不想引入，但有一些业务逻辑想要解耦异步，那怎么办呢？ 我们的web项目，单独内网部署，由 ......![]()
Ranger开源流水线docker化实践案例
1.背景 开发部门决定在Apache Ranger开源社区贡献代码，目标是个人国内排名Top1，世界排名Top2，并且在已经成为Ranger项目的Committer情况下，争取成为Ranger项目的P ......![]()
【企业流行新数仓】Day03：SuperSet图表，Ranger权限、脱敏、行级别过滤，Atlas元数据、查询和查看全表/字段血缘依赖，Zabbix告警
一、SuperSet-图表展示 1、概念 （1）概念 通过dashboard(仪表盘)对图表中的数据进行展示 BI工具：根据配置的要求，进行数据源的配置即可 是准商业级别的BI web应用 （2 ......![]()
新一代大数据任务调度系统 - Apache DolphinScheduler 1.3.4 发布，推荐下载
| 本文编辑：朱桐 新一代大数据任务调度 - Apache DolphinScheduler(incubator) 在经过社区 30 多位小伙伴的贡献与努力下于发布了 1.3.4 版本，1.3.4 作为 1.3.x ......![]()
初次使用Sqoop报错，sqoop命令不能正常使用：hcatalog does not exist!accumulo does not exist!
1、问题描述： （1）问题示例： [hadoop@master Tmp]$ sqoop helpWarning: /home/grid/Sqoop/sqoop-1.4.7/../hcatalog does not exist! HCatalog jobs will fail.Ple ......一文理解Hadoop分布式存储和计算框架入门基础
目录 概述 定义 发展历史 发行版本 优势 生态项目 架构 组成模块 HDFS架构 YARN架构 部署 部署规划 前置条件 部署步骤 下载文件（三台都执行） 创建目录(三台都 ......![]()
4 亿用户，7W+ 作业调度难题，Bigo 基于 Apache DolphinScheduler 巧化解
点击上方 蓝字关注我们 ✎ 编 者 按 成立于 2014 年的 Bigo，成立以来就聚焦于在全球范围内提供音视频服务。面对 4 亿多用户，Bigo 大数据团队打造的计算平台基于 A ......![]()
2.2.1 Sqoop1的基本架构
当用户通过shell命令提交迁移作业后，Sqoop会从关系型数据库中读取元信息，并根据并发度和数据表大小将数据划分成若干分片，每片交给一个Map Task处理，这样多个Map ......
↓ 按住下拉
V2AS = Way To Ask
V2AS 一个技术分享与创造的静土
手机扫一扫
移动阅读更方便
近15日热搜文章