入门文章学习（一）-Beginner Tutorial
Abstract: 参照“背景知识查阅”一文的学习路径，对几篇文章的学习做了记录。这是"Beginner Tutorial"一文的学习笔记。 文章链接： https://www.datacamp.com/communit ......spark知识点_datasources
来自官网DataFrames、DataSets、SQL，即sparkSQL模块。 通过dataframe接口，sparkSQL支持多种数据源的操作。可以把dataframe注册为临时视图，也可以通过关系转换。 1 ......Hive存储格式之RCFile详解，RCFile的过去现在和未来
我在整理Hive的存储格式和压缩格式，本来打算一篇发出来，结果其中一小节就有很多内容，于是打算写成Hive存储格式和压缩格式系列。 本节主要讲一下Hive存储格式最早 ......![]()
Greenplum 性能优化之路 --（二）存储格式
一、存储格式介绍 Greenplum（以下简称 GP）有2种存储格式，Heap 表和 AO 表（AORO 表，AOCO 表）。 Heap 表：这种存储格式是从 PostgreSQL 继承而来的，目前是 GP 默认的 ......![]()
Hive(十一)【压缩、存储】
目录 一.Hadoop的压缩配置 1.MR支持的压缩编码 2.压缩参数配置 3.开启Mapper输出阶段压缩 4.开启Reduceer输出阶段 二.文件存储 1.列式存储和行式存储 2.TextFile ......![]()
Kudu的概念术语
不多说，直接上干货！ Columnar Data Store（列式数据存储） Kudu 是一个 columnar data store（列式数据存储）。列式数据存储在强类型列中。由于几个原因，通过适当的 ......![]()
table size script :
I think Jonathan Lewis has explained the algorithm before, but it's alsosomething that we have investigated here.The algorithm (ignoring some details) ......![]()
Thoughtworks Technology Radar 26 技术雷达26期
Thoughtworks Technology Radar 26 Adopt Four key metrics Google Cloud's DevOps Research and Assessment (DORA) Four Keys Deployment Frequency Lead Tim ......spark sql优化
1、内存优化 1.1、RDD RDD默认cache仅使用内存 可以看到使用默认cache时，四个分区只在内存中缓存了3个分区，4.4G的数据 使用kryo序列化+MEMORY_ONLY_SER 可以 ......![]()
↓ 按住下拉
V2AS = Way To Ask
V2AS 一个技术分享与创造的静土
手机扫一扫
移动阅读更方便
近15日热搜文章