云原生生态周报（Cloud Native Weekly）第2期
本周报由阿里巴巴容器平台联合蚂蚁金服共同发布 本周作者：傅伟，敖小剑，张磊，临石，南异，心贵，王夕宁，长虑 责任编辑：木环 业界要闻 Kubernetes External Secr ......![]()
(null) entry in command string: null chmod 0644
在WIndows操作系统中本地运行spark程序,报以下错误： ....(null) entry in command string: null chmod 0644 ..(后面是目的目录) 解决方法: 下载hadoop.dll文件 ......《Hadoop大数据技术开发实战》新书上线
当今互联网已进入大数据时代，大数据技术已广泛应用于金融、医疗、教育、电信、政府等领域。各行各业每天都在产生大量的数据，数据计量单位已从B、KB、MB、GB、TB发展到PB、E ......![]()
Spark入门系列视频教程
视频目录： Spark入门| 01 Spark概念架构 Spark入门| 02 Spark集群搭建 Spark入门| 03 Spark Shell算子操作 Spark入门| 04 Spark单词计数Shell操作 Spark入门| 05 ......![]()
3 大数据实战系列-spark shell分析日志
文件格式： 访问时间\t用户ID\t[查询词]\t该URL在返回结果中的排名\t用户点击的顺序号\t用户点击URL 数据文件越大越好，至少100万行 ./spark-shell --master spar ......2 大数据实战系列-spark shell wordcount
cd /home/data/app/hadoop/spark-2.1.1-bin-hadoop2.7/bin ./spark-shell --master spark://shulaibao2:7077 --executor-memory 512m --driver-memory 4540m 初 ......![]()
CDC一键入湖：当 Apache Hudi DeltaStreamer 遇见 Serverless Spark
Apache Hudi的DeltaStreamer是一种以近实时方式摄取数据并写入Hudi表的工具类，它简化了流式数据入湖并存储为Hudi表的操作，自 0.10.0 版开始，Hudi又在DeltaStream ......![]()
图解Spark Graphx基于connectedComponents函数实现连通图底层原理
原创/朱季谦 第一次写这么长的graphx源码解读，还是比较晦涩，有较多不足之处，争取改进。 一、连通图说明 连通图是指图中的任意两个顶点之间都存在路径相连而组成的 ......![]()
图解Spark Graphx实现顶点关联邻接顶点的函数原理
在一张社区网络里，可能需要查询出各个顶点邻接关联的顶点集合，类似查询某个人关系比较近的都有哪些人的场景。 在用Spark graphx中，通过函数collectNeighbors便可 ......![]()
↓ 按住下拉
V2AS = Way To Ask
V2AS 一个技术分享与创造的静土
手机扫一扫
移动阅读更方便
近15日热搜文章