标签：原理剖析

2018-02-09admin阅读(1641)评论(0)赞(0)

Memstore是HBase框架中非常重要的组成部分之一，是HBase能够实现高性能随机读写至关重要的一环。深入理解Memstore的工作原理 ...

2018-02-09admin阅读(1980)评论(0)赞(0)

众所周知，HBase默认适用于写多读少的应用，正是依赖于它相当出色的写入性能：一个100台RS的集群可以轻松地支撑每天10T的写 ...

2018-02-09admin阅读(1535)评论(0)赞(1)

顾名思义，broadcast 就是将数据从一个节点发送到其他各个节点上去。这样的场景很多，比如 driver 上有一张表，其他节点上运 ...

2018-02-09admin阅读(1818)评论(0)赞(3)

前三章从 job 的角度介绍了用户写的 program 如何一步步地被分解和执行。这一章主要从架构的角度来讨论 master，worker，dri ...

2018-02-09admin阅读(2392)评论(0)赞(3)

上一章里讨论了 job 的物理执行图，也讨论了流入 RDD 中的 records 是怎么被 compute() 后流到后续 RDD 的，同时也分析了 ta ...

2018-02-09admin阅读(2359)评论(0)赞(3)

在 Overview 里我们初步介绍了 DAG 型的物理执行图，里面包含 stages 和 tasks。这一章主要解决的问题是：

2018-02-09admin阅读(1412)评论(0)赞(2)

概览 拿到系统后，部署系统是第一件事，那么系统部署成功以后，各个节点都启动了哪些服务？ 部署图 从部署图中 ...

2018-02-09admin阅读(1530)评论(0)赞(1)

阅读本文前，请一定先阅读  Structured Streaming 之 Event Time 解析，其中解析了 Structured Streaming 的 Event Time 及 ...

2018-02-09admin阅读(1634)评论(0)赞(1)

阅读本文前，请一定先阅读 Structured Streaming 实现思路与实现概述 一文，其中概述了 Structured Streaming 的实现思路， ...

2018-02-09admin阅读(2291)评论(0)赞(0)

阅读本文前，请一定先阅读 Structured Streaming 实现思路与实现概述 一文，其中概述了 Structured Streaming 的实现思路（ ...