Paul Jiang's Blog

  • 首页

  • 关于

  • 标签

  • 分类

  • 归档

  • 搜索

分布式任务-Elastic-Job

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

Elastic-Job-Lite

Elastic-Job-Lite定位为轻量级无中心化解决方案,使用jar包的形式提供最轻量级的分布式任务的协调服务,外部依赖仅Zookeeper。

主节点选举

节点 节点类型 节点作用
/${namespace}/${jobName}/leader/election/latch 持久 用于选举的锁
/${namespace}/${jobName}/leader/election/instance 临时 保存主节点地址
/${namespace}/${jobName}/leader/sharding/necessary 持久 判断是否需要重新分片
/${namespace}/${jobName}/leader/sharding/processing 临时 标记主节点正在sharding 的标志
/${namespace}/${jobName}/sharing/${shardingItem}/instance 永久 保存拿到shardingItem分片的作业实例

分布式系统设计-脑裂

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式全局唯一ID-Flicker

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式全局唯一ID-Redis

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式全局唯一ID-SnowFlake

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

SnowFlake算法生成id的结果是一个64bit大小的整数。

分布式数据库-Join

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式系统-一致性哈希

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式系统-令牌环

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式系统-令牌环

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式系统

发表于 2018-12-10 | 更新于 2020-05-17 | 分类于 分布式

分布式系统是若干独立计算机的集合,这些计算机对于用于来说就像是单个相关系统。

4个关键目标:使资源可访问;透明性;开放性;可扩展性。

分布式系统的分类

1.分布式计算系统:

集群计算:同构性

网格计算:异构性。Foster提出了一种体系结构。该体系结构由4层组成(光纤层,连接层,资源层,汇集层,应用层)。通常,汇集层、连接层和资源层形成了成为网格中间件层的核心。这些层提供了对资源的访问和管理,而这些资源是分散在多个地点的。SOA(面向服务的体系结构)和OGSA(开放式网格服务体系结构)体现了这种思想。

2.分布式信息系统:

事务处理系统

企业应用集成

3.分布式普适系统

之前的分布式系统最大的特点就是他们的稳定性:结点是固定的,具有或多或少的持续性和高质量的网络连接。随着移动和嵌入式计算设备的引入,不稳定性是分布式系统的默认行为。主要有三种需求:接受上下文的变化,促使自主合成,认可共享为默认行为。

体系结构

分布式系统的组织结构主要是指组成该系统的软件组件。软件体系结构的最终实例又称为系统体系结构

1.体系结构样式

分层体系结构
基于对象的体系结构
以数据为中心的体系结构

基于事件的体系结构

2.系统体系结构

集中式体系结构

非集中式体系结构

1.结构化的点对点体系结构:通过分布式哈希表来构造覆盖网络。

2.非结构化的点对点体系结构:依靠随机化的算法来构造覆盖网络。每个结点维护一个邻结点列表,但这个列表是以一种或多或少为随机的方法来构造。

混合式体系结构

1…345…22

Paul Jiang

212 日志
26 分类
26 标签
Links
  • 褚霸
  • 章亦春
  • Martin Fowler
© 2020 Paul Jiang
由 Hexo 强力驱动 v3.9.0
|
主题 – NexT.Gemini v6.5.0