站长语：各位徒弟，站长一直认为，仅仅学习Java绝对成不了高手。人只有知识面宽广才能左右逢源，才能提升大脑的悟性，所以我希望大家深耕Java，但是不要困死在Java。以站长的切身经历来说，当站长学完Qt之后，对事件机制有了非常深刻的认识，极大了提升了自身的编码内功，在Java开发中能将事件处理思想运用自如。作为Qt的爱好者，站长看到新版本的发布，内心感...

随着运行时间的增增长，日志信息也会变得越来越多，占有更多的空间。因此Raft采取了日志压缩的方法解决该问题，即将当前整个系统状态写入稳定存储的快照，然后该时间点之前的日志就可以丢弃掉，从而释放存储空间。1 快照结构从图中可见，快照包括以下几个部分内容:lastIncludedIndex：表明快照中最后一条日志的索引值。也就是说日志一直压缩到该索引值的位...

在分布式系统中，有时候需要对集群中的成员数量进行更新的操作，比较简单的做法将更新操作分为两个阶段进行：第一个阶段：将全部的使用旧的配置文件的集群C_old成员全部关闭，所以将不能对客户端的请求进行处理；第二个阶段：使用新的配置文件启动集群成员。上述过程有一个很明显的劣势在于更新成员数量的时候有一段时间是无法对客户端请求进行处理的。Raft使用了一种新的...

今天我计划把Raft算法再系统的学习一遍，像这类一致性算法，例如Paxos，还有Raft算法，Bully算法，个人建议平时要多复习，多思考，随着年龄和阅历的增加，看完的收获是不一样的。元旦是个有特殊意义的日子，所以特意学习Raft算法当做留念。你们的元旦做了一件什么有意义的事情呢？

发布《趣谈shell》之后，大家的反映都很好，绝大多数的人反馈效果很好，只要少数人不顺心，非我之过，任何东西不用心，肯定是不行的。《趣谈shell》极大的降低了学习shell的难度，但是不代表边打瞌睡边读它就能学好shell。肯定得稍微用一点点心思的。继《趣谈shell》之后，2021年，我准备写另外一本书《趣谈一致性》，发布时间为3月底，当然，仅限于...

备注：本文修订于2021年6月9日1、日志不一致的三种情况网络不可能一直处于正常情况，因为Leader或者某个Follower有可能会崩溃，从而导致日志不能一直保持一致，因此存在以下三种情况：（1）Follower缺失当前Leader上存在的日志条目。（2）Follower存在当前Leader不存在的日志条目。比如，旧的Leader仅仅将AppendE...

1、精确值 VS 全文Elasticsearch 中的数据可以概括的分为两类：精确值和全文。精确值如它们听起来那样精确，例如日期或者用户ID，对于精确值来讲，Foo 和 foo 是不同的，2020 和 2020-12-25 也是不同的。全文是指文本数据，通常以人类容易识别的语言书写，例如一篇文章的内容或一封邮件的内容。精确值很容易查询，其结果要么匹配，...

备注：Raft将分布式一致性分解为多个子问题：Leader选举（Leader election）、日志复制（Log replication）、安全性（Safety）、日志压缩（Log compaction）等。欢迎大家持续关注本系列内容！备注：本系列内容专供网站核心社群成员学习使用。1、日志复制的过程Leader选出后，就开始接收客户端的请求。Lead...

备注：Raft将分布式一致性分解为多个子问题：Leader选举（Leader election）、日志复制（Log replication）、安全性（Safety）、日志压缩（Log compaction）等。欢迎大家持续关注本系列内容！备注：本系列内容专供网站核心社群成员学习使用。分区容错如何保证？在分布式系统设计中，需要遵循CAP理论，如果我们要让...

1、什么是脑裂？让我们看一个有两个节点的elasticsearch集群的简单情况。节点1在启动时被选举为主节点并保存主分片（在下面的schema里标记为0P），而节点2保存副本分片（0R）。现在，如果在两个节点之间的通讯中断了，会发生什么？由于网络问题或只是因为其中一个节点无响应（例如stop-the-world垃圾回收），这是有可能发生的。两个节点都...

备注：Raft将分布式一致性分解为多个子问题：Leader选举（Leader election）、日志复制（Log replication）、安全性（Safety）、日志压缩（Log compaction）等。欢迎大家持续关注本系列内容！备注：本系列内容专供网站核心社群成员学习使用。1、服务器的三种角色Raft算法中服务器主要分为三种角色：Leader...

1、索引模板简介在创建索引时，为每个索引写定义信息可能是一件繁琐的事情，ES提供了索引模板功能，用户可以定义一个索引模板，在模板中定义好settings、mapping以及一个模式来匹配创建的索引。需要注意的是：模板只在索引创建时被参考，修改模板不会影响已创建的索引。索引模板，英文名为Index Template。它是一种机制，这种机制允许我们定义一种...

1、查看索引curl 'localhost:9200/_cat/indices?v'2、新建和删除索引curl -X PUT 'localhost:9200/myindex?pretty'创建一个名为 myindex 的索引。pretty要求返回一个漂亮的json 结果curl -X DELETE 'localhost:9200/myindex?pre...

备注1：本内参系列，是学习TinyMQ项目之前的必读内容!备注2：这是一份草稿，毛刺难以避免，请小心阅读。我希望通过这个故事来阐述一下共识算法-Paxos算法。康熙六十年，黄河泛滥，河南百万灾民流离失所，饿殍遍野。可是国库空虚，康熙心急如焚。当时，以两广和直隶最为富饶，康熙皇帝决定二选其一，推行一帮一的赈灾策略。最终，康熙皇帝选择用两广的财力来援助河南...

1、主备模式介绍主即主机，备即备机。顾名思义，主机当然是以它为主了，读写都是主机上，而备机只用作备用，默默的在背后同步主机的数据，时刻待命着等待主机挂了之后取而代之。因此在主机还活着的情况下，备机的唯一使命就是同步主机的数据，不对外提供服务。优点：简单，主备之间只有数据同步，不需要考虑别的情况。很简单的配置一下，再搞一台服务器就能组成主备架构了。缺点：...

备注：本内参系列，是学习TinyMQ项目之前的必读内容!为了实现集群的高可用性，用户的数据往往要多重备份，多个副本虽然避免了单点故障，但同时也引入了新的挑战。假设有一组服务器保存了用户的余额，初始是100块，现在用户提交了两个订单，一个订单是消费10元，一个订单是充值50元。由于网络错误和延迟等原因，导致一部分服务器只收到了第一个订单（余额更新为90元...

备注：本内参系列，是学习TinyMQ项目之前的必读内容!在Java中，synchronized修饰的是代码块，代码块里面的变量都实现了内存可见性。内存可见性的底层是CPU的指令实现的。volatile修饰的是变量，它的作用也是实现内存可见性，底层用的同一个CPU指令。可以这样理解：synchronized里面的变量都是volatile修饰的。我们都用过...

备注：本内参系列，是学习TinyMQ项目之前的必读内容!数据在哪里存在呢？只在内存吗？不是的。数据在内存中存在，但是当用的时候会加载到CPU的寄存器里面。内存和寄存器是两个地方，从而出现了新的名词：内存可见性和寄存器可见性。为什么叫内存可见性呢？感觉很奇怪的名字。其实，明白以下道理就不奇怪了。数据的流动过程是：内存->寄存器->计算器很多时...

备注：本内参系列，是学习TinyMQ项目之前的必读内容!一致性问题立足于数据副本，有数据副本的地方必定会有一致性问题。对于数据副本，人们往往印象不深，但是对于缓存，我想人人皆知。缓存就是数据副本。我们知道，数据存在于内存中，然后被加载到寄存器中，此时出现了两个数据副本，如何保证两者的一致性呢？这就是一致性问题的起源。一致性问题并不是分布式领域才有的问题...

数据副本数据副本是个很常见的概念和术语，我们经常遇到，但是也最容易让人产生迷惑。副有以下几种含义：（1）辅助的，区别于正和主，例如：副职，副手，副官。（2）附带的，次要的，例如：副业，副品，副食，副刊。（3）相配、相称之意，例如：名实相副，其实难副。（4）量词，表示一组或一套，例如：一副手套，全副武装；也可指态度，例如，一副笑脸。在分布式系统和大数据领...