皮皮网

1.clickhouse新特性之---clickhouse-keeper
2.Android插件化、源码热补丁中绕不开的解析ProGuard的坑
3.zookeeper是什么？
4.git的merge与rebase的区别

clickhouse新特性之---clickhouse-keeper

       clickhouse-keeper是clickhouse社区在.8版本中引入的新特性，它旨在替代zookeeper，源码提供一个完全兼容zookeeper协议的解析分布式协调服务。此功能尚处于预生产阶段，源码官方仍在完善中，解析iot 管理源码因此推荐在准备将其用于生产环境前先稍加等待。源码

       clickhouse-keeper通过底层的解析raft协议（nuraft库）实现多节点之间状态的线性一致性，相较于zookeeper的源码ZAB协议，它在一致性保障上有所不同。解析在性能和可靠性方面，源码clickhouse-keeper提供了以下几点优势：

       1. **部署方式**：clickhouse-keeper提供了三种不同的解析部署方式，包括独立部署、源码每个shard一组keeper，解析以及所有shard共享一组keeper。源码这使得用户可以根据自身需求灵活选择部署策略。源码预览

       2. **数据迁移**：为了将zookeeper中的数据迁移到keeper中，官方提供了一个迁移工具clickhouse-keeper-converter，它能够将zk中的数据导出为keeper能接受的snapshot格式，简化了迁移过程。

       在源码走读方面，以keeper作为独立进程启动时，其核心代码流程涉及以下几个关键点：

       1. **入口**：从mainEntryClickHouseKeeper到Keeper::main再到KeeperTCPHandler::runImpl，这是整个流程的开始。

       2. **KeeperTCPHandler**：这是keeper中处理TCP请求的回调，它负责接收客户端请求并处理。

       3. **KeeperDispatcher**：在KeeperTCPHandler中，依赖KeeperDispatcher来处理客户端请求，并保持keeper集群内状态的一致性。

       4. **初始化**：KeeperDispatcher启动时，会在后台生成三个线程，赛马源码负责集群的主流程。

       5. **KeeperServer**：基于nuraft实现，构建了一个完整的raft实例，它包括KeeperStateMachine、KeeperStateManager、KeeperLogStore等组件，共同构成了keeper的核心功能。

       6. **Log Store/State Machine/State Manager**：在nuraft库中，这三者都需要用户自定义实现。在clickhouse-keeper中，实现了这些关键功能，确保了数据的可靠存储和一致性管理。

       7. **KeeperStorage**：在内存中存储所有数据，实现类似zk的状态机功能，包含各种逻辑操作、源码批发会话管理等。

       8. **KeeperSnapshotManager**：管理所有快照文件，支持快照的序列化与反序列化，确保了数据的持久性和恢复能力。

       9. **KeeperStateMachine**：实现了与Zookeeper相同的内部状态，以及对多个snapshot的管理，支持快照的序列化和反序列化，保证了集群的状态一致性。

       . **参考**：了解clickhouse-keeper和相关技术的更多信息，可以参考以下资源：

       altiny ppt: slideshare.net/Altinity...

       clickhouse-keeper文档: clickhouse.com/docs/zh/...

       nuraft文档: github.com/eBay/NuRaft/...

       本文使用 文章同步助手 同步完成。

Android插件化、热补丁中绕不开的ProGuard的坑

       Android插件化和热补丁过程中，ProGuard的使用中存在一个重要的问题，即其applymapping功能可能导致部分方法混淆产生错乱，引发兼容性问题。沙沙源码ProGuard，作为一款优化混淆工具，其Shrinker、Optimizer和Obfuscator模块旨在使程序更小、运行更快。然而，当在插件化或热补丁修复中依赖ProGuard的applymapping进行增量混淆时，可能会遇到方法名称映射混乱，导致宿主与更新模块的不兼容。

       问题的根源在于，applymapping在混淆过程中，如果没有正确处理内联和映射冲突，可能会导致原有映射关系的错误更新。例如，一个名为stop的方法在宿主中是公用的，但在子模块升级后依然依赖这个接口，然而在增量混淆后，stop可能被错误地映射为c_，这会导致子模块升级失败，因为其依赖的接口不再匹配。

       进一步分析，ProGuard的mapping.txt文件在混淆和内联优化中扮演关键角色。当使用-applymapping时，MappingKeeper会复用之前的映射关系，但如果没有正确区分普通映射和内联，就可能导致混淆错误。解决这个问题需要深入理解ProGuard的源码，包括如何表示和混淆代码，以及内联优化的处理机制。

       解决这个问题的关键在于，理解ProGuard的类、方法和字段的混淆过程，以及内联优化如何影响映射。代码混淆分为收集映射和名称混淆两部分，而内联优化可能导致混淆后的名称冲突。开发者需要确保在增量混淆时，旧的映射关系不会被覆盖，同时正确处理内联带来的代码结构变化。

       总之，本文揭示了ProGuard在插件化和热补丁中的具体问题，提供了关于ProGuard混淆逻辑、内联优化及其对映射影响的深入解析，帮助开发者理解和处理这类常见的ProGuard问题。

zookeeper是什么？

       zookeeper是动物管理员的意思。

       ZooKeeper是一个分布式的，开放源码租前慎的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

       ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。

       ZooKeeper包含一个简单的原语集，提供Java和C的接口。

       ZooKeeper代码版本中，提供了分布式独享锁、选举、队列的接口，代码在$zookeeper_home\src\recipes。其中分布锁和队列有Java和C两个版本，选举只有Java版本。

       它的原理：

       ZooKeeper是以Fast Paxos算悔判法为基础的，Paxos 算法存在活锁的问题，即当有多个proposer交错提交时，有弊敬可能互相排斥导致没有一个proposer能提交成功，而Fast Paxos做了一些优化，通过选举产生一个leader (领导者)，只有leader才能提交proposer，具体算法可见Fast Paxos。因此，要想弄懂ZooKeeper首先得对Fast Paxos有所了解。

       ZooKeeper的基本运转流程:1、选举Leader。2、同步数据。3、选举Leader过程中算法有很多，但要达到的选举标准是一致的。4、Leader要具有最高的执行ID，类似root权限。5、集群中大多数的机器得到响应并接受选出的Leader。

git的merge与rebase的区别

       git的merge与rebase的区别：

       1、merge命令不会保留merge的分支。merge时并没有产生一个commit。rebase需要基于一个分支来设置你当前的分支的基线。

       2、gitmerge将两个分支，合并提交为一个新提交，并且新提交有2个parent。gitrebase会取消分支中的每个提交，并把他们临时存放，然后把当前分支更新到最新的origin分支，最后再把所有提交应用到分支上。

       Git是一款免费、开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。Git的读音为/g?t/。Git是一个开源的分布式版本控制系统，用以有效、高速的处理从很小到非常大的项目版本管理。Git是LinusTorvalds为了帮助管理Linux内核开发而开发的一个开放源码的版本控制软件。Torvalds开始着手开发Git是为了作为一种过渡方案来替代BitKeeper，后者之前一直是Linux内核开发人员在全球使用的主要源代码工具。开放源码社区中的有些人觉得BitKeeper的许可证并不适合开放源码社区的工作，因此Torvalds决定着手研究许可证更为灵活的版本控制系统。尽管最初Git的开发是为了辅助Linux内核开发的过程，但是我们已经发现在很多其他自由软件项目中也使用了Git。例如最近就迁移到Git上来了，很多Freedesktop的项目也迁移到了Git上。