免费下载案例集|20+数字化领先企业人才培养实践经验 了解详情
写点什么

Go 语言分布式系统配置管理实践 --go archaius

  • 2020-03-27
  • 本文字数:1914 字

    阅读完需:约 6 分钟

Go语言分布式系统配置管理实践--go archaius

当单体应用向微服务转型后,有大量的配置需要管理,而你并不希望登录到远端机器去更改配置,并重启应用,尤其是现在已经是容器的时代了,也不希望因为一个配置的变更,而发布一个新的软件包。那么分布式系统中每个进程的动态配置管理及运行时热加载就成为了一个亟待解决的问题。为 go chassis 而生,他汲取了 netflix 的 archaius 框架经验,并做出来自己的创新特性。

架构


  • Source:配置源是一种标准接口,可以通过实现一个 source 来接入不同配置源,它定义配置来自哪个资源,配置可以来自配置中心 configcenter,来自本地文件,来自环境变量或是启动命令行。source 负责将配置项缓存到本地内存。用户可以选择加载任意的 source 实现。

  • Config center source: 配置中心源不同于其他 source,它包含一个 client 抽象,可以对接不同的生态系统,目前对接了携程开源的配置中心 Apollo。

  • Config manager:负责整合管理所有 source 的配置,每个 source 可以定义优先级,当通过 manager 获取配置时,如果 2 个不同的 source 有相同的配置,那么就会取最大优先级的配置。

  • Event Dispatcher:用户可以通过 Archaius API 进行配置变化监听,当 source 内部的配置项新增,更新,删除配置时,都会通知到监听器。

  • Source 优先级:优先级由大到小依次为 Config center,CLI,ENV,file,当有相同配置项的时候仅优先级大的配置生效。在一个分布式系统中,远程的配置中心理应拥有最大优先级,而在本地运行一个独立的进程时,通常的思维是,命令行参数优先级高于环境变量,高于本地文件内容。拥有了这样一套机制后,用户就无需再写代码处理配置项生效逻辑。

  • Config Factory: 封装了 event 和 config manager 的 API

  • Archaius API: 封装底层实现,提供友好的 API 供开发者使用

获取配置

获取配置有 2 种不同的手段:


1.调用 archaius API 的 Get 方法


2.注册监听器


事件的触发是由 soruce 的开发者来决定的,每个 source 的行为会有不同:


命令行与环境变量是不会产生任何事件的,当 archaius 运行后配置项就已经定下来了,只能使用 Get 方法获取。而文件 source 会在启动后拉取一遍本地文件内容并转换为配置项(可自定义转换算法,决定配置项形态),之后持续监听本地文件变化,当有变化发生时会刷新本地配置并通知到监听器。所以 2 种方法都支持。config center source 行为与文件又不同,在启动后,它就会周期拉取配置中心的配置,并且对比每一次配置项的不同,并触发不同类型事件。

配置项形态

假设程序有一个配置文件叫 a.yaml,内容如下


registry:   enabled: true   interval: 30s
复制代码


要考虑该如何去对待这 raw data,目前有 2 种方式


第一种,将配置项拆分为 java properties 风格的配置:


registry.refresh: trueregistry.interval: 30s
复制代码


go archaius 开放了 file handler 接口,允许你决定如何将文件内容处理为配置项



那么在远程的配置中心中,key value 的管理方式就要遵循 file handler 的行为,当你想变更 registry.refresh 时,就要在配置中心种更改这个配置项及值。


类似于开关类的配置项,这种 java properties 的管理方式还是不错的,当一个配置项改变时触发一次事件。


但是有一类配置项并不适合如此管理。


这就是第二种方式,比如 go chassis 中的路由管理配置文件:



通常都需要大范围的更改配置项,那么如果还使用切分的方式在配置中心中管理将会引起 go archaius 运行时大量的事件触发,并且,用户在使用体验上大打折扣,到处去找分散的配置项,逐一更改。正确的行为是,将文件名作为配置中心中的 key,文件内容作为 value。用户需要更改时,去找对应的文件名即可,修改后一次性下发,只会触发一次事件,完成路由的变更。


开发者应根据实际场景判断如何处理配置项形态。也可以自己实现 handler 来决定配置项形态

配置运行时热加载

在运行时可以随时通过统一的配置中心或者本地文件(不推荐分布式环境登到机器里改文件,但在本地 debug 时还是推荐使用文件来测试程序的热加载逻辑)更改配置了,那么接下来要解决的问题就是配置在运行时生效。


这里的技巧是使用 go 语言中的读写锁。我以 go chassis 中路由配置来说明:



go chassis 运行时总是会有不断地大并发数据访问 router config 这块缓存,使用一个读写锁 lock 中的读锁,每次访问缓存都用读锁,使用后,解开读锁。


向 archaius 注册监听器,需要自己编写监听器的逻辑,每当事件出发后就会通过 archaius 中的数据构建一个结构体数据,然后将数据存到本地缓存,首先使用 lock 的写锁锁住 router config,更新后,解开写锁。


在这样的机制下,就可以做到运行时热加载配置项而无需重启服务。


本文转载自华为云产品与解决方案公众号。


原文链接:https://mp.weixin.qq.com/s/bajWt2K0L9nq40Wo3lN06g


2020-03-27 22:05913

评论

发布
暂无评论
发现更多内容

字节跳动:必面题说一下Android消息机制,重要概念一网打尽

android 程序员 移动开发

实践App内存优化:如何有序地做内存分析与优化,flutter免费视频教程

android 程序员 移动开发

小企业呆了3年多,人都呆废了!准备跳槽字节跳动,2021年不想被公司优化

android 程序员 移动开发

建造者模式,android原生开发技术

android 程序员 移动开发

安卓11来了,快!扶我起来,音视频开发书籍

android 程序员 移动开发

工作两年裸辞备战一个多月收割offer,一二线互联网公司Android面试题汇总

android 程序员 移动开发

带你高效入门 Flutter,安卓开发入门书籍推荐

android 程序员 移动开发

年后想跳槽涨薪?你想要的面试题全在这里,kotlinmap初始化

android 程序员 移动开发

安卓指纹对称加密及登录功能的实现,android面试简历

android 程序员 移动开发

开发者须知:女性玩家和手机游戏注意事项(1),flutter面试题2021

android 程序员 移动开发

当 Android 的 Compat 库不能拯救你的时候,覆盖所有面试知识点

android 程序员 移动开发

当中国诗词大会邂逅了Flutter,从此我的眼里只有你!(1)

android 程序员 移动开发

开发部署提速8倍!这款IDE插件了解一下?,211本硕如何通过字节跳动、百度、美团Android面试

android 程序员 移动开发

学习Flutter,你需要了解的Dart 编码规范,sharedpreferences用法

android 程序员 移动开发

巧用Android网络通信技术,在网络上直接传输对象 (1),Android工程师面试题

android 程序员 移动开发

年底被裁,程序员 2020 年的出路在哪里?,Android开发实用必备的几款插件

android 程序员 移动开发

开发者须知:女性玩家和手机游戏注意事项,安卓开发中遇到最难的问题

android 程序员 移动开发

当中国诗词大会邂逅了Flutter,从此我的眼里只有你!,附架构师必备技术详解

android 程序员 移动开发

当事人:现在就是非常后悔,开工那天没去上班,Flutter中网络图片加载和缓存源码分析

android 程序员 移动开发

安卓屏幕完美适配方案,组件化与插件化的差别在哪里

android 程序员 移动开发

官方推荐Flow,LiveData:那我走,绝对干货

android 程序员 移动开发

客2消,客1消,客0消,android热修复视频

android 程序员 移动开发

开发八年的程序员,在字节跳动5年,30岁的我被刚升职后辈一句话惊醒

android 程序员 移动开发

带着问题重学Android事件分发,移动端内嵌h5页面

android 程序员 移动开发

安卓-如何用正确的姿势监听Android屏幕旋转,flutter修改textfield内容

android 程序员 移动开发

工作都是公司的,技术才是自己的,【2021Android最新学习路线

android 程序员 移动开发

干了5年Android开发,突然感觉自己啥也不会,啥也不想干

android 程序员 移动开发

开源爆款,阿里P7Android技术笔记,图文并茂,Android经典面试题详解

android 程序员 移动开发

实战|Android后台启动Activity实践之路续,2021年Android者未来的出路在哪里

android 程序员 移动开发

带了一个实习生程序员,这波操作搞得我人都傻了,android开发者网站

android 程序员 移动开发

开发8年程序员:你是不是疯了,为什么字节跳动的Offer都不要了

android 程序员 移动开发

Go语言分布式系统配置管理实践--go archaius_语言 & 开发_华为云产品与解决方案_InfoQ精选文章