freeBuf
主站

分类

漏洞 工具 极客 Web安全 系统安全 网络安全 无线安全 设备/客户端安全 数据安全 安全管理 企业安全 工控安全

特色

头条 人物志 活动 视频 观点 招聘 报告 资讯 区块链安全 标准与合规 容器安全 公开课

点我创作

试试在FreeBuf发布您的第一篇文章 让安全圈留下您的足迹
我知道了

官方公众号企业安全新浪微博

FreeBuf.COM网络安全行业门户,每日发布专业的安全资讯、技术剖析。

FreeBuf+小程序

FreeBuf+小程序

【技术】MediumKube- 快速部署容器云的开发环境
星环科技官方 2021-06-28 11:32:34 103445

前言

笔者在2020年年初加入了星环的云开发部,在此之前接触过最复杂的容器平台就是docker swarm,并且也是一知半解,所以在工作的初期,对K8s的熟悉是一个必不可少的工作。然而K8s是一个具有一定复杂性的容器平台,所以开发/学习环境的搭建也会比较复杂。在尝试搭建完整版集群失败后又尝试minikube,但是又发现minikube的诸多缺点,如功能的局限,可配置性的低下。于是,在工作大半年,掌握一定基本知识后,着手开发本文所要介绍的MediumKube。初衷可能是为了帮助刚加入星环的小伙伴们熟悉K8s,不过感觉需求不高,就不了了之了。对于我自己来说,这倒是成为了快速搭建开发环境的一个实用工具。

这些年容器云的技术已经渗入到我们日常开发的方方面面,不管是做一些企业应用的开发,还是个人网站的搭建。应用程序是否能在容器平台上运行,并且利用容器平台的特性去进行性能调优/成本管理确实是很难忽略的一个部分。而如今,有很多的应用完全基于云平台去开发,它们充分运用了云平台的能力,来做到诸如微服务化,服务网格化,弹性化等特点。然而一个完全基于云平台开发的应用也自然而然需要一个复杂的云开发环境,不论是对应用本身的部署,还是对云平台API的利用,甚至是对云平台本身能力的扩展,都是有很大帮助的。

作为开发环境,我们关注的点可能不同于生产环境。我在这里列举一些我个人对开发环境的期望。

- 是否可以快速部署,删除
- 功能性是否完整
- 对于高级用户是否提供丰富的配置项
- 开发者对环境底层组件的可见性
- 作为中国的开发者,是否能轻松地使用开源的软件生态

现在市面上也有很多的免费软件可以作为容器云的开发环境,比如傻瓜式的k8s发行版minikube,可应用于边缘计算和资源受限环境的k3s,或者对于非k8s的使用者来说,docker swarm也是易于部署的容器云环境之一。

本文介绍的MediumKube不同于以上这些产品化程度比较高的软件,它基于libvirt和cloud-init提供了一个高度可定制化的方案。相比于纯粹的kubernetes轻量化发行版,它更像是一个虚拟机管理工具,而它提供的一些能力使得它成为部署kubernetes开发环境的一个实用的软件。

----------

使用Cloud-Init快速初始化虚拟机实例

Cloud-init是IaaS云服务通用的一个标准,它的推行者就是大名鼎鼎的Canonical,也就是开发Ubuntu的那家公司。Cloud-init是Infrastructure as Code的一个例子。通过声明式地编写配置文件,我们就可以实现对云实例的初始化。它是如此通用的一个标准,以至于我们可以将它集成到数百行代码的微型项目中,来实现一个最简化的IaaS服务。MediumKube使用了这个工具,使得它本身就是一个可定制化极高的虚拟机管理工具。当然,由于它的定位是快速部署Kubernetes,所以它也内置了一个默认Cloud-Init模板,和它的源代码本身一起发行。

上图就是MediumKube内置模板的一部分。这个模板做了包括对用户,软件源,系统配置脚本,docker/kubernetes的安装的相关工作,使得实例一旦部署完,就带有相应的软件环境,无需再做额外的配置。

配置和模板引擎

MediumKube支持模板引擎。通过编写全局的配置项,并且将它们使用在Cloud-Init模板中,用户可以部署出高度自定义的虚拟机集群。

图列出了MediumKube所支持的一些配置项。有些会影响虚拟机的属性,而另一些,可以渲染到模板中。比如非常有用的HTTPProxy,对于中国用户来说时非常实用的,因为模板引擎的支持,用户不再需要在多个零散的地方一遍遍地设置代理的配置,而是通过统一的配置文件去全局地设置。虽然配置项繁多,但是MediumKube对每一个都有推荐的默认值,这也在灵活性和易用性之间取得了一个平衡点。相信大家都有使用minikube时不知道去哪里配置虚拟机的高级参数的困扰,所以兼顾入门用户和高级用户也是MediumKube的一个优点。

使用mediumkubed维持稳定的网络环境

一个稳定的网络环境对于开发环境来说也比较重要。MediumKube开发的前期就出现过由于网络环境的变动,某些配置变得不再可用,比如监听在宿主机上的代理。由于DHCP或者切换wifi,宿主机的IP经常变动,为了解决这个问题,mediumkube会为用户维护一个虚拟网络,并且这个虚拟网络时非常易于配置的。用户只需要声明简单的接口信息,mediumkube会自动进行配置iptables,dnsmasq等像信息。

下图为mediumkubed开发初期的拓扑结构,类似于Docker的Bridge网络,非常简洁,但同时也很实用。随着开发,会有越来越多的功能被添加。

Mediumkubed会被注册为systemd中的一个模块,所以管理器来非常简单。

简单易用的命令行工具

在UI方面,mediumkube提供了简单易用的命令行界面。比如用户可以展示已部署的虚拟机,并管理它们的生命周期,如停止/启动/删除/部署

同时,mediumkube也有快速的组建集群,加入集群,重置节点等命令,使得集群的管理变得简单。比如,如果用户需要部署一个两节点的集群,只需要如下简单的命令

$ mediumkube deploy node1 node2
$ mediumkube init node1
$ mediumkube join node2 node1

当然,如果用户不满足于这些简单的命令,他们也可以通过shell命令来登入到虚拟机中进行操作。

如上图所示,用户无需记忆任何IP地址,而且如果配置得当,也无需手动管理任何密钥,直接可以对节点进行管理。

MediumKube的未来

MediumKube是个很年轻也很小众的项目。它解决了一部分人的痛点的同时,也有相当大的局限性。比如在单机环境下的集群部署会使得系统资源捉襟见肘,以及项目比较低的产品化程度,都会使的它只是在“理论上”比较实用。作为MediumKube的开发者,自然也希望MediumKube越来越好用,下面谈谈我对它的规划。

集群化

上面也提到了,MediumKube在单机的环境下带来了不小的局限性,所以集群化一定是一个未来的规划。当然,引入复杂的元素,势必会对系统的简洁性带来打击,比如MediumKube会变得难以部署,甚至还不亚于部署一个K8S集群,或者分布式元素的加入可能会带来更多的bug。很多问题说大也不大,不过确实是需要花时间去思考的。集群化的mediumkube采用何种架构?虚拟机的部署如何进行调度?Overlay网络用哪种技术做(上面的截图好像暴露了我准备用flannel这个事实)?如何进行简单却灵活的分布式部署?如果简单地进行节点的规划?是否需要图形化的支持?要考虑的东西确实比较繁杂。

稳定性和代码质量

作为开发环境,稳定性的要求可能没那么强,不过在mediumkubed在早期确实也出现过占用巨量内存的情况。而且作为一个玩具项目和golang学习用例,mediumkube在代码质量上也比较堪忧。比如文件传输模块的代码就非常糟糕,以至于上行和下行的速度有明显的差距。希望在未来可以有所改善。

说在最后

最后希望技术可以真真正正地提升我们生活的便利性,并感谢CNCF,Canonical,libvirt,Google等组织和所有开源社区的开发者们给我们带来这些好玩,易用,免费的优质软件,也期待未来可以看到更多有意思的技术。

作者:闻云路

# 云计算 # 容器云 # 开发环境
免责声明
1.一般免责声明:本文所提供的技术信息仅供参考,不构成任何专业建议。读者应根据自身情况谨慎使用且应遵守《中华人民共和国网络安全法》,作者及发布平台不对因使用本文信息而导致的任何直接或间接责任或损失负责。
2. 适用性声明:文中技术内容可能不适用于所有情况或系统,在实际应用前请充分测试和评估。若因使用不当造成的任何问题,相关方不承担责任。
3. 更新声明:技术发展迅速,文章内容可能存在滞后性。读者需自行判断信息的时效性,因依据过时内容产生的后果,作者及发布平台不承担责任。
本文为 星环科技官方 独立观点,未经授权禁止转载。
如需授权、对文章有疑问或需删除稿件,请联系 FreeBuf 客服小蜜蜂(微信:freebee1024)
被以下专辑收录,发现更多精彩内容
+ 收入我的专辑
+ 加入我的收藏
星环科技官方 LV.7
星环信息科技(上海)股份有限公司
  • 169 文章数
  • 3 关注者
从开源大模型工具Ollama存在安全隐患思考企业级大模型应用如何严守安全红线
2025-03-05
星环科技无涯·问知 AI PC版接入DeepSeek,一键部署 让你的AI永不掉线
2025-02-24
星环科技推出DeepSeek全场景解决方案:即开即用、企业级部署、端侧智能三位一体
2025-02-24
文章目录