一文看懂云原生架构的演变过程

来源: 云巴巴 2021-12-16 13:17:13

人类的需求始终是技术快速发展的内置动力,云原生的快速发展也在于此。从去中心化、微服务到Serverless,服务在变、架构在变,新技术应用所带来的问题也在不断变化。云原生生态体系中的任何一项技术、任何一家厂商、任何一个终端用户,都在解决、适应乃至拥抱这种变化。用技术解决技术所带来的问题,由此出现了云原生“可观测性”。但在云原生庞大的生态体系中,K8s也好、可观测性也好,都属于冰山一角,背后有更多复杂的技术作为支撑。当我们在“享受”云原生所带来的变化的同时,也理应追溯云原生技术的演进脉络,思考云原生的技术价值与发展未来。

图片

(K8S技术分水岭,图片来源于网络)

从楼上这张图说起吧~要想完全掌握如图K8S的技术拓扑,毫不客气的讲:实在太难了! 然而,K8S也只是云原生体系中的一环。

譬如诺豆公司「化名」使用K8S已经2年了,而最近遇到的 Node 节点 NotReady 的问题,还不能完全凭借自有运维团队的能力解决,最终还是依靠公有云技术支持才得以定位到问题,在解决问题的过程中有如下插曲:

  • 根据日志报错,完全搜索不到相关技术贴「怀疑公有云厂商修改了K8S的调度脚本」;

  • 大量非关键日志掩盖/var/log/message中K8S pleg核心报错,经验不足,忽略关键日志,错失关键切入点;

  • 某公有云厂商的首次诊断结果是:runc 通道阻塞,需更换自研OS方可解决;

  • 方案被严厉拒绝后,派遣高工介入,修改结论为:docker 19.3.5 版本  runc 有BUG,升级至 19.3.15 可解决。

  • 核因并未找到,怀疑 max_pid 和 ulimit不足、机器负载高、及container频繁exec health check导致 runc hang,但无实据,而服务器状态很健康。

继而引发的思考:

  • 问题一:如何在公有云上获得更自主可控的运维管理能力;

  • 问题二:版本升级成本高昂,如何平滑升级;

  • 问题三:「上述问题出现在测试环境」,生产环境出问题的SLA如何保障。

问题一和三很容易解决,多云或者混合云方案,加强对供应商管理与对接。问题二很难,纵观整个行业,少有公司掌握自我升级能力,基本都要依赖公有云方案或者第三方协助。核心原因依旧在于K8S和云原生的技术门槛太高。但云原生和K8S大火是客观存在的事实,今天我们来聊聊云原生时代下技术演进

一、架构演变

图片

(大型机到微服务架构演变,图片来源于网络)

自20世纪70年代开始,无论是软件架构还是服务托管,都在逐步从中心化向去中心化转变,从宏服务向微服务转换,从大型机到微型机转换。在中国去IOE指导方针下,该现象尤为突出。

1.1 中心化->去中心化

70年代,早期的IT基础设施不成熟,以大型机为主,中心化运算、存储、调度,客户端终端只具备最基础的输出和展示功能。

该思想一直沿用至今,软件工程上诸如:Satstack、Puppet、OpenStack等。去中心化的代表:Ansible、Git、P2p协议、区块链技术、共识机制。前两者具备去中心化思想,后两者属于完全去中心化。两者没有绝对的好与坏。现代工程软件多为两者结合。

1.2 IaaS->PaaS->SaaS->Serverless

互联网早期以机房托管为主,即IaaS。随着公有云发力与成熟,逐步向云托管转向,有如下优势:

  • 各职能各司其职,关注各自领域即可;

  • 资源按需付费,相对自建,中小规模下有较大成本优势;

  • 弹性架构设计;

  • 服务开箱即用等。

近年云原生概念逐步普及并落地,强调软件应用应该生于云上,长于云上 。云原生本质并非一门确切的技术或者定义, 而是整套完整的生态体系,或者理解为愿景。

云原生给予的标准化架构及解决方案、高度运维自动化、自愈及配套基础设施等运维能力,倒逼运维向更高层领域转向。据公有云财报,目前,IaaS仍在市场上占据最大份额,云原生协助厂商打造不可变基础设施,本质上讲云原生是系统化能力,因此,未来PaaS、SaaS一定会后来居上。

1.3  All in One->微服务 

PMP提出的软件开发模式主要有

  • Build-and-Fix Model模型

  • 瀑布模型

  • 迭代模型

  • 增量模型

  • 喷泉模型

  • 演化模型

  • 敏捷开发模型

  • 混合模型

无论哪种模式均不是万能解药,最终目标都是准确快速交付。交付结果通常依赖:

  • 软件开发模型

  • 项目周期长短

  • 技术人员水平

但以上都无法解决“1个孕妇10个月生一胎,10个孕妇1个月生一胎”的问题。微服务解决了如上问题,且提供各接口遵循gRPC或Restful接口。但在服务切割、解耦、依赖关联上无法细化,经验主义。

  • 过粗的拆分效果不佳;

  • 过细的拆分,导致微服务爆增,资源浪费严重,接口和服务维护成本高昂;

  • 需求变更导致过去拆分策略不佳;

无论以上哪种情况,最终都要面临微服务暴增导致的“死星”式调用链。该情况并非只发生在巨头身上的极端情况。

图片

(死星调用链路,图片来源于网络)

最终,还是要回归到去中心化思想,回归到云原生。

我们一再强调,云原生提供的解决方案,是系统不可变基础设施服务网格(Service mesh)、边车(Sidecar)、服务编排和容器之类的新兴架构模式可以有效地阻止基于云的世界中出现的各类错误实践

二、云原生的架构

随着云平台的面世,尤其是出现了像 Kubernetes这样的容器编排技术后,服务网格就开始引起人们的关注。服务网格是应用程序服务之间的桥梁,它带来了许多附加功能,如

  • 流量控制

  • 服务发现

  • 负载平衡

  • 弹性

  • 可观察性

  • 安全性等

它使应用程序可以从应用程序级库中卸载这些功能,并允许开发人员专注于业务逻辑。

图片

(云原生技术应用演进,图片来源于网络)

诸如Istio之类的某些服务网格技术还支持混沌注入之类的功能,以便开发人员可以测试他们的应用程序,以及多达数十种相互依赖的微服务的弹性和健壮性。

应用和云通过Sidecar旁路容器作为桥梁交互,每个容器通过代理应用将本身所需要的进出,所以云就可以非常容易地通过这样一个代理,调节流量、做流量切分,这也是 Service Mesh 的基本原理。

服务网格非常适合放在平台即服务(PaaS)和容器即服务(CaaS)之上,并通过这些通用平台服务提升推行云计算过程的体验。

2.1 无服务器架构

在最近的云原生演进中,另一个备受关注的趋势是无服务器架构,也称为无服务器计算,基于公有云厂商算力,运行coding。无服务器比 PaaS 模型更进一步,因为它将服务器基础架构从应用程序开发人员那里完全抽象出来。开发只需关注代码即可。

在无服务器中,我们将业务服务编写为函数,并将这些函数部署到云基础架构中。无服务器技术的一些例子包括Amazon Lambda、Spring Cloud Function、Google Cloud Functions和Microsoft Azure Functions等。

无服务器模型位于云托管范围内的 PaaS 和 SaaS 之间,如下图所示:

图片

(各类服务架构,图片来源于网络)

对比单体服务与微服务,并非所有解决方案都应作为函数来实现。我们也不应使用无服务器函数替换所有微服务,就像我们不应替换所有单体应用,或将其分解为微服务一样。只有诸如用户身份验证或客户通知之类的细粒度业务和技术功能,才应该设计为无服务器函数。小结:合适的才是最重要的,无所谓先进 。

根据我们应用程序的功能性和非功能性需求(例如性能和可伸缩性以及事务边界等),我们应该为每个特定用例选择适当的单体、微服务或无服务器模型。常见的情况是,我们可能需要在一个解决方案架构中使用所有这三种模式。

如果设计不当,无服务器解决方案最终将变成纳米片,其中每个函数都与其他函数或微服务紧密结合,并且无法独立运行。

2.2 服务编排

当我们在说容器编排的时候,我们在说什么?

在传统的单体式架构的应用中,开发、测试、交付、部署单个组件不存在编排概念。而云原生时代,主要为了解决微服务和容器通信和HPA、VPA场景,运维将面临新挑战我们需要将单体式的架构拆分成越来越多细小的服务,运行在各自的容器中,那么该如何解决它们之间的依赖管理、服务发现、资源管理、高可用等问题?

在容器环境中,编排通常涉及到三个方面:

  • 资源编排

  • 负载编排

  • 服务编排

Kubernetes常见控制器编排方式:

  • Deployment

  • StatefulSet

  • DaemonSet

  • CronJob

  • Job

图片

(K8S编排调用链,图片来源于网络)

2.3 服务网格

与传统的微服务架构相比,基于服务网格的解决方案在连接性、可靠性、安全性和可观测性方面提供了诸多好处。

连接性:

  • 流量控制(路由、分流)

  • 网关(入口、出口)

  • 服务发现

  • A/B 测试、金丝雀

  • 服务超时、重试

可靠性:

  • 断路器

  • 故障注入/混沌测试

安全性:

  • 服务间身份验证(mTLS)

  • 证书管理

  • 用户身份验证(JSON Web Tokens)

  • 用户授权(基于角色的访问控制)

  • 数据加密

可观测性:

  • 监控

  • 遥测、仪表盘、指标

  • 分布式跟踪

  • 服务图

服务网格技术常见实现:

  • Istio

  • Linkerd

  • Consul Connect

图片

(面对K8S的托管服务网格,图片来源于网络)

三、总结

  • 互联网技术日新月异,技术不是终点,只是工具的一种,协助达成目标的过渡过程;

  • 云原生不是工具,而是体系架构和生态,是一套系统解决方案,更是标准基础设施;

  • 架构是演变出来的,不是设计规划出来的。

更多产品了解

欢迎扫码加入云巴巴企业数字化交流服务群

产品交流、问题咨询、专业测评

都在这里!

 

评论列表

为你推荐

如何才能配置出适合自己的云服务器(上)

如何才能配置出适合自己的云服务器(上)

很多“上云”的小伙伴面对的最大的问题就是云服务器的配置问题,好不容易确定了要选择的云服务器的品牌,却在具体的实例配置上卡壳,面对“花里胡哨”的配置选项无从下手。

2022-11-23 09:53:08

掌握未来,从天翼云开始: 弹性云主机CT-ECS产品解析

掌握未来,从天翼云开始: 弹性云主机CT-ECS产品解析

作为一款基于云计算技术的虚拟化服务器产品,天翼云弹性云主机CT-ECS具有高可用性、弹性扩展等特点,适用于各种应用场景。本文将从多个方面介绍弹性云主机CT-ECS的产品优势和特点等。

2024-03-27 10:43:10

腾讯云星星海云服务器被用户选择应用的原因是什么

腾讯云星星海云服务器被用户选择应用的原因是什么

云服务器是一种虚拟化后的服务器,和传统服务器相比云服务器在便捷程度以及部署费用上和传统服务器相比都具有一定的优势。云服务器的厂家越来越多,在企业进行选择一款适合的服务器上云的同时安全和性能是要考虑进去的两大问题,也是进行选择的主要依据。

2022-11-23 17:08:56

重构虚拟世界最佳体验,一文了解腾讯云应用云渲染

重构虚拟世界最佳体验,一文了解腾讯云应用云渲染

腾讯云的应用云渲染基于腾讯云强大的GPU算力和音视频串流技术,为用户提供一站式应用云化能力。

2024-04-30 17:12:51

分布式文件系统的服务器编辑是怎样的

分布式文件系统的服务器编辑是怎样的

我们的工作,生活,学习,在现代企业社会,大多都是可以通过信息网络技术进行的。所以,随着日子的推移,我们的文件就会越来越多,分布式文件系统了,本文,就来介绍一下分布式文件系统的相关知识。 AFS是专门为在大型企业分布式网络环境中提供一个可靠的文件管理服务而

2022-11-21 10:57:06

云算力底座的标竿产品——腾讯星星海服务器

云算力底座的标竿产品——腾讯星星海服务器

金融领域目前的技术开始朝着普惠的方向转变,满足客户个性化的定制需求,并达到快速响应,都离不开强大的算力支撑。但随着云计算承载的业务规模越来越大,传统的服务器很难满足数据中心场景下,对规模大、需求多样、性价比高、安全可靠等方面的一系列要求。

2022-11-23 15:00:37

严选云产品

金财互联金财智票销项管理平台 金财互联金财智票销项管理平台一站式发票服务平台,解决所有发票难题。系统自动从税盘中同步历史发票数据,系统自动从历史发票数据中同步开票企业信息,系统自动从历史发票中同步客户抬头信息,系统自动从历史发票中同步商品信息包括税收分类编码等。
BIG-IP DNS服务 BIG-IP DNS 可路由分发的应用流量,以应对不断变化的网络流量和用户量,还可将 BIG-IP DNS 配置为完整代理,以便跨体系结构和在全球范围内对应用及 DNS 进行全局负载平衡。
腾讯会议会议室连接器MRA+华为视频会议设备集成方案 腾讯会议会议室连接器MRA+华为视频会议设备集成方案,提供统一管理、集中控制的解决方案,灵活完备的第三方接口,丰富多样的会议调度方式。多种型号的多功能智真、视频会议终端、HW CloudLink软终端等加入会议,实现音视频互通和桌面共享等功能。
光启元RayData大数据可视化开放平台 RAYDATA大数据可视化开放平台是基于腾讯云生态,以企业用户需求为导向,以平台产品能力为载体,以数据可视化技术赋能、行业生态融合为目标,打造的大数据可视化企业用户开放合作平台。
指掌易手机合规检测系统 指掌易手机合规检测系统,全自动化检测,大部分机型检测时无需手动点击任何操作。提供各类敏感信息特征库,包含涉黄、涉毒、涉赌、涉贷、涉恐、涉密、涉政等。获取目标设备型号、IMSI、IMEI、MEID、Wi-Fi/蓝牙地址信息,对微信、QQ聊天内容进行检测。
简道云零代码应用搭建平台 简道云零代码应用搭建平台获得全行业150万+企业和组织认可的数字化转型工具。通过简单的拖拽操作,即可搭建出各类数据收集表单。表单的灵活使用,可促使团队成员协作,提升全员的工作效率。灵活配置,自定义数据收集。通过简单的拖拽和连线操作,即可灵活设计业务数据流转规则,实现业务流程线上化,自动化。

甄选10000+数字化产品 为您免费使用

申请试用