云计算的一些技术挑战
发布时间:2021-8-4 11:00阅读:144
把一个大型云服务运营起来,运营稳定,本身就是一件极难的、门槛极高的活,在运营过程中要踩很多坑,解决无数技术问题;然后还要让云服务效率更高、成本更低(比如减少机房冷却用电量)。这个过程中,会产生大量创新,远不止拿开源软件来搭一搭这么简单。
我就从实际的情况中,说一说面临的技术挑战。可能不是特别的全面,我抛砖引玉,不全面的地方其他同学可以补充指正。云服务简单来说一般分为三层,就是IAAS PAAS 以及SAAS,我们分开从每一层来来讲,假设我们需要建设一个拥有100W 台基础服务器的云计算公司,需要考虑哪些技术问题
IAAS层 意思是基础设施即服务。云端公司把IT环境的基础设施建设好,然后直接对外出租硬件服务器或者虚拟机
机房选择, 选择在我国的哪个区域建设数据中心,是需要综合考虑 客户需求,建设成本,以及电力成本的。一个服务器的电力成本三年基本跟硬件成本是持平的,所以低功耗和数据中心的功耗设计现在各个巨头都在重点研究。
机型选择,使用什么型号的cpu,内存,硬盘 SSD,以及GPU,这些硬件对于上层的操作系统的兼容性测试,是一个周期挺长的事情。曾经因为硬件跟某个内核版本的兼容性问题,我们在线一年内更换了数十万台服务器的内核,说起来都是泪。最近全球服务器供应紧张,供应链的管理也是极度考虑全流程效率的一件事情。
数据中心的网络设计和冗余建设,以及整体的机房运维。这部分都需要专业的人员,阿里云香港机房曾经出现过整机房挂掉12个小时的情况,业界也曾出现过由于维修人员不小心踢掉电源,ups双冗余失效,导致整个数据中心的核心网络挂掉的问题。
多个数据中心互联网络和光纤设计需要保障高可用。我国的基建发达,双冗余的机房互联光纤都被挖断过好多次,客户是不会体谅你网络中断是因为挖掘机的。
PAAS 层 : PaaS是Platform as a Server的缩写,意思是平台即服务,即把运行用户所需的软件的平台作为服务出租。
现在大型的云计算服务商一般提供容器服务和虚拟机等多种的方式给用户提供。容器和虚拟机需要在分配,创建,迁移,销毁等全生命周期进行管理,需要一套完整的运维系统,数千万级别的容器调度和分配逻辑相当复杂。我知道的就有业内云计算公司人员不小心改错了分配逻辑,把客户数百台虚拟机重装的,据说找客户那边跪了很久。
多个不同客户的资源怎么互补,数百万的容器之间做到削峰填谷,分时复用,这个是大型的云计算服务商必须考虑的一个技术话题。当前技术难度很高,客户的稳定,高效需求是第一的,容器的调度和弹性的扩容这部分的速度很关键,是保证能够快速支持业务诉求的一个重要场景。 比如今天吴亦凡的事件又把新浪微博给搞挂掉了,当前新浪部分的服务使用的是阿里云,当前看这部分应对尖峰容量冲击的技术做的不太好。
数据库,共享存储 是一种常见的PAAS 应用。对于核心客户的数据,数据的高可用,以及高可靠性是永远无法逃避的话题。(成本反而不是第一诉求)。一般数据库的可用性要求是99.99%,也就是一年只能挂52分钟。对于数万台规模的数据库集群,如果保证持续的高可用,故障的发现,自愈,容灾,迁移怎么设计,自动化运维怎么支持,这些都是业界具有极高技术壁垒的东西,业界类似的专家基本都年薪百万起步。
SAAS层: 云计算的SAAS 一般包含的东西比较多,比如运维管理系统(包含监控,故障管理,流量调度,路程管理等),以及各家提供的高级能力,比如语音识别,图像识别,安全防攻击,机器翻译等
效果肯定是第一位的,但是这个东西每个云计算公司口径不一,在这里不赘述。
速度,一般上述的SAAS服务,都是通过接口调用,商业产品的访问速度是用户体验的关键一环,大家都知道,如果一个用户在注册环节人脸验证持续2分钟,很多用户就跑路了。所以针对不同地域,不同客户的诉求,从网络带宽,到接入点优化,到内部的请求优化,以及数据裁剪等全链路的优化保证客户的体验是非常重要的。声网应该就是这一类做的好的典型代表。
可用性 商业产品跟to c的极大区别是,如果你服务挂了坑客户一次,客户可能就跑路了。毕竟客户是真金白银付费的,所以稳定性是基础的要求,也是必须做到的。 99.99%的承诺,面临网络中断, 用户流量洪峰,机器硬件异常,服务迭代bug等各种坑,需要没有理由的达到对于用户的承诺。
综上所述
成本层面: 规模采购以及自己研发带来的基础成本优势,大规模的容器混部和分时复用带来的资源利用率优势。
质量层面: PAAS提供的基础组件,以及SAAS服务需要在高可靠性,高可用性的基础上,要做到 按需申请,按量计费,用时可弹,闲时可退。
生态层面: 完整的SAAS生态增加客户的粘性,客户迁移成本较高。
对于云计算来讲,上述面临诸多挑战导致这是一个只有雄厚技术积累和高投入的玩家才能玩得起的生意
低佣股票开户入群V:442557803
低佣股票开户入群V:442557803
低佣股票开户入群V:442557803
温馨提示:投资有风险,选择需谨慎。
医疗技术最牛的云计算公司是哪个?
医疗技术最牛的华为云计算公司是哪个?
超导技术存在的挑战是什么?
-
中信证券现在可以买黄金吗?有人知道吗?
2025-11-03 09:31
-
北交所怎么开户?如何开通北交所交易权限?
2025-11-03 09:31
-
一文搞懂一条产业链——【通信设备及服务】
2025-11-03 09:31


当前我在线

分享该文章
