Borg：G家最重要的基础设施 – hellojavacases微信公众号网站
即使是在Borg论文发表前，从各种渠道了解也都能知道G家有一个挺神秘，非常重要的系统叫Borg，在Borg论文发表后，更是让人可以确信，再加上近两年和G家的朋友们的接触，更加可以知道对于G家的研发人员而言，说Borg是G家最重要的基础设施应该不为过，如果有看过《Google SRE》书的同学，可以看出有一点是在G家对Borg的认识是深入各研发同学的，Google SRE书里讲到G家的编译打包这种临时性任务，其实都是提交一个临时性的任务到borg来完成，而我想在传统或者说目前多数的做法里都会采用固定的机器资源来做这些事。
对Borg带来的收益，我想只用摘取Borg论文里这一小段就足以说明：
"Since many other organizations run user-facing and batch jobs in separate clusters, we examined what would happen if we did the same. Figure 5 shows that segregating prod and non-prod work would need 20–30% more machines in the median cell to run our workload."
G家的服务器数量是百万数量级，20-30%这数量级的节省简直了…
既然Borg这么的好，为什么现在在其他互联网公司还没看到采用一样的方式去做呢（要知道Borg差不多是2003年就开始做了），从我的接触来看，我了解到的原因主要是这两个：
1.技术难度，有一些声音是觉得Borg这条路线太难走了，里面要解决的技术问题太多；
2.离线任务的规模量还不够大，这个时候Borg采用的user-facing and batch jobs混合在一台机器上运行的方式的优势就不存在了。
从上面这两个原因可以看到，要去打造一套Borg这样的系统，基本上只有机器到达一定规模，以及大数据也发展到比较大规模的公司才能有足够的收益比，当然，以现在大数据、AI的火热程度，排行前十甚至前几十的互联网公司其实都已具备这样的前提条件。
那么要打造Borg这样的系统，要突破哪些技术难度呢？
1.容器化
Borg把所有的task都放在cgroup里运行，这种方式相比Docker基于的LXC的差别在于没有namespace的隔离，简单来说就是当你登录到机器上，看到的是整个物理机的状况，这对于运维来说其实是相当痛苦的，从Borg论文也可以看到Borg为了方便对task进行运维，做了很多辅助工具和系统，所以在容器化这个方面我会更加倾向于LXC，具备namespace的隔离，对运维来说就会友好非常多。
为什么一定要容器化呢，原因在于如果对资源的需求都是物理机，那资源的调度的灵活性将会大幅下降，所以容器化是非常重要的一个基础前提，容器化的难题一方面是对LXC的掌握，另一方面则是任何类型的软件都要放在LXC中跑，会碰到各种问题，无论是性能还是namespace隔离不完整带来的支持问题。
2.复杂的调度器
当一家大规模的公司的所有业务都要通过同一个调度层来分配资源时，这个调度层所要面临的业务复杂性是非常可怕的，再加上batch jobs的调度，各种调度需求混合在一起，以及要管理巨大的机器规模，如何在保证业务需求满足的同时的规模、效率、稳定，绝对不是一件容易的事，现在业界有的其他的例如swarm、k8s、mesos、yarn等等，离borg这种级别的调度器是有巨大差距的。
3.资源隔离
Borg需要把不同优先级的任务跑在同一台机器上，non-prod优先级的任务会share prod优先级任务的资源，这个时候如何保障好non-prod任务不影响到prod任务的性能等就非常非常重要了，而这个目前业界并没有什么很成熟的方案，无论是cpu、内存、IO（磁盘/网络），离要成熟的支撑这样的资源隔离都还有非常大的差距。
4.历史包袱
Borg在2003年开始做的话，我想那个时候G家的历史包袱应该是不大的，但现在其他的大的互联网公司要做的话，显然都有不小的历史包袱，例如通常都会需要面临多种不同的基础设施、运维模式等，怎么在背着巨大的历史包袱走到期望的那步，其实是一件非常不容易的事。
可以说，这四点技术难度都是世界级的，因为碰到这样的技术难度的机会其实本来就很少，显然只有巨大的收益才能产生这样的驱动力，所以说这种类型的系统只有大规模的公司才会投入力量去做，而现在阿里就在投入力量打造这样的系统，如果你正好对这些领域有兴趣，并且在这些领域有一定的积累，我想这样的好的难得的机会（就像一直说，只有少数几家公司有做这样的系统的动力）不容错过，应该毫不犹豫的来加入我们，直接发送消息来联系我吧，期待你的加盟！
Read full article from Borg：G家最重要的基础设施 – hellojavacases微信公众号网站
No comments:
Post a Comment