0%

资源调度

领域相关

阿里禁用iptables,不用iptables做转发

容器调度相关

  • Google无疑是最有技术敏锐性和市场敏锐性的,早早的看到了Docker企业级市场的企图心,所以Google是第一个支持Docker的竞争对手—-CoreOS的Rocket容器,2014年四月份谷歌风险投资公司牵头对CoreOS进行了1200万美元的投资,目标明确—-对准docker。Google不再是Docker+ kubernetes,而是容器抽象+ kubernetes,即不止支持docker
  • Redhat的OpenShift公有云还是OpenShift V2,V3采用Docker+k8s,很难从V2升级到V3。

Spark

Hadoop第一代产品使用HDFS,处理MapReduce作业的时候设计频繁的HDFS读写操作,如下图:
mapreduce
而Spark使用内存替代了使用HDFS保存中间结果,使用弹性分布数据集(RDD),使得分布式对象集合可以跨集群在内存中访问和保存,大大减少了作业加载数据的时间开销。当有数据丢失时,RDD会跟踪并重新计算得到丢失的数据。Spark的性能是MapReduce的40倍