CoreOS Architecture Learning

目录

1. CoreOS简介
2. CoreOS部署、安装、使用
3. CoreOS命令使用

1. CoreOS简介

0x1: CoreOS和Docker的关系

我们先来看一张Docker的架构图

Docker是一种基于"Host OS"操作系统的虚拟化技术，部署Docker的前提是需要底层有一个运行Docker Container的操作系统，从理论上来说，RHEL、ubuntu、debain等系统，而CoreOS就是一款专门为了Docker虚拟化而设计的操作系统

0x2: CoreOS产生

CoreOS是一个基于Docker的轻量级容器化Linux发行版，专为大型数据中心而设计，旨在通过轻量的系统架构和灵活的应用程序部署能力简化数据中心的维护成本和复杂度

0x3: CoreOS的特点

1. CoreOS 没有提供包管理工具，而是通过容器化 (containerized) 的运算环境向应用程序提供运算资源。应用程序之间共享系统内核和资源，但是彼此之间又互不可见。这样就意味着应用程序将不会再被直接安装到操作系统中，而是通过 Docker 运行在容器中。这种方式使得操作系统、应用程序及运行环境之间的耦合度大大降低

2. 相对于传统的部署方式而言，在 CoreOS 集群中部署应用程序更加灵活便捷，应用程序运行环境之间的干扰更少，而且操作系统自身的维护也更加容易。

3. CoreOS 采用双系统分区 (dual root partition) 设计。两个分区分别被设置成主动模式和被动模式并在系统运行期间各司其职
    1) 主动分区负责系统运行
    2) 被动分区负责系统升级
一旦新版本的操作系统被发布，一个完整的系统文件将被下载至被动分区，并在系统下一次重启时从新版本分区启动，原来的被动分区将切换为主动分区，而之前的主动分区则被切换为被动分区，两个分区扮演的角色将相互对调。同时在系统运行期间系统分区被设置成只读状态，这样也确保了 CoreOS 的安全性。CoreOS 的升级过程在默认条件下将自动完成，并且通过 cgroup 对升级过程中使用到的网络和磁盘资源进行限制，将系统升级所带来的影响降至最低 

4. CoreOS 使用 Systemd 取代 SysV 作为系统和服务的管理工具。与 SysV 相比
    1) Systemd 不但可以更好的追踪系统进程，而且也具备优秀的并行化处理能力，加之按需启动等特点，并结合 Docker 的快速启动能力，在 CoreOS 集群中大规模部署 Docker Containers 与使用其他操作系统相比在性能上的优势将更加明显
    2) Systemd 的另一个特点是引入了 "target" 的概念，每个 target 应用于一个特定的服务，并且可以通过继承一个已有的 target 扩展额外的功能，这样使得操作系统对系统上运行的服务拥有更好的控制力 

5. 通过对系统结构的重新设计，CoreOS 剔除了任何不必要的软件和服务。在一定程度上减轻了维护一个服务器集群的复杂度，帮助用户从繁琐的系统及软件维护工作中解脱出来。虽然CoreOS 最初源自于Google ChromeOS，但是从一开始就决定了 CoreOS 更加适合应用于一个集群环境而不是一个传统的服务器操作系统

Relevant Link:

http://www.infoq.com/cn/articles/what-is-coreos
http://baike.baidu.com/view/10876826.htm?fr=aladdin
http://www.oschina.net/p/coreos
http://www.oschina.net/translate/coreos_and_docker_first_steps?cmp
http://www.infoq.com/cn/news/2014/07/etcd-cluster-discovery

0x4: CoreOS为大规模云计算、数据中心集群而做的改造

1. CoreOS针对Linux内核所做的改造
    1) 存在两个ROOT分区，一个被用作启动分区，一个被用作更新分区
    2) 更新分区在更新完成后，自动重新启动系统，当前机器不需要从负载集群中移除，为了保证其它应用程序不被打断，会通过Linux cgroup限制更新过程中的磁盘、网络等IO使用。

2. 采用systemd取代传统的SysV
    1) 支持并行化任务
    2) 同时采用 socket 式与 D-Bus 总线式激活服务
    3) 按需启动守护进程(daemon)
    4) 利用 Linux 的 cgroups 监视进程
    5) 支持快照和系统恢复
    6) 维护挂载点和自动挂载点
    7) 各服务间基于依赖关系进行精密控制 

3. root分区被设计成只读，用以保证数据的一致性和更新可用

4. CPU、IO等资源隔离
基于容器(Container)的架构实现资源隔离，CoreOS很明智使用Docker作为容器管理器用以构建、发布应用，从这个层面来看，一个应用其实就是一个容器 

5. etcd组件负责服务发现和配置共享，采用Raft分布式一致性协议算法，承担起，组件之间服务通信使用。很自然的，容器(Container)之间应用、服务的伸缩，就显得很简单了

Relevant Link:

https://coreos.com/

2. CoreOS部署、安装、使用

A new way to think about servers
CoreOS is Linux for massive server deployments

CoreOS is a new Linux distribution that has been rearchitected to provide features needed to run modern infrastructure stacks. The strategies and architectures that influence CoreOS allow companies like Google, Facebook and Twitter to run their services at scale with high resilience.

0x1: CoreOS Installation Based On VirtualBox

CoreOS是一种操作系统架构的产品，CoreOS的安装需要基于一定的硬件/虚拟机环境上实现

http://www.blogjava.net/yongboy/archive/2013/08/26/403325.html

0x2: CoreOS Installation Based On VMware

1. Choosing a Channel
//This is a rough sketch that should work on OSX and Linux:
curl -LO http://alpha.release.core-os.net/amd64-usr/current/coreos_production_vmware_insecure.zip
unzip coreos_production_vmware_insecure.zip -d coreos_production_vmware_insecure
cd coreos_production_vmware_insecure
open coreos_production_vmware_insecure.vmx

2. To deploy on an ESXi/vSphere host, convert the VM to OVF
cd coreos_developer_vmware_insecure
mkdir coreos
ovftool coreos_production_vmware_insecure.vmx coreos/coreos.insecure.ovf

3. creates the following files in ../coreos/:
//解压后的结果
coreos.insecure-disk1.vmdk
coreos.insecure.ovf
coreos.insecure.mf

4. use the vSphere Client to deploy the VM as follows:
    1) menu "File"..."Deploy OVF Template..."
    2) in the wizard, specify the location of the /coresos/ coreos.insecure.ovf created earlier
    3) name your VM
    4) choose "thin provision" for the disk format
    5) choose your network settings
    6) confirm the settings then click "Finish"

5. Cloud-Config

6. Logging in
cd coreos_developer_vmware_insecure
ssh -i insecure_ssh_key [email protected]10.0.1.81

7. Replacing the key
cat ~/.ssh/id_rsa.pub | ssh [email protected]10.0.1.81 -i insecure_ssh_key update-ssh-keys -a user
ssh [email protected]10.0.1.81 update-ssh-keys -D oem

8. Using CoreOS

Relevant Link:

https://coreos.com/docs/running-coreos/platforms/vmware/
https://coreos.com/docs/

3. CoreOS命令使用

https://coreos.com/docs/quickstart/

Copyright (c) 2014 LittleHann All rights reserved

时间： 2024-11-06 17:40:18

CoreOS Architecture Learning的相关文章

Docker Architecture Learning

目录 1. Docker简介 2. Docker的使用案例 3. Docker架构 4. 如何安装.部署Docker 1. Docker简介 Docker基于Go语言开发,代码托管在 Github上,并遵循Apache 2.0开源协议 Build, Ship and Run Any App, Anywhere Docker - An open platform for distributed applications for developers and sysadmins. 0x1: Dock

Linux Notes

Do what we want based on what others already did with additional abstraction and organization to service for uses. Preface Provide valuable insight to pepole who want to know more about the critical design issues in a modern operating system. Underst

浅谈深度学习中潜藏的稀疏表达

浅谈深度学习中潜藏的稀疏表达 “王杨卢骆当时体,轻薄为文哂未休. 尔曹身与名俱灭,不废江河万古流.” — 唐 杜甫<戏为六绝句>(其二) [不要为我为啥放这首在开头,千人千面千理解吧] 深度学习:概述和一孔之见 深度学习(DL),或说深度神经网络(DNN), 作为传统机器学习中神经网络(NN).感知机(perceptron)模型的扩展延伸,正掀起铺天盖地的热潮.DNN火箭般的研究速度,在短短数年内带来了能“读懂”照片内容的图像识别系统,能和人对话到毫无PS痕迹的语音助手,能击败围棋世界冠军.引

【翻译】asp.net core中使用MediatR

这篇文章来自:https://ardalis.com/using-mediatr-in-aspnet-core-apps 本文作为翻译,有一些单词翻译成中文可能会有一些误解(对于读者)或者错误(对于作者)的地方,所以在文章中你可以看到一些单词没有进行翻译.如果有不对的地方,请指出,谢谢. 在Asp.net core中使用MediatR 我已经开始考虑使用MediatR作为我的领域事件实现.为了达到这个目的,我用asp.net core创建了一个示例程序,总的来说是非常容易的,如果你之前没有使用过

(zhuan) Using the latest advancements in AI to predict stock market movements

Using the latest advancements in AI to predict stock market movements 2019-01-13 21:31:18 This blog is copied from: https://github.com/borisbanushev/stockpredictionai In this notebook I will create a complete process for predicting stock price moveme

(转) Deep learning architecture diagrams

FastML Machine learning made easy RSS Home Contents Popular Links Backgrounds About Deep learning architecture diagrams 2016-09-30 Like a wild stream after a wet season in African savanna diverges into many smaller streams forming lakes and puddles,

【Deep Learning】genCNN: A Convolutional Architecture for Word Sequence Prediction

作者:Mingxuan Wang,李航,刘群 单位:华为.中科院 时间:2015 发表于:acl 2015 文章下载:http://pan.baidu.com/s/1bnBBVuJ 主要内容: 用deep learning设计了一种语言模型,能够根据之前"所有"的历史来预测当前词的条件概率.用语言模型迷惑度衡量.用机器翻译衡量,该模型都比baseline(5-gram.RNN.等)好 具体内容: 之前用deep learning在语言模型上的进展是:RNN和LSTM 参考的工具包: R

15 cvpr An Improved Deep Learning Architecture for Person Re-Identification

http://www.umiacs.umd.edu/~ejaz/ * 也是同时学习feature和metric * 输入一对图片,输出是否是同一个人 * 包含了一个新的层: include a layer that computes cross-input neighborhood differences (capture local relationships between the two input images based on midlevel features from each i

Learning Note: SQL Server VS Oracle–Database architecture

http://www.sqlpanda.com/2013/07/learning-note-sql-server-vs.html This is my learning note base on the "SQL Server Essentials for Oracle DBAs Jump Start" . DATA BLOCK/EXTEND AND SEGMENT image: http://lh5.ggpht.com/-FxEKn7CCNd0/UetkOxZ6igI/AAAAAAA