PVS的内存和存储规划设计

提示:这篇文章是本人在2012年12月11日有感而写的一篇电子邮件,因为其中的内容会在即将发表的一篇新博文被引用,故重新贴于此处。由于是近三年前的内容,技术也在不断进步,其中的部分内容已经不再适合于现在,仅作了解技术发展之用。

差不多是去年的时候,我写过关于一篇关于《PVS写缓存容量设计和部署位置的考虑》,谈到如何计算PVS服务所需要的内存。最近遇到一个项目,用户的应用是基于B/S方式,而且都是运行在IE6环境上,也不能迁移到更高的IT版本上,怎么办呢?从表面上看我只能使用Windows2003Server + XenApp5.0的环境去部署,那么我的Windows2003Server是不是只能分配4G内存呢?如果分配4G内存,岂不是主机上就要部署太多Windows2003Server虚拟机,会不会影响每台物理服务器所能承载的用户数量?

在9月17日发给你的《PVS写缓存容量设计和部署位置的考虑》文章中,我们曾经谈到过这个问题,今天把这个问题和PVS的存储/内存设计考虑一起来探讨一下。另外,谈到PVS方式,一般来说不仅仅是涉及到PVS服务器端的内存和存储规划,还有Target Device端的内存该分配的问题,所以我们一起来讨论。

一、Windows 内存分配机制和架构

我们第一步必须先了解清楚Windows的内存分配机制,没有这些底层知识,我们设计时将无从下手。

第一件事情我们应当了解的是OS处理的虚拟内存和安装在系统中的物理RAM的不同。一个32位的Windows操作系统无论插在主板上的物理内存有多大,能直接处理的就只有4G大小虚拟内存。企业版和数据中心版的WindowsServer 2003 32位虽然可以处理高达32G和64G内存,但是由于32位处理器的限制,实际能处理的地址空间即使在使用了Physical Address Extension (PAE)的情况下也只能处理到36位。PAE可以让CPU和操作系统利用4G之外的RAM空间。但是,从Kernel和进程方面来说,32位的Windows的core kernel仍然是在32位或者是4G虚拟内存空间内存工作。

下面的图标就说明了32位的Windows Server2003是如何将4G的可寻址虚拟内存空间划分为两个不同的区域:Kernel 空间和用户空间:

如上图所示,WindowsKernel的内存就只给了2G大小,同时又被划分为四个区域:

  • System Cache(系统缓存):该部分区域就是文件被map in和map out的区域,如果文件已经从硬盘读入了内存,下次就可以非常快的打开它了。最大可分配空间是960MB;下图是当一个WinWord.exe程序被读入时的状态图:

    即使是用户关闭了这个应用程序,只要该部分的存储空间还有足够富余,该内存空间仍然为该程序保留,这样,下次启动该文件就非常迅速了。

    虽然该部分的空间只能是960MB大小,但不意味着只有960MB的文件能换存在该区域,实际上其他文件缓存数据还是能放在RAM的Standby区域,或者是Modified页面文件中。如下图所示:

  • SystemPage Table Entries(PTE):最该可分配空间是1.3GB;
  • PagedPool:该部分最大可分配空间是650MB;
  • Non PagedPool:该部分最大可分配空间是256MB;

关于上述每部分的内存用处不再一一详述,你可以google搜索到。总之,所有的Kernel虚拟内存分配的总数不能超过2GB大小的地址空间。因此,比如System PTE空间小了,但是Paged Pool又有很多闲置内存,那么PagedPool也不能将他的内存分给System PTE,还好这个限制在Windows2008就被取消了。

对于64位的操作系统来说,虽然内存架构还是相似,但是不再有这么小的限制了,下面的图标就是Windows Server 200864位的Kernel内存限制参数:

结论:在Windows Server 2003版本的操作系统上,不建议通过配置PAE参数以获得超过4G内存访问的能力,也就是说,在WindowsServer 2003版本的操作系统上建议只分配4G大小的内存!

二、Provisioning Services的内存该如何分配

我们了解了Windows是如何处理内存分配和文件缓存后,接下来看看Citrix PVS是如何被这些规则所影响的。下面的图显示了一个Windows XP的TargetDevice从一个共享的PVSvDisk的启动过程,我们暂时假设启动过程需要读取200MB大小的数据。

从上图中可以看到,PVS服务器只需要从物理磁盘读一次vDisk即可,然后他就把vDisk的内容缓存到System Cache的内存中,并且向所有其他的Target Device提供数据服务。只要足够的内存空间,我们就不需要考虑硬盘上的IOPS要求,因为I/O全部访问在内存区域。

那么,如果我制作了一个25G大小的Windows 7的vDisk,是不是我就要分配25GB大小的内存给这个vDisk呢?答案是不需要这么多。实际上,一个Windows的运行是不需要将所有文件全部读取到内存中去,他只需要去读一些最常用的文件即可。一个典型的Windows XP会话大概需要从硬盘读取1GB-3GB的文件,1GB-3GB是这么来计算的:

  • WindowsXP从启动到登陆窗口,开启系统服务,大概需要200MB;
  • 用户登录并且加载他的Profile,然后启动他的桌面环境,大概需要50MB;
  • 用户运行Office软件,以及其他应用程序以支撑他一天的工作,大概需要600MB;
  • 用户注销操作系统甚至关闭操作系统,需要150MB;

基于以上的考虑,vDisk中大约有1GB大小的数据需要读取到内存中,由于是多个用户共享一个vDisk磁盘文件,所以有很多文件是共享的。即使是考虑到用户打开的文件是不同的,预计分配给PVS服务大小的System Cache RAM 2GB空间就能保证所有内容均从RAM里面读取,而不用从物理磁盘上读取数据。

在System Cache中除了需要额外的RAM来支持vDisk的缓存外,System Cache还需要一些RAM来缓存Windows操作系统和服务所需要的核心系统文件,还有一些服务的软件,例如Provisioning Services服务。一般来说设计512MB来缓存这些文件是合适的。下面的公式就是说明如何计算需要多少System Cache RAM来支撑PVS服务:

System Cache RAM = 512MB + vDisk的个数×平均每个vDisk需要读取的平均数据

此外,vDisk所需要的System Cache RAM还需要加上CommittedBytes under load,所以最后的公式应该是:

Total RAM = Committed Bytes under load + System Cache RAM

举个例子:

  • 一个运行的PVS服务器Under Load显示了2GB大小的Committed Memory
  • 4个不同的Windows XP vDisk为不同的Target Device提供服务;
  • 平均每个vDisk需要读取2GB大小的数据;
  • SystemCache RAM = 512 MB + (4 * 2 GB) = 8.5 GB
  • Total RAM= 2 GB + 8.5 GB = 10.5 GB

也就是说在上述的场景中,该PVS服务器至少应当配置10.5GB大小的RAM才能能保证所有数据均从内存中读取。

OK,到这里应该看得出来安装PVS最好的选择不是32位的Windows Server操作系统,而是64位的Windows操作系统了。

三、Provisioning Services的IOPS该如何计算

无论是那种部署方式,IOPS的计算都是核心因素所在,对于PVS来说,不仅仅是PVS服务器,还有TargetDevice也需要考虑。在我们下面的上一封邮件已经对Write Cache放在什么地方进行过论述,此处不再详述,总之建议放在共享存储上,而不是PVS服务器本地。如此一来,如果在第二章你对PVS的内存配置正确的话,在PVS服务器上你几乎可以不用考虑这个因素了,因为基本上不会用到PVS服务器本地的资源。

四、PVS中vDisk的存储建议

如上节所述,vDisk建议放在共享存储上,那么问题就来了,又出现了两个选择:Block Level Storage和Network Storage,哪种比较好呢?

Block Level Storage包括了SATA、SCSI、iSCSI以及光纤存储;而NetworkStorage主要包括网络重定向方式来让PVS访问到共享存储,例如CIFS、NFS以及Netware。

正确的做法是将PVS的vDisk放到Block Level Storage设备上。如果你选择了网络方式例如CIFS来让PVS访问到vDisk,那么PVS服务将无法将vDisk的内容缓存到System Cache中。这就会导致双倍的网络流量,甚至引起严重的网络负担,进而降低整个系统的扩展性。

例如,如果一个TargetDevice启动后从vDisk读取了200MB大小的数据,那么就会有200MB的网络传输数据从服务器传到Target Device。如果vDisk是从非Block Level的网络附加存储传到服务器的,那么服务器就会首先从网络存储中读取200MB的内容,然后再传输200MB到Target Device,所以总共会造成400MB的网络流量。由于ProvisioningServices不能缓存网络存储的vDisk内容,服务器会在每次TargetDevice连接它的时候都会向网络存储去下载这200MB的数据,这就造成所有网络操作都会双倍数据处理。

在Windows 2008的SMB2.0对此已经有所改动,不过就Provisioning Services目前的版本来说都不会从CIFS Share中缓存vDisk的数据。

五、Target Device需要多少内存

Target Device需要分配多少内存的重要性和ProvisioningServices Server需要多少内存都是同样重要的,而且Target Device也适用于我们第一部分所讲的Windows内存分配机制的原理。

当Target Device开始发出读数据的请求,此时读的IOPS数据开始从PVS服务器通过网络下载到TargetDevice本地内存中。只要Target Device有足够的空闲RAM来缓存这些数据,那么文件就不会从网络中传输过来一次以后再次传输,一直到Target Device重启,或者是RAM紧缺。

下面的公式是一个计算的基线来帮助你计算一个Target Device需要多少内存。因为用户打开多少文件和应用程序没办法一一重现,我们只能用估算的方法:

Target Device Ram = 最大的Committed Bytes+ System Cache RAM

例如以下场景:

  • Windows7+ Office应用;
  • 典型用户的最大Committed Bytes显示是1.0GB
  • 1.0GB + 512GB= 1.5GB

在上一个例子中,假设512MB对System Cache来说是足够的,那么Target Device就应该分配不少于1.5GB的RAM来保证应用程序的运行以及有足够的RAM来缓存硬盘数据到SystemCache中。

六、总结

对于Provisioning Services来说:

  • 使用64位的Windows操作系统;
  • 按照第二章节的计算方法分配足够的内存,一般来说分配8G – 32G RAM;
  • 使用Block Level的存储存放vDisk,不要使用CIFS

对于Target Device来说

按照第五章的计算公式分配足够的RAM,一个典型的Windows桌面操作系统大概需要Committed Bytes + 256-512MB的System Cache。

备注:CommittedBytes In Use 是 Memory: Committed Bytes 与Memory: Commit Limit之间的比值。(Committedmemory指如果需要写入磁盘时已在分页文件中保留空间的处于使用中的物理内存。Commit Limit是由分页文件的大小而决定的。如果扩大了分页文件,该比例就会减小)。这个计数器只显示当前百分比;而不是一个平均值。

Committed Bytes 是指已被提交的(不是保留的)虚拟内存字节数。此数并不一定代表页面文件的使用量,因为它包含了物理内存中从未被换出过的私有提交页面。当然,如果一个进程完全是非驻留的,则它代表所使用的页面文件数量。

时间: 2024-10-14 03:22:32

PVS的内存和存储规划设计的相关文章

互联网级监控平台之内存存储的设计和优化

上两篇文章我们介绍了时序数据库Influxdb在互联网级监控系统下的应用: 互联网级监控系统必备-时序数据库之Influxdb技术 互联网级监控系统必备-时序数据库之Influxdb集群及踩过的坑 在我们监控平台V1.0和V2.0版本的演进过程中,设计上,我们在监控引擎端引入了内存存储的理念,即监控数据内存槽. 为什么需要一个内存存储来做监控数据的内存槽,它的应用场景是什么? 一. 从实际应用场景出发 首先,我们看一个实际的监控图表:配置中心服务的TPM 横轴是时间,纵轴是数值.每分钟一个点,当

巨杉Tech | SequoiaDB数据域及存储规划

1 背景近年来,企业的各项业务发展迅猛,客户数目不断增加,后台服务系统压力也越来越大,系统的各项硬件资源也变得非常紧张.因此,在技术风险可控的基础上,希望引入大数据技术,利用大数据技术优化现有IT系统实现升级改造,搭建一个统一存储和管理历史.近线数据的服务平台,同时能够对外支持高并发.低延时的数据查询服务,以提高IT系统的计算能力,降低IT系统的建设成本,优化IT系统的服务体系,为各个业务部门提供更加优质的IT服务.这类服务平台在整个IT系统架构中实质上是一个为核心业务系统减负的系统.Sequo

小试牛刀(一):家用级组网规划设计与配置实战

从家庭网络谈起 家庭网络应该是最简单的网络,但很多中小型企业/园区网网络架构与家庭网络类似,麻雀虽小五脏俱全.下面就为大家分享一下,我家网络的部署. 大多家庭网络可能只有一台无线路由器,集路由器.交换机.AP功能与一身.如果只在客厅部署一台无线路由器,客厅上网体验很好,但在卧室,使用体验就会大打折扣,比如下载明显感觉慢.比如我家200M电信光纤,如果在卧室连接客厅WIFI,下载速度只能达到100M,而连接卧室WIFI,下载可达200M.对于一般人可能无所谓,但对于IT人,何况我还是搞网络的,实在

求int型数据在内存中存储时1的个数

1.求int型数据在内存中存储时1的个数 输入一个int型数据,计算出该int型数据在内存中存储时1的个数. 我们非常easy想到例如以下方法: #include <iostream> using namespace std; int main() { int n,cnt=0; cin>>n; while(n) { if(n%2==1) cnt++; n=n/2; } cout<<cnt<<endl; return 0; } 在对代码进行測试时输入负数无法得

浮点数如何在内存中存储

首先,将10进制的小数0.1转换为二进制,方法如下: 0.1*2==0.2  取0.2的整数部分, 结果为0.0 0.2*2==0.4  取0.4的整数部分, 结果为0.00 0.4*2==0.8  取0.8的整数部分, 结果为0.000 0.8*2==1.6  取1.6的整数部分, 结果为0.0001 0.6*2==1.2  取1.6的整数部分, 结果为0.00011 0.2*2==0.4  取0.4的整数部分, 结果为0.000110 最后这一步开始循环,因此0.1的二进制为数为: 0.00

015-求int型数据在内存中存储时1的个数

/* 015-求int型数据在内存中存储时1的个数 题目描述 输入一个int型数据,计算出该int型数据在内存中存储时1的个数. 输入描述:  输入一个整数(int类型) 输出描述:  这个数转换成2进制后,输出1的个数 输入例子: 5 输出例子: 2 */ //c语言版 #include <stdio.h> int main(void) { int integer,i; int count = 0; scanf("%d",&integer); unsigned u

【C/C++学院】0819-/类的成员函数与const-mutable /构造与析构/拷贝构造deletedefault以及深浅拷贝/静态成员函数成员变量类在内存的存储默认参数/友元类以及友元函数

类的成员函数与const-mutable 成员函数 Fushu.h #pragma once #include <iostream> class fushu { public: int x; int y; public: fushu(); ~fushu(); void show(); inline void showall(int x, int y);//显式内联 void setxy(int x, int y);//编译器优化,默认隐式内联 void show(int x, int y);

IOS 区分缓存 内存 物理存储 逻辑存储

1. 存储器分为内部存储器(内存)和外部存储器(外存). ①内存 内存是电脑内部临时存放数据的地方,供CPU直接读取,存放在其中的数据要靠电来维持,一旦断电就会丢失.因此,在操作电脑时,应及时地将需要保存的信息进行保存. 内存的特点是:容量小,速度极快,临时存放数据. ②外存 外存包括软盘.硬盘和光盘,存放在其中的数据靠磁来维持,因此可永久保存数据. 外存的特点:容量很大,速度较慢,可永久保存数据. 2. 物理卷Physical Volume,称为PV:指物理上硬盘,一个硬盘就是一个PV逻辑卷组

数据库对内存的存储与读取

#include "mainwindow.h"#include <QApplication>#include <QtSql/QSqlDatabase>#include <QtDebug>#include <QtSql/qsqlquery.h>#include <QByteArray>#include <QTextCodec>#include <QSqlError>#define MAX_BUFFER_S