云计算和大数据时代网络技术揭秘(十五)大数据网络

大数据网络设计要点

  对大数据,Gartner的定义是:需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

维基百科的定义是:无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。

  大数据的4V特点:Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)。

  大数据的研究非常热门,也产生了很多理论和实践,本章不是探索大数据实现的技术原理,而是从一个典型的大数据模型Hadoop为例,重点

放在其对网络的要求和深远影响。

时间: 2024-07-30 13:42:37

云计算和大数据时代网络技术揭秘(十五)大数据网络的相关文章

云计算和大数据时代网络技术揭秘(十一)数据中心互联

数据中心互联——更广泛的二层网络 本章介绍跨数据中心的大二层网络互联技术,包括需求和业务模型,重点介绍传统VPLS方案和新兴的OTV方案. 图 VPLS的组网图 核心器件为PE,负责把CE接入VPLS网络 同时终结VPLS隧道,进入MPLS+IP核心网 图 OTV的组网图 通过OTV网关,在广域网上架设了跨数据中心的.具备控制平面的大二层网络 图 数据中心互联互通的几个层面 LISP+OTV是完美的组合 LISP在内部通信层面通过身份与位置信息分离,保证跨数据中心vlan内的通信机IP不变 OT

云计算和大数据时代网络技术揭秘(八)数据中心存储FCoE

数据中心存储演化——FCoE 数据中心三大基础:主机 网络 存储 在云计算推动下,存储基础架构在发生演变 传统存储结构DAS.SAN在发展中遇到了布线复杂.能耗增多的缺点(原生性),需要对架构做根本的改变. FCoE是业界无可争议的演化方向,下面重点介绍技术的由来和原理,并从本质上解释为何FCoE是公认的唯一演化方向. 图 FC vs 以太网 vs FCoE 演化路线 2x的演进速度让FC逐渐掉队,未来的存储网络将逐步过渡到以太网架构上 图 传统数据中心存储架构 vs FCoE改造后的存储架构

云计算和大数据时代网络技术揭秘(五)

可靠的网络通道 数据稳定可靠的传输是云计算业务的前提条件,不论是何种云计算服务,都是通过网络进行传递信息的,网络服务的稳定与否直接关系到云服务本身的质量. 本节主要内容: 1,QoS概念 2,传统QoS的不足及改进方案

2019.03.30 云计算和大数据时代网络技术揭秘

云计算  大数据   时代 来源<云计算和大数据时代网络技术揭秘> 第一章 云计算的兴起 云计算的本质是一种服务提供模型,通过这种模型可以随时,随地,按需地通过网络访问共享资源池的资源,这个资源池的内容包括计算资源,网络资源,存储资源等,这些资源你能够被动态的分配和调整,在不同用户之间灵活的划分.范式符合这些特征的IT服务都可以称为云计算服务 为了能将这个定义更方便的匹配到显示世界的IT架构中: IaaS 通过虚拟化技术奖服务器等计算平台同存储和网络资源打包,通过API接口的形式提供给用户.用

《大数据时代的历史机遇-产业变革与数据科学》读后感

这本书,帮助我初步完成了大数据探索之旅.大数据,并不是那么简单,她是一种思维方式,更是一种新的商业模式,是需要社会各界关注的大事件. 新的时代,是信息通信高度发达的时代,是信息无孔不入的时代.在具备自身核心竞争力的同时,对外分享.合作是企业生存和发展的唯一途径.经过多年互联网战国时代的厮杀,市场中逐步确立了"终端+平台+应用"的商业模式,谁能够控制终端,谁就掌握的用户入口,谁就抢得了先机.谁能够为用户提供个性化服务,谁就能够拥有客户,在长尾中赚足利润.而平台作为终端和应用的中枢,可以整

微软云计算介绍与实践(实践之二十五)

3.4.创建Runbook自动化活动模板 下面,小张需要在System Center 2012 Service Manager中提供自动化活动模板. 1.在System Center 2012 Service Manager控制台中,选中库工作区,展开导航树中选择运行手册 2.从已经创建的私有云,运行手册窗格中选择Runbook 3.任务窗格中的内容将会更新,现在选择创建Runbook自动化活动模板 4.在创建模板页面上填写以下数据.完成后,选择确定以打开模板编辑器 5.现在你可以改变Runbo

[读书笔记]云计算时代的网络,读《腾云,云计算和大数据时代网络技术揭秘》

这本书一共分四个部分.第一部分介绍了云计算以及云计算对网络的要求. 第二部分从数据中心外部的视角介绍了云计算相关网络技术,主要从安全性.可靠性.灵活性等角度出发介绍了准入.网络加密(VPN)两种安全技术,流量标签的QoS网络质量保证技术,DNS重定向.健康路由注入以及LISP位置身份分离等网络灵活性技术(保证资源可以跨中心迁移后仍然可以被访问). 第三部分从数据中心内部的视角介绍了云计算相关网络技术,主要包括TRILL.SPB等适应虚拟化的数据中心网络扩展技术.FCoE以太网传输存储流量.支持虚

云计算和大数据时代网络技术揭秘(七)

虚拟化数据中心的扩张 从本节开始,对数据中心内部的网络架构如何应对云计算业务的浪潮进行关键技术讲解. 主要内容 1,传统二层网络的结构和缺陷 2,STP协议带来的问题 3,大二层网络需要的改变 4,三足鼎立——Cisco.IETF.IEEE 5,应对方案:二层网络增加控制平面

云计算和大数据时代网络技术揭秘(四)

安全的网络通道——网络加密 上一节介绍了云计算业务中常用的准入技术.标准,除了准入之外,数据安全加密也是重要的一块,当用户通过网络访问云服务时,对链路加密是保证用户数据不被非法窃取的必要手段. 本节主要内容包括: 1,VPN介绍 2,常见的VPN方式,各自的优缺点