在“云”上做科研,是种什么体验?

如今,做研究的人需要什么?
  试管?文献?电脑?如果再来一朵 “云”会怎样?
  别误会,并不是让科研人员上天做科研,而是——给他们一朵“中国科技云”。
  <strong>大数据时代呼唤科技云</strong>
  以“数据密集型”和“大数据”驱动的科学研究范式带来了科研方法论的变革,正成为科学发现的新引擎。
  数据与计算平台已经成为当代科学研究重要的信息基础设施,并且将融汇贯穿于整个科学研究活动的全过程。<strong>近年来,几乎在任何一项的重大科学发现和重大科技计划中,数据与计算平台都在扮演着无可替代的角色</strong> 
  <strong>2013 年诺贝尔化学奖</strong>
  2013 年诺贝尔化学奖授予了三位美国科学家,获奖理由是"为复杂化学系统创立了多尺度模型",对于化学家而言,多尺度计算化学模型的建立使计算机变得像试管一样重要。从应用的角度而言,大规模的计算资源和大量的"黑箱"计算程序的出现使得越来越多的研究可以应用理论和计算的方法研究自然科学问题。
  <strong>2017 年诺贝尔物理学奖</strong>
  2017 年诺贝尔物理学奖授予了“首次探测到引力波”的三位美国科学家,在引力波的这一发现过程中,激光干涉仪前四个月的观测数据量达 500TB,总共消耗了 17 亿 CPU 核小时的计算资源对数据进行处理。
  <strong>2019 年第一张黑洞照片</strong>
  2019 年 4 月,200 多名科研人员通过 8 个分布于全球的事件视界望远镜观测点“捕获”了黑洞的视觉证据。此项研究历时 10 余年,加州理工学院使用 Blue Waters 超级计算机超过 1000 个 CPU 核对 3.5PB 的原始数据进行近 900 个黑洞合并的模拟,总共花费了 2 万小时的计算时间。
  <strong>然而,现在许多研究人员所面临的最大问题,不是缺少数据,而是面对太多的数据无从下手。</strong>
  人类社会从宏观到微观、从自然到社会的观察、计算、传播等活动,正在加速产生出海量且多样的数据,数据呈现爆炸性增长:比如各种网络社交信息数据,通过望远镜获得的天文学图片数据、各种各样的基因序列数据、通过大型对撞机、光源等大型物理装置产生的实验数据等。这些数据类型复杂、数据量大、产生速度快、蕴含较大价值,同时已经超出了普通人的理解和认知能力。
  要从这些大数据中得到科学发现,需要适应大数据管理与处理的理论、技术和方法的产生,涉及对数据的整合、海量数据的处理、算法的优化、研究结论呈现等多个方面。
  在这种大的背景下,数据资源成为了世界各国争夺的新战略资源,计算则成为了衡量一个国家综合国力和国际竞争力的重要标志。数据与计算在科技领域的整体能力和应用,将集中体现一个国家的科技综合实力。<strong>世界各国正加快建设以数据与计算为主要特征的信息化基础设施,这必将深刻影响世界科技格局。</strong>
  幸运的是,我们有了中国科技云。
  <strong>科学家自己的云</strong>
  阿里云、腾讯云、百度云……在云计算厂商遍地开花的时代, 无论是阿里云还是百度云,都主要服务于商业活动。作为一项专业性极强的研究活动,科研工作也需要一朵自己的“云”。
  中国科技云是<strong>网络、数据与计算融合的新型国家信息化基础设施,为全国科技工作者提供科技资源及服务的发现、访问、使用、交易与交付一体化云服务,全面支撑多学科交叉的开放科学研究。</strong>
  通俗地讲,中国科技云就是把科学家要在各个网站上寻找的数据和计算工具整合在一个网站上,分门别类地提供给科学家,供科学家按需使用;同时,科学家也可以把自己的服务上传到中国科技云,供他人使用。<strong>简而言之,这是“科学家自己的云”。</strong>
  我们来看看这朵科技云有什么独到之处?
  <strong>“专有”:</strong>中国科技云以科研活动为中心,以科研人员的使用习惯为根本导向,在科学数据的存储、传输、计算、分析、应用等各环节提供高效一体化的云计算解决方案,不论是科研大数据快速共享发布、科研专用的云计算/超算服务还是可视化云服务,都为科学家基于大数据与大计算与科学研究提供了有力的支撑。可以说,这是为科学家量身打造的专有科技云。
  <strong>“开放”:</strong>这里是海量资源汇聚的一站式服务平台。中国科技云持续开放,汇聚国内外优秀信息化基础设施和服务,目前已实现 350P 的计算资源,150P 的存储资源,以及 PB 级的科学数据资源的汇聚与服务。集成综合平台 52 个,各类科研软件 409 款,可提供网络服务、计算服务、存储服务、数据信息等 9 大类典型的云服务。门户系统实现了资源服务的注册管理与动态发布,为用户提供在线申请、即开即用、按需扩展的柔性云服务。
  <strong>“全球合作”:</strong>我国科学家基于中国科技云前期工作基础,开创性提出建立全球开放科技云的倡议,得到了多区域的科学云平台的广泛支持。目前,中国科技云正在积极推进与欧洲网络基础设施、欧洲科研网等代表着欧开放科学云核心基础设施的机构,及美国全球科研交换中心的深化合作,启动多边先导计划,共同开展技术、运行及政策研究,积极推进全球开放科学云的建设。中国科技云正在逐步成为全球科技合作的重要纽带和媒介。
  <strong>谁在用这朵云?</strong>
  中国科技云用户群体可覆盖前沿与交通、能源、海洋、生命与健康等多个学科领域,科技工作者、服务提供者、资源提供者都可以在这朵云上找到自己的位置。
  <strong>中国科技云已经服务于“地球大数据科学工程”“空间科学”等先导专项,以及“中国天眼”FAST 望远镜、高海拔宇宙线观测站(LHAASO)等重大科技基础设施</strong>,支持了一系列超级计算、科学技术和人工智能和跨洲际的科学数据传输工作,正逐步成为支撑科技创新发展的战略性设施。
  正如中国科学院院士于贵瑞介绍中国科技云在生态系统观测中的应用时所说:“以前我们每做一个项目,都自己设计一个数据库,项目结题后,这个数据库也就废弃了,资源浪费比较严重;现在把数据库嫁接在中国科技云上,就能够不断完善,逐渐形成一个庞大的系统。”他期待,未来能够在中国科技云上,构建面向生态科学研究的“生态科学云”,实现生态科学研究各要素的有机融合,充分利用大数据、智能计算和可视化分析等新手段,加速科学发现的进程。
  <strong>怎么加入(使用)科技云?</strong>
  目前, “中国科技云 2020 应用推进计划”也启动了,该计划将通过公开征集与择优遴选等方式,为有重大产出的科研项目免费提供计算资源等,提供的资源包括<strong>840 万 CPU 计算机时、160 万 GPU 计算机时、1000 台云服务器和 10PB 的云备份,总价值 2800 万元。</strong>
  首批入选的科研项目包括 FAST 仙女座大型漩涡星系中的脉冲星搜寻、人工智能深度挖掘宏基因组功能信息、高精度环境大气感知与智慧云预测系统、聚变等离子体物理与工程数据库、国家冰川冻土沙漠科学数据中心、国家基础学科公共科学数据中心等。
  <strong>未来,“六点”值得期待</strong>
  为了给科学家提供更好的服务,中国科技云也在不断地更新升级中,2019 年 12 月 26 日,中国科技云迎来了上线后的第一次升级,中国科技云 2.0 正式发布。中国科技云项目负责人黎建辉研究员说:“未来一年里,我们会面向科研需求,争取至少每个月提供一款,为科研、科学家定制的新服务。”
  未来,中国科技云将通过技术创新和软硬件设备持续升级,实现<strong>让网络再快一点、让数据再多一点、计算力再强一点、存储再大一点、应用面再广一点,能够为更多领域的科研人员提供再好一点的服务,</strong>真正成为支撑科技创新、驱动科学发展的加速器和倍增器。
  撰文:张文韬
  审核:中国科学院计算机网络信息中心

原文地址:https://blog.51cto.com/13383471/2463897

时间: 2024-07-29 11:58:03

在“云”上做科研,是种什么体验?的相关文章

九成用户都在电视上玩游戏是种什么体验?

选择以游戏作为智能盒子乃至智能电视的突破点,国内厂商并非仅仅为了那看得见够不着的9成用户大蓝海.而是不搞游戏,智能盒子就是个卖硬件的. 本文为张书乐供IT时代网.IT时代周刊专稿,作者微信号:zsl13973399819 7月9日,红网记者做了一个<电视游戏,你玩过吗?>网络调查,截至7月9日16:00,共收到215个投票,仅1成网友表示偶尔会通过电视来玩游戏,PC和移动设备仍然是主流的游戏平台. 尽管样本量很小,但对于这个结果,笔者并不感到奇怪.撇开专业的视频游戏机不算,至少在安卓系统下的智

基于开源打造智能云上自动运维

自动化能自动化的一切 然后介绍了使用Terraform和Packer开源工具完成云上自动运维的具体实现过程 云上自动化资源架构和变更实践 https://yq.aliyun.com/articles/218891?spm=5176.100239.blogcont159008.36.Vzs09S 如何用开源工具进行Multi-Cloud的自动化资源架构和变更? DevOps和基础设施自动化 据数据统计,在2015年DevOps的被采纳率是66%,而到了2016年就达到了74%,在这短短的一年间增加

在Linux上使用的10种云备份方案

在Linux上使用的10种云备份方案 导读 不久前,为用户提供一种备份远程机器上数据的简易方法还很稀奇.现在,我们已觉得这理所当然.Dropbox及其他公司简化了这项任务.苹果.谷歌和微软都提供各自的数据备份方法. 在Linux上,情况有点不一样.发行版并不提供各自的云服务来管理你的数据(不过Ubuntu过去拥有Ubuntu One).一些主流发行版并不提供尚可的Linux客户软件. 但是你并非不走运.许多流行的服务确实可以在Linux下使用.你还有办法可以部署自己的解决方案,对数据获得控制权.

流行开源软件云上体验周 ——一种正确的云上开源软件体验姿势!

当你想尝试一款新的开源软件时,当你一直关注的开源项目发行了最新的版本时,当你迫不及待想要成为新发布的开源项目的捉虫师,你会以什么样的方式去获得并安装最新的开源软件环境呢?是一直开着电脑下载几个G的安装包?等着快递小哥把最新发行版光盘送到你家?再花上几个小时配置环境之后,终于大功告成? 我们用怎样的姿势来体验开源软件才能效率最高,达到成本的最优化呢? 开放黑客松开发团队了解到开源爱好者的这些需求和痛点,引入了一种正确的云上开源软件体验姿势,只需要3分钟三步: 1.    打开浏览器,访问开放黑客松

SegmentFault 社区访谈 | 依云: 一只想依偎在云上的野百合

社区访谈的上期说到上帝有明是如何通过他的个人魅力撩得妹纸归,回忆传送门,不过逗得了妹纸笑,引得了汉纸拜(唔,崇拜的拜,不是拜天地的拜)这种境界也不是一般人所能达到的,逗得了妹纸笑,清蒸看来需要一点天赋加成,引得了汉纸拜,这点嘛,只要努力,磨练下技术还是可以实现的,只要技术过硬成得了大佬,忽略天赋加成,你见过哪个大佬单身?摊手,所以,技术是第一生产力,本期的访谈嘉宾就是一个技术非常厉害的社区小伙伴 -- 依云酱,为什么要加一个「酱」字呢?因为真的超级可爱呀~ 有请本期嘉宾 -- 依云 ?? 必经之

从微软到灵雀云:一个理工男的“云上云”之路

2015年10月20日 作者: 转载 目录: 媒体报道 评论: 没有评论 导读:这家刚刚完成1000万美元A轮融资的Docker云计算平台公司,陈设与作派处处透露着理工男的实用主义.‌‌ 灵雀云办公室的会客区里,那张银灰色宜家沙发,是从去年公司初创的公寓里搬来的.CEO左玥迎面走来,牛仔裤,运动鞋,胡子拉碴. “这些办公椅是上一家公司留下来的,五十块一把,我们给买了”,左玥对i黑马记者说.这家刚刚完成1000万美元A轮融资的Docker云计算平台公司,陈设与作派处处透露着理工男的实用主义. 灵雀

在云上搭建大规模实时数据流处理系统

在大数据时代,数据规模变得越来越大.由于数据的增长速度和非结构化的特性,常用的软硬件工具已无法在用户可容忍的时间内对数据进行采集.管理 和处理.本文主要介绍如何在阿里云上使用Kafka和Storm搭建大规模消息分发和实时数据流处理系统,以及这个过程中主要遭遇的一些挑战.实践主要立 足建立一套汽车状态实时监控系统,可以在阿里云上立即进行部署. 一.实时大数据处理利器——Storm和Kafka 大数据时代,随着可获取数据的渠道增多,比如常见的电子商务.网络.传感器的数据流.太空数据等,数据规模也变得

中小企业及创业团队云上监控方法

创业团队往往人少,强调效率,强调速度,所以一般会选择使用公有云来部署业务,基于云的监控是一个难点,本文讨论创业团队云上监控的方法. 要分享这个题目,是因为前几天我有个朋友,刚好就在一个创业团队,他们的业务初步上线,效果比较好,但是有几次业务出现问题,都是收到用户反馈,然后才去排查,从发现到处理完成,时间已经很长了.经过几次折腾,这时候才意识到监控的重要性. 为了快速解决问题,他们使用了商业监控方案,效果不错,用了一周就完成了系统及业务层面比较全面的监控,能做到业务有问题及时短信.邮件报警,然后快

云计算之路-阿里云上:“黑色1秒”问题与2009年Xen一个补丁的故事

在之前对"黑色1秒"问题的分析博文中,我们将最大嫌疑对象锁定在了Xen,在这篇博文我们将从Xen的角度进行分析.也许有人会问,为什么不知道天多高地多厚地去研究不属于自己范围的问题?只因我们对一个问题的强烈好奇心--究竟是不是我们用Windows的错? 2009年3月20日,来自Intel的Yu Ke通过Xen-dev Mailing List给来自Citrix的Keir Fraser(负责的Xen开发者之一)发了一封邮件,提交了Xen的一个patch--cpuidle: suspend