作为互联网流量入口,CDN日志大数据你该怎么玩?

CDN是非常重要的互联网基础设施,用户可以通过CDN,快速的访问网络中各种图片,视频等资源。在访问过程中,CDN会产生大量的日志数据,而随着如今越来越复杂的网络环境变化,和业务的迅速增长,日志数据变得更大量、更多维度,同时其稳定性和报警监控的要求越来越高。这些数据通常都与用户的下一步业务决策息息相关。

通过对CDN访问日志的分析,可以挖掘出大量有用的信息作为监控、报警、渠道分析、运营分析的数据来源。而对于技术或者运维人员来说,CDN的线上问题其实是不好排查的,因为节点遍布全球各地,我们没办获知各个节点的状态。

当前CDN厂商通常会提供离线日志的功能,会在几十分钟甚至几个小时之后提供访问日志给客户,存在两个问题,第一是延迟太长,无法满足大型活动等场景下的监控、报警、运营分析的需求;第二是这些日志经常存储在服务提供商处,不容易进行处理和消费;第三是日志也会有不定期的删除,例如常见的服务商一般提供一个月的日志,之前的记录就不会保存了。

那么针对于需要对CDN的日志进行实时分析、处理及归档等操作的用户来说,就会出现对于线上问题排查的不及时、CDN服务性能无法实时把握,遇到问题的灾备方案对客户端有感等问题。

综上所述,更实时地、详细地关注和分析日志的需求逐渐显露,但是普通用户对CDN日志进行实时、离线分析又并不容易,需要付出搭建、运维和管理成本,为了完成需求,有时还需要编写不少代码,但最终并不一定能得到很好的效果。整个CDN实时日志涉及的环节多,对服务质量也有严苛的要求,技术挑战比较大。

那么面对以上需求,阿里云CDN可以如何应对?为运维、技术人员提供更便捷、更智能、更实时有效地解决方案呢?

近期,阿里云CDN上线了实时日志服务,将日志服务(SLS)的能力打通,将CDN采集的实时日志,在小于60秒的时间内投递至日志服务,进行实时、交互式分析和报表呈现,提高数据的决策能力,助力用户将业务推向一个新的高度。

为了让用户们更全面地了解CDN实时日志服务,并对业务赋能,在12月26日下午三点,云栖社区将举办CDN实时日志服务的在线直播发布会,首次进行全面、深度的产品解读。

发布会议程详情
15:00-15:25:《CDN实时日志技术解读》
CDN实时日志可以解决用户无数据、多种分析以及可视化等等需求,这个产品背后的技术挑战究竟有多大?它的系统架构是怎样演进的?阿里云在进行全球化服务的过程中,日志系统支持了监控、调度、计费及数据分析等多业务,那么全球海量日志采集的难点是什么?技术亮点是什么?它的性能、成本又是如何衡量?

分享嘉宾:阿里云高级技术专家 姜晓东

15:25-15:50:《阿里云CDN产品与实时日志业务详解》
阿里云CDN从2014年商业化至今,已经拥有1500+全球节点和120T带宽储备,今天CDN实时日志可以从全球多个区域、数万节点实时采集日志,通常延时不超过60秒,确保日志的实时价值。那么CDN实时日志源起何处?它解决了用户怎样的问题?拥有怎么样的特性?适合应用在什么场景中?有哪些客户已经在使用并且他们的使用体验如何?以及如何在控制台中开通及操作CDN实时日志?本次分享将会详细介绍。

分享嘉宾:阿里云CDN高级产品经理 容蓓

15:50-16:00:《优惠活动与提问互动》

原文地址:http://blog.51cto.com/14031893/2333942

时间: 2024-08-08 08:42:36

作为互联网流量入口,CDN日志大数据你该怎么玩?的相关文章

(上)挖掘传统行业日志大数据的无限价值

?? 8 月 27 日晚上八点,七牛云高级解决方案架构师程雪松在 IT 大咖说进行了题为<挖掘传统行业日志大数据的无限价值>的直播,对传统行业运维常见困境和统一日志管理的必要性进行了深入解析,并通过 Pandora 的一些真实用户案例和大家详细阐述了如何挖掘传统行业日志大数据的无限价值.? 本文是对直播内容的整理,共分为上下两篇,上篇主要介绍传统行业运维常见困境和统一日志管理的必要性,以及日志分析几个典型场景. ? 什么是运维 ? 首先我们谈一谈什么是运维.?????很多人对运维有自己的理解,

LogSec日志大数据审计平台,企业信息安全管理人员不再“躺枪”

作为一名企业信息安全管理人员,你有没有被各种安全设备.服务器.网络设备的安全日志搞得焦头烂额?无论是要从各种日志中进行问题分析和定位,还是从日志中提取有用的信息,是不是都像大海捞针一样忙得筋疲力尽收获却总是寥寥? 而且,而且,你们单位里只有你一个安全管理员有木有? 单位这么多安全日志.设备日志,每天就好几万条怎么分析? 面对监管单位的安全检查,重点要求设备安全日志检查,怎么办? 那么在日常工作中,信息安全管理员究竟会面临哪些安全日志审计的问题呢? 日志分散在各地 随着信息化技术的逐渐深入,企业往

支付行业,如何通过日志大数据实现深度分析及风控

本文主要讲述针对支付行业,日志易产品如何通过日志大数据实现业务深度分析及风险控制.伴随新的支付方式出现,近年来移动支付蓬勃发展,如何分析.利用海量交易数据,已成为当前支付企业面对的巨大难题.日志作为数据的载体,蕴含着丰富的信息,传统的日志分析方式低效而固化,无法应对数据体量大.格式不统一.增长速度快的现状,在交易出现异常及失败时,更难以满足实时处理.快速响应的需求.本文讲述某支付公司采用日志易后,通过日志大数据实现业务深度分析及风险控制的实践经验. 图片来自:前瞻网 本次分享结合企业自身对支付行

读《大数据的互联网思维》有感

前言: 9月末,在图书馆借了一本<大数据的互联网思维>,20天的课外时间刚刚看完书的一半章节,做了一部分思维导图,虽然不打算再看了,但心中不免有一些想法及思考要一吐为快. 在读书之前,有几个疑问,如下: 大数据是什么? 互联网思维是什么? 大数据为什么要用到互联网思维? 大数据如何使用互联网思维? 大数据+互联网思维能带来什么? 当看完书中的一些章节后,疑问释然而解. 正文: 大数据是什么? 借用百度百科来说,大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉.管理和处理

大数据赋予互联网金融充沛活力

当前互联网金融如火如荼,除了为数众多的互联网公司推出的各种“宝宝”类产品外,p2p.众筹等在街头巷议中也总是被人津津乐道.当然,在互联网金融一片风光的形势下,各大不甘寂寞的金融公司也是纷纷试水,由其推出的各种创新产品和服务更是层出不穷. 一位专家表示,从去年开始,陆续有基金公司和互联网企业就大数据方面的合作进行密谈,“这是互联网金融朝着更深层次进发的必然结果,毕竟,互联网除了用户群以外,更为核心的就是用户群背后的‘大数据’.”这一切告诉我们,互联网金融之所以能发展的这么好,其背后的创新动力之一正

虚拟化、大数据、云计算、事、移动互联网和传统之间的关系网络

<互联网进化>一书中提出"功能和结构将于人类大脑高度相似,也将具备互联网虚拟感觉,虚拟运动.虚拟中枢.虚拟记忆神经系统" ,并绘制了一幅互联网虚拟大脑结构图. 依据这一观点,眼下互联网最流行的概念-------------大数据.云计算.物联网.移动互联网.传统互联网之间的关系例如以下图.依据图中关系,网络将物联网.传统互联网和移动互联网的数据连接.汇聚在一起形成"大数据".这些数据经过人类刻意的.针对特意用途的分析产生价值用于决策分析等,计算和分析的平

基于大数据技术的手机用户画像与征信研究

内容提要:手机用户画像是电信运营商实现“数据驱动业务与运营”的重要举措.首先,介绍了手机用户画像过程中对个人隐私保护的方法,然后分析手机用户画像的数据来源与大数据实现技术,最后,通过数据样本实例分析手机用户画像在个人征信中的应用. 引言 随着计算机网络技术的不断发展,“数据即资源”的大数据时代已经来临.用户画像是电信运营商为了避免管道化风险,实现“数据驱动业务与运营”的重要举措.用户画像与应用大数据技术对客户分类密切相关,是单个客户的众多属性标签的累积:另一方面,在运营商涉足的消费金融领域,对手

年度钜献,108个大数据文档PDF开放下载

1.大数据的开放式创新——吴甘沙 相关阅读:[PPT]吴甘沙:让不同领域的数据真正流动.融合起来,才能释放大数据的价值 下载:大数据的开放式创新——吴甘沙.pdf 2.微软严治庆——让大数据为每个人服务 导读:数据文化带来1.6万亿美元数据红利,IDC调查显示,采用完整的大数据解决方案,将在未来4年内,给全球企业带来1.6万亿. 下载:微软严治庆—让大数据为每个人服务.pdf 3.大规模主题模型建模及其在腾讯业务中的应用 相关阅读:广点通背后的大数据技术秘密——大规模主题模型建模及其在腾讯业务中

chinacloud大数据新闻

2015年大数据发展八大趋势   (0 篇回复) “数据很丰满,信息很骨感”:Sight Machine想用大数据的方法,打碎两者间的屏障   (0 篇回复) 百度携大数据"圈地"证券业 "BAT"开启互联网金融新战场   (0 篇回复) 码农的春天到了?   (0 篇回复) 浪潮大数据一体机出招 装备科研“最强大脑”   (0 篇回复) 方物软件承担国家“核高基”重大专项研发   (2 篇回复) 2013互联网大会透露的热点与新趋势   (1 篇回复) 大数据从幕