分布式技术追踪 2017年第三期

p.p1 { margin: 0.0px 0.0px 0.0px 0.0px; font: 31.2px "Helvetica Neue"; color: #111111 }
p.p2 { margin: 0.0px 0.0px 0.0px 0.0px; font: 17.3px "Helvetica Neue"; color: #222222 }
p.p3 { margin: 0.0px 0.0px 0.0px 0.0px; font: 17.3px "Helvetica Neue"; color: #0066cc }
p.p4 { margin: 0.0px 0.0px 0.0px 0.0px; font: 17.3px "Helvetica Neue"; color: #222222; min-height: 21.0px }
span.s1 { }
span.s2 { text-decoration: underline }

分布式系统实践

1. 基于Spark GraphX实现微博二度关系推荐

http://dwz.cn/51OflC

摘要: 基于图的关系挖掘和计算是互联网算法中非常常见的一种计算模型. 比如经典的pagerank, 微博微信的好友推荐等等. 本文从架构和算法两个方面, 非常详细的介绍了微博基于GraphX实现的二度关系的计算过程.

2. 基于 Kafka 和 ElasticSearch,LinkedIn是如何构建实时日志分析系统的?

http://dwz.cn/52j43b

摘要: 及时有效的搜索日志可以说是服务治理工作中非常重要的一个环节. 这篇文章介绍了linkedin是如何使用ELK逐步构建起来完善的日志检索的, 特别宝贵的是, 文章介绍了很多使用ELK过程中的坑, 值得大家学习和借鉴. 另外去年年底在velocity大会上介绍, linkedin服务器数量是5w台, 这里提到使用了1000+服务器部署ELK, 可见linkedin投入之大以及问题的重要性.

服务化和虚拟化技术

1. 关于两种CI/CD策略以及Git分支模型的思考

http://dwz.cn/52jZgN

摘要: git伟大之初就在于简单的分支管理, 所以基于git的分支模型引出了几种常见的git-flow. 这篇文章对两种最为常见的git flow进行了对比, 各有利弊, 帮助大家选择适合自己团队的git flow.

2. 容器监控的工具和流程

http://dwz.cn/54vv4y

摘要: 随着容器的发展, 基于容器的日志采集工具也是百花齐放. 这篇文章分析了主流基于容器的日志收集系统, 其中cAdvisor和Prometheus是比较流行的.

高可用技术

1. GSLB Is Hard - Part I

http://dwz.cn/51NRqM

摘要: GSLB就是Global Server Load Balancing. GSLB是互联网公司必不可少的基础中间件, 但是要想实现功能完备的GSLB可不是容易的事情, 这篇文章来自Google SRE之手, 深入的阐述了GSLB的技术细节.

2. 全链路压测军演系统(ForceBot)

http://dwz.cn/53mdhK

摘要: 任何一个大规模分布式系统, 如果想准确的评估当前系统能够承载的最大容量, 只有压测这样一种有效的手段. 然而压测一方面不能影响正常的用户流量, 另一方面还需要模拟大量用户的行为, 技术复杂度就比较高了. 这篇文章介绍了京东全链路压测系统的架构, 给我们实现压测系统提供了参考.

运维和DevOps技术

1. 从 MONGODB “赎金事件” 看安全问题

http://dwz.cn/51NBuN

摘要: 周末被mongodb事件刷屏了, 耗子哥也第一时间做了实验进行验证, 果然轻松的登录了几台mongodb上了. 使用mongodb的同学们一定要注意设置口令, 并且不要把这样的后端服务暴露在公网上.

2. 基于时间序列数据的监控实践

http://dwz.cn/51O155

摘要: 监控数据呈现时间序列的特性, 所以出现了针对时间序列的数据库TSDB. 这篇文章借鉴了borgmon的设计思想, 基于prometheus和grafana实现了数人云的监控系统. prometheus和grafana都是我非常喜欢的开源软件, 可以说是构建监控系统的不二选择.

丰富多彩的计算机世界

1. 深度学习、信息论与统计学

http://dwz.cn/52Q82d

摘要: 当前人工智能的核心技术就是深度学习了, 那么到底什么是深度学习? 本文从信息论和统计学的角度, 高度的科普了支撑深度学习的理论基础, 让我们这些小白也可以了解深度学习的基本原理.

2. 架构师的必备素质和成长途径

http://dwz.cn/52WowV

摘要: 架构师可能是很多同学未来一段时间的职业目标, 但是成为优秀的架构师是很困难的. 这篇文章的作者拥有非常丰富的海外架构师经验, 给我们介绍了自己架构师的成长之路, 值得大家学习和思考.

时间: 2024-11-06 11:13:59

分布式技术追踪 2017年第三期的相关文章

分布式技术追踪 2017年第六期

p.p1 { margin: 0.0px 0.0px 0.0px 0.0px; font: 31.2px "Helvetica Neue"; color: #111111 } p.p2 { margin: 0.0px 0.0px 0.0px 0.0px; font: 17.3px "Helvetica Neue"; color: #222222 } p.p3 { margin: 0.0px 0.0px 0.0px 0.0px; font: 17.3px "

分布式技术追踪 2017年第四十九期

分布式系统实践 1. 为什么 SQL 正在击败 NoSQL,这对未来的数据意味着什么 https://mp.weixin.qq.com/s/vU8yu_M4IIwDHhpVUL6e0w 摘要: SQL和NoSQL真是一对冤家, 分久别合, 合久必分. 2. OceanBase1.0 分布式技术架构 https://mp.weixin.qq.com/s/9nEW5aLVLFvpot95OkPBDw 摘要: 我们大概都知道阿里的OceanBase很牛, 但是介绍OceanBase的文章非常少, 这篇

分布式技术追踪 2017年第一期

分布式系统实践 1. 大话分布式系统理论基础 http://dwz.cn/4UWN7i 摘要: 一致性是分布式系统的理论基础, 这篇文章从2PC, 3PC开始, 概述了支撑分布式系统一致性的各个理论, 便于大家再进行更深入和细致的学习. 2. 美团云混合存储系统 http://dwz.cn/4VpOzJ 摘要: (编者的话)美团云的李慧霸分享的混合存储系统议题非常独特,美团云的存储系统是自己开发的,没有使用开源系统,整个建设思路和方法值得借鉴,因此特别分享下李慧霸的PPT. 服务化和虚拟化技术

分布式技术追踪 2017年第三十三期

分布式系统实践 1. 生活中的Paxos,原来你我都在使用--对Paxos生活化的解读 http://hedengcheng.com/?p=970 摘要: 很通俗的介绍Paxos的文章, 推荐大家看看. 2. 一文读懂Apache Kudu http://dwz.cn/6o5asK 摘要: 关于Kudu的文章之前也分享过, 这篇文章帮助大家回顾Kudu的设计思路和理念. 微服务技术 1. 为什么Google上十亿行代码都放在同一个仓库里? http://dwz.cn/6oy3SK 摘要: 相对于

分布式技术追踪 2017年第十三期

分布式系统实践 1. 阿里HBase超详实践总结 http://dwz.cn/5D5Q21 摘要: 这篇文章详细解释了阿里HBase在跨机房复制, 高可用等方面的工作, 特别是多集群的数据复制方案, 非常值得参考和学习. 2. 龙(Dragon) - facebook 分布式 图索引查询引擎 http://dwz.cn/5FhNVM 摘要: Facebook的Dragon是一个用嵌入式RocksDB作为存储引擎的分布式图数据库索引服务, Dragon运用了很多优化技术将id1和id2的关系和对象

分布式技术追踪 2017年第二十三期

分布式系统实践 1. 比较Apache Hadoop 生态系统中不同的文件格式和存储引擎的性能 http://dwz.cn/63s0D7 摘要: 这篇文章提出了在Apache Hadoop 生态系统中对比一些当前流行的数据格式和可用的存储引擎的性能:Apache Avro, Apache Parquet, Apache HBase 和 Apache Kudu 空间效率, 提取性能, 分析扫描以及随机数据查找等领域.这有助于理解它们中的每一个如何(何时)改善你的大数据工作负载的处理能力. 2. 谈

分布式技术追踪 2017年第五期

p.p1 { margin: 0.0px 0.0px 0.0px 0.0px; font: 17.3px "Helvetica Neue"; color: #666666 } p.p2 { margin: 0.0px 0.0px 0.0px 0.0px; font: 31.2px "Helvetica Neue"; color: #111111 } p.p3 { margin: 0.0px 0.0px 0.0px 0.0px; font: 17.3px "

分布式技术追踪 2017年第三十七期

分布式系统实践 1. 微信开源PhxQueue:高可用.高可靠.高性能的分布式队列 https://mp.weixin.qq.com/s/Hr4TUg8o1AQkowQpSDIhYA 摘要: PhxQueue 是微信开源的一款基于 Paxos 协议实现的高可用.高吞吐和高可靠的分布式队列,保证At-Least-Once Delivery,在微信内部广泛支持微信支付.公众平台等多个重要业务. 2. 链家大数据多维分析引擎实践 https://mp.weixin.qq.com/s/nal1vKBcs

分布式技术追踪 2017年第四十四期

分布式系统实践 1. 分布式键值存储 Dynamo 的实现原理 https://draveness.me/dynamo 摘要: Dynamo是一篇比较老的论文了, 如果大家之前没有读过论文, 不妨读读这篇文章, 可以对Dynamo的核心技术有一个整体的了解. 2. 通俗说Spark https://mp.weixin.qq.com/s/bomylsW7XkghBaa3q01DkA 摘要: 这一篇文章通俗解析一下当前最火的大数据框架Spark. 微服务技术 1. 基于 Kubernetes 的 A