导语
“大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。
本期会给大家奉献上精彩的:Hadoop、实时计算平台、监控、MongoDB、Linux、kylin、Spring Cloud、Cassandra、。全是干货,希望大家喜欢!!!
1Hadoop
业界第一个把Hadoop从2.7升级到3.2的实践,注意是不停服升级https://mp.weixin.qq.com/s/XxGhkSAAUsg4D39tLxbhnQ
2MES
MES 是马蜂窝统一实时计算平台,为各条业务线提供稳定、高效的实时数据计算和查询服务。在整体设计方面,MES 借鉴了 Lambda 架构的思想。https://mp.weixin.qq.com/s/IuzHuB3hQdxZsy0W__Rwvw
3监控
随着互联网金融业务的快速发展,银行业务互联网化,期望突破传统的存贷业务找到新的利润增长点。为此,银行业新建、重构了大量互联网类的业务系统,给系统、网络和应用各条线的运维带来了巨大压力。https://mp.weixin.qq.com/s/fYxYnnOdRy25gVgaDq3IWA
4Linux
名片大小的系统
https://mp.weixin.qq.com/s/yw9UugZ5SVFeqAPrT-4ruA
5HDFS
作为目前字节跳动内部存储量及集群规模最大的分布式存储系统,HDFS 一直伴随着字节跳动关键业务的飞速扩张而快速发展。本文会从 HDFS 发展历程入手,介绍发展路径上的重大挑战及解决方案。
https://mp.weixin.qq.com/s/Ji6G9t34UPrqySsYvpswCw
6kylin
本文介绍在云端kylin数据迁移的实现方案以及在迁移过程中的遇到哪些问题,并给出了问题解决方案
https://mp.weixin.qq.com/s/RE4Z0idg7KulfG9O8Df1iA
7MongoDB
本文讲述MongoDB 4.2的Change Stream功能的做了很多增强,通过讲解了在没有Change Stream之前的Tailing Oplog存在的问题,以及Change Stream针对整个实例、DB、Collection级别的订阅操作,最后从Change Stream内核讲解了Change Stream的实现。
http://www.mongoing.com/archives/29921
8Spring Cloud
Spring Cloud 入门总结,作者讲了什么是spring cloud, 服务发现注册 、配置中心 、消息总线 、负载均衡 、断路器 、数据监控等,让入门者对pring Cloud 有个全方位的认识
https://juejin.im/post/5de2553e5188256e885f4fa3#heading-14
9Cassandra
本次分享的主要内容是 Cassandra 在360的落地实践过程中遇到的问题,以及一些重要的改进和优化.
https://mp.weixin.qq.com/s/RI4U1QCI_T3AK3ddcT8jZQ
11开心一刻
我一个程序猿朋友说他曾给一个只date了一周的女生花4000欧买了个包随即分手。我问为什么为什么呀!他说因为女生设定了一个逻辑——你不给我买包就是不爱我。他觉得这个逻辑实在是fu*king ridiculous但又很难击破。于是他为了逻辑上战胜女生,就买了包然后把她甩了,证明老子送了包也能不爱你。
致谢:
周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞
猜你喜欢
大数据和云计算技术周报(第56期)
加入技术讨论群
《大数据和云计算技术》社区群人数已经6000+,欢迎大家加下面助手微信,拉大家进群,自由交流。
喜欢QQ群的,可以扫描下面二维码:
欢迎大家通过二维码打赏支持技术社区(英雄请留名,社区感谢您,打赏次数超过108+):
随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。
使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。
https://mp.weixin.qq.com/s/XajqazLT_mW-ImUsfgsuzA