发布时间：2020-06-29 19:12:19

本篇给大家总结了20道Kafka知识点或者说面试题，持续更新中...1.kafka的3个关键功能？发布和订阅记录流，类似于消息队列或企业消息传递系统。以容错的持久方式存储记录流。处理记录流。2.kafka通常用于两大类应用？建立实时流数据管道，以可靠地在系统或应用程序之间获取数据构建实时流应用程序，以转换或响应数据流.........【阅读全文】

发布时间：2020-06-29 18:46:34

-     消息详解     -一、概述在 《柔性事务之TCC详解》 和《柔性事务之Saga详解》两文中我们详细剖析了柔性事务的第一个分支补偿型事务。在《刚性事务总结和柔性事务概述》中我们介绍过的柔性事务包含补偿型事务和通知型事务。通知型事务主要包含事务消息和最大努力通知型分布式事务.........【阅读全文】

发布时间：2020-06-28 19:22:22

数据湖本身是一个中心化的存储，能够存储任意规模的结构化与非结构化数据。数据湖相比数据仓库有很多的优势，但大多是在理想状态下的，一旦执行起来还有很多技术挑战。（一）数据湖的数据可能并不会真正做到实时。在业务环境下，如果把所有数据都放到数据湖里，那么从数据湖直接调用数据的过程可能比原来数据仓库更.........【阅读全文】

发布时间：2020-06-28 18:58:11

数据组织形式：数据湖就是捕获半结构化和非结构化数据。而数据仓库则是捕获结构化数据并将其按模式组织。Schema：数据湖通常在存储数据之后定义schema，使用较少的初始工作并提供更大的灵活性。在数据仓库中存储数据之前定义schema，这需要你清理和规范化数据，这意味着schema的灵活性要低不少。本文来源于：奈.........【阅读全文】

发布时间：2020-06-23 15:07:35

深度剖析了各个基础技术的源码(ZooKeeper、Hive、Spark、Flink、Hadoop等)，对这些基础技 术知识动态的排列组合，形成大数据全局架构观，并深入讲述大数据全局架构设计的方方面面，打 造真正满足企业万亿级海量数据规模的数据中台，真正赋能前台业务。同时，在企业万亿级真实项 目落地环节，采用高性能、高可用、高扩展的.........【阅读全文】