开源大数据周刊-第91期

资讯

战争年代，人民群众推着小推车踊跃支前。如今，在大数据支持下，国防交通民用运力动员会发生怎样的变化？

2017年12月26日，新华社向全球发布了中国第一个媒体人工智能平台——媒体大脑1.0，引起海内外广泛关注。仅仅半年后，2018年6月13日，新华社又向全球发布了媒体大脑2.0——“MAGIC”智能生产平台。

DataWorks Summit 2018 近日如期在美国加州举行，今年的主题是“Ideas Insights Innovation”。

Java 的新版本发布计划意味着总会有一款新的 JDK 即将推出。根据他们的计划，6 月将是 JDK 11 第一阶段的发布时期，7 月将专门用于第二阶段的测试和发布，而首个发布候选版和最终发布候选版则定于 8 月份发布。

技术

Spark SQL 是一个高度可扩展且高效的关系处理引擎，具有易于使用的 API 和中间查询容错功能。 它是 Apache Spark 的核心模块。Spark SQL可以处理，整合和分析来自不同数据源（例如Hive，Cassandra，Kafka和Oracle）和文件格式（例如Parquet，ORC，CSV和JSON）的数据。 这次演讲将深入 SparkSQL 的技术细节，涵盖查询执行的整个生命周期。 通过本文将对 Spark SQL 有更深入的了解，以及了解如何调整Spark SQL的性能。

Apache Pulsar（孵化器项目）是一个企业级的发布订阅（pub-sub）消息系统，最初由Yahoo开发，并于2016年底开源，现在是Apache软件基金会的一个孵化器项目。Pulsar在Yahoo的生产环境运行了三年多，助力Yahoo的主要应用，如Yahoo Mail、Yahoo Finance、Yahoo Sports、Flickr、Gemini广告平台和Yahoo分布式键值存储系统Sherpa。

本文将会以概述的形式为读者您提供 Apache 软件基金会的一切内容，相信一定是您一直以来都存有疑问，但还没有来得及细问的内容。涵盖：member 与 committer 的区别、谁决定什么事、选举是如何进行的、基础设施又是如何工作的、董事会又是什么、什么是PMC、孵化器背后的哲学思想又是什么、以及ASF是如何处理多年以来新项目和贡献者的惊人增长所带来的挑战。本文将带你走近 Apache 软件基金会的幕后，一探其背后的运作机理。