2018即将推出的ApacheSpark2.4都有哪些新功能-创新互联

本文来自于2018年09月19日在 Adobe Systems Inc 举行的Apache Spark Meetup。

创新互联公司主营始兴网站建设的网络公司,主营网站建设方案,app软件开发,始兴h5微信小程序搭建,始兴网站营销推广欢迎始兴等地区企业咨询

即将发布的 Apache Spark 2.4 版本是 2.x 系列的第五个版本。本文对Apache Spark 2.4 的主要功能和增强功能进行了概述。

新的调度模型（Barrier Scheduling），使用户能够将分布式深度学习训练恰当地嵌入到 Spark 的 stage 中，以简化分布式训练工作流程。
添加了35个高阶函数，用于在 Spark SQL 中操作数组/map。
新增一个新的基于 Databricks 的 spark-avro 模块的原生 AVRO 数据源。
PySpark 还为教学和可调试性的所有操作引入了热切的评估模式（eager evaluation mode）。
Spark on K8S 支持 PySpark 和 R ，支持客户端模式（client-mode）。
Structured Streaming 的各种增强功能。例如，连续处理（continuous processing）中的有状态操作符。
内置数据源的各种性能改进。例如，Parquet 嵌套模式修剪（schema pruning）。
支持 Scala 2.12。

点击示说网，即可下载此PPT。

总结

网站标题：2018即将推出的ApacheSpark2.4都有哪些新功能-创新互联
文章URL：http://lszwz.com/article/cohehg.html

其他资讯

售后响应及时

7×24小时客服热线

数据备份

更安全、更高效、更稳定

价格公道精准

项目经理精准报价不弄虚作假

合作无风险

重合同讲信誉，无效全额退款

乐山小谭建站工作室是一家专注从事于高品质视觉体验及互联网设计开发，乐山网站建设，乐山网站设计，乐山网页设计，乐山网站制作，品牌网站建设，营销网站建设，集团网站建设，企业网站建设，外贸网站建设，响应式网站建设，小程序开发，微信开发，企业形象设计，企业宣传视频等服务，小谭建站位于乐山市龙岗区大运软件小镇，小谭建站拥有经验丰富的高级网站建设工程师和一流的网页高端设计人员，具备各种规模与类型网站建设的雄厚实力，在网站建设领域树立了自己独特的设计风格。

友情链接交换友情链接

做网站的公司攀枝花网站建设成都网站建设宜宾网站建设全网品牌营销网站托管运营艾瑞格衣柜棕树数据中心成都光华机房服务器托管成都二枢机房

Copyright © 2022 青羊区小谭信息技术咨询服务工作室乐山建站工作室 All Rights Reserved 蜀ICP备2021004003号-25

Copyright © 2022 青羊区小谭信息技术咨询服务工作室乐山建站工作室

蜀ICP备2021004003号-25