• 1
  • 2
  • 3
  • 4
  • 5
阿里云主机ECS 首 页  »  帮助中心  »  云服务器  »  阿里云主机ECS
青云 Spark 服务新增1.6.0 版本的变化
发布日期:2016-4-8 15:4:38

  青云 Spark 服务新增1.6.0 版本的变化

  相比之前的版本,1.6.0 主要变化包括以下几个方面:性能的提升、新的 Dataset API 以及增加了一些机器学习算法。

  具体体现如下:

  Spark Streaming 更新了一些 API 包括 Python Streaming Listener API;增加一些信息在 UI 上的显示。

  Spark Core/SQL 更新了一些 API 包括新增 Dataset API; 性能有极大提升比如 Parquet, SQL 查询等。

  MKlib 在以下几个方面增加了新的算法和新的模型,如:

  Survival analysis

  Normal equation for least squares

  New feature transformers (ChiSqSelector, QuantileDiscretizer, SQL transformer)

  Online hypothesis testing

  Bisecting K-Means clustering