IBM扩展了适用于zSystems大型机的Apache Spark
IBM 已经宣布 zSystems将支持Linux版Apache Spark。此类支持将作为大型机分析项目的一部分提供。因此,数据挖掘专家将能够在功能强大的zSystems大型机上使用Apache Spark。另外,有人说 Apache Spark不仅将在Bluemix平台上作为服务工作,而且该系统还将与其他云和分析解决方案集成,包括Cloudant NoSQL解决方案和SashDB云存储平台。使用Bluemix的开发人员将能够将他们的项目与IBM的分析解决方案和DBMS集成在一起。IBM现在已经兑现了有关Apache Spark的大部分承诺。首先,该公司使组织可以更轻松,更快速地使用zSystems大型机访问数据分析功能。这为数据科学家和开发人员创造了新的途径。用于ApacheSpark的IBMz / OS平台允许开源Spark框架在z / OS上本地工作。这样就提供了机会,可以在“现场”实时研究接收到的数据,也就是说,无需提取,转换和下载(ETL)源信息。例如,业务代表可以分析公司数据(销售,市场趋势等),根据市场需求即时更改和调整其工作。科学家可以在任何实验中处理数据,实时接收有关此类工作进展的详细报告。即,在信息的接收和其与处理数据的发布之间的分析之间实际上没有延迟。现在,zSystems可在许多领域工作,包括科学,银行,运输,保险业务。大型机及其软件可立即分析交易和数据,同时在当前操作的框架内构建预测模型。Spark和zSystems的组合有助于节省时间,精力和金钱。由于Spark支持机器学习,自然语言识别和图像处理技术,并提供大量其他功能,因此IBM将Spark视为完整的数据环境。例如,使用作为Insight Cloud Services一部分的IBM Datacap服务,客户端可以自动分类和识别文档的内容,包括其格式和结构,文本和数字信息。
新平台还有其他优点:- : , Scala, Python, RandSQL .
- : , , IMS, VSAM, DB2 z/OS, PDSE SMF Apache Spark API.
- In-place : Apache Spark , . , .
- Opensource: Apache Spark open-source, .
- , IBM . Zementis ( ), Rocket Software ( ) Elite Analythics ( , zSystems).
- Zementis , SPSS, R, Python, SAS open-source . z/OS. Zementis IMS, DB2 z/OS VSAM.
- c Rocket Software Data Virtualization Service Rocket Service Spark z Systems. . , R z/OS.
- Elite Analythics zSystems. real-time Zementis SPSS, , ApacheSpark z/OS.
通常,用于Apache Spark的z / OSPlatform允许数据处理专家和开发人员使用他们自己的格式和工具来收集和分析信息。如有必要,可以自定义提供的工具。该项目现在具有相当发达的生态系统。无论如何,由3500名IBM研究人员和开发人员在该框架上创建自己的项目的活动以某种方式与该平台相关联。专家可以在GitHub上发布他们的最佳实践。现在可以下载用于Apache Spark的IBMz / OS平台。Source: https://habr.com/ru/post/zh-CN395307/
All Articles