IBM рдиреЗ Apache Spark рдХреЛ zSystems рдХреЗ рдореЗрдирдлреНрд░реЗрдо рдХреЗ рд▓рд┐рдП рд╡рд┐рд╕реНрддрд╛рд░рд┐рдд рдХрд┐рдпрд╛ рд╣реИ



рдЖрдИрдмреАрдПрдо рдкрд╣рд▓реЗ рд╣реА рдШреЛрд╖рдгрд╛ рдХрд░ рдЪреБрдХрд╛ рд╣реИ рдХрд┐ рд▓рд┐рдирдХреНрд╕ рдХреЗ рд▓рд┐рдП рдЕрдкрд╛рдЪреЗ рд╕реНрдкрд╛рд░реНрдХ рдХреЛ zSystems рджреНрд╡рд╛рд░рд╛ рд╕рдорд░реНрдерд┐рдд рдХрд┐рдпрд╛ рдЬрд╛рдПрдЧрд╛ред рдЗрд╕ рддрд░рд╣ рдХреЗ рд╕рдорд░реНрдерди рдХреЛ рдореЗрдирдлреНрд░реЗрдо рдПрдирд╛рд▓рд┐рдЯрд┐рдХреНрд╕ рдкреНрд░реЛрдЬреЗрдХреНрдЯ рдХреЗ рд╣рд┐рд╕реНрд╕реЗ рдХреЗ рд░реВрдк рдореЗрдВ рдкреНрд░рджрд╛рди рдХрд┐рдпрд╛ рдЬрд╛рдПрдЧрд╛ред рдЗрд╕рдХреЗ рд▓рд┐рдП рдзрдиреНрдпрд╡рд╛рдж, рдбреЗрдЯрд╛ рдорд╛рдЗрдирд┐рдВрдЧ рд╡рд┐рд╢реЗрд╖рдЬреНрдЮ Apache Spark рдХрд╛ рдЙрдкрдпреЛрдЧ рд╢рдХреНрддрд┐рд╢рд╛рд▓реА zSystems рдореЗрдирдлреНрд░реЗрдо рдкрд░ рдХрд░ рд╕рдХреЗрдВрдЧреЗред

рдЗрд╕рдХреЗ рдЕрд▓рд╛рд╡рд╛, рдпрд╣ рдХрд╣рд╛ рдЧрдпрд╛ рдерд╛ рдХрд┐ рдЕрдкрд╛рдЪреЗ рд╕реНрдкрд╛рд░реНрдХ рди рдХреЗрд╡рд▓ Bluemix рдкреНрд▓реЗрдЯрдлреЙрд░реНрдо рдкрд░ рдПрдХ рд╕реЗрд╡рд╛ рдХреЗ рд░реВрдк рдореЗрдВ рдХрд╛рдо рдХрд░реЗрдЧрд╛, рдмрд▓реНрдХрд┐ рд╕рд┐рд╕реНрдЯрдо рдХреНрд▓рд╛рдЙрдб рдХреНрд▓рд╛рдЙрдб NoSQL рд╕рдорд╛рдзрд╛рди рдФрд░ SashDB рдХреНрд▓рд╛рдЙрдб рд╕реНрдЯреЛрд░реЗрдЬ рдкреНрд▓реЗрдЯрдлреЙрд░реНрдо рд╕рд╣рд┐рдд рдЕрдиреНрдп рдХреНрд▓рд╛рдЙрдб рдФрд░ рд╡рд┐рд╢реНрд▓реЗрд╖рдгрд╛рддреНрдордХ рд╕рдорд╛рдзрд╛рдиреЛрдВ рдХреЗ рд╕рд╛рде рднреА рдПрдХреАрдХреГрдд рдХрд░реЗрдЧрд╛ред Bluemix рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдиреЗ рд╡рд╛рд▓реЗ рдбреЗрд╡рд▓рдкрд░ рдЕрдкрдиреА рдкрд░рд┐рдпреЛрдЬрдирд╛рдУрдВ рдХреЛ рдЖрдИрдмреАрдПрдо рд╕реЗ рд╡рд┐рд╢реНрд▓реЗрд╖рдгрд╛рддреНрдордХ рд╕рдорд╛рдзрд╛рди рдФрд░ DBMS рдХреЗ рд╕рд╛рде рдПрдХреАрдХреГрдд рдХрд░рдиреЗ рдореЗрдВ рд╕рдХреНрд╖рдо рд╣реЛрдВрдЧреЗред

рдЖрдИрдмреАрдПрдо рдиреЗ рдЕрдм рдЕрдкрд╛рдЪреЗ рд╕реНрдкрд╛рд░реНрдХ рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рдЕрдкрдиреЗ рдЕрдзрд┐рдХрд╛рдВрд╢ рд╡рд╛рджреЛрдВ рдХреЛ рдкреВрд░рд╛ рдХрд┐рдпрд╛ рд╣реИред рд╕рдмрд╕реЗ рдкрд╣рд▓реЗ, рдирд┐рдЧрдо рдиреЗ рд╕рдВрдЧрдардиреЛрдВ рдХреЗ рд▓рд┐рдП zSystems рдореЗрдирдлреНрд░реЗрдо рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдХреЗ рдбреЗрдЯрд╛ рд╡рд┐рд╢реНрд▓реЗрд╖рдг рдХреНрд╖рдорддрд╛рдУрдВ рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдирд╛ рдЖрд╕рд╛рди рдФрд░ рддреЗрдЬрд╝ рдмрдирд╛ рджрд┐рдпрд╛ред рдпрд╣ рдбреЗрдЯрд╛ рд╡реИрдЬреНрдЮрд╛рдирд┐рдХреЛрдВ рдФрд░ рдбреЗрд╡рд▓рдкрд░реНрд╕ рдХреЗ рд▓рд┐рдП рдирдП рд░рд╛рд╕реНрддреЗ рдмрдирд╛рддрд╛ рд╣реИред

ApacheSpark рдХреЗ рд▓рд┐рдП IBMz / OS рдкреНрд▓реЗрдЯрдлрд╝реЙрд░реНрдо рдЦреБрд▓реЗ рд╕реНрд░реЛрдд рд╕реНрдкрд╛рд░реНрдХ рдврд╛рдВрдЪреЗ рдХреЛ рдореВрд▓ рд░реВрдк рд╕реЗ z / OS рдкрд░ рдХрд╛рдо рдХрд░рдиреЗ рдХреА рдЕрдиреБрдорддрд┐ рджреЗрддрд╛ рд╣реИред рдФрд░ рдпрд╣ рдмрджрд▓реЗ рдореЗрдВ "рдХреНрд╖реЗрддреНрд░ рдореЗрдВ" рд╡рд╛рд╕реНрддрд╡рд┐рдХ рд╕рдордп рдореЗрдВ рдкреНрд░рд╛рдкреНрдд рдЖрдВрдХрдбрд╝реЛрдВ рдХрд╛ рдЕрдзреНрдпрдпрди рдХрд░рдиреЗ рдХрд╛ рдЕрд╡рд╕рд░ рдкреНрд░рджрд╛рди рдХрд░рддрд╛ рд╣реИ, рдЕрд░реНрдерд╛рдд рд╕реНрд░реЛрдд рдЬрд╛рдирдХрд╛рд░реА рдирд┐рдХрд╛рд▓рдиреЗ, рдХрдиреНрд╡рд░реНрдЯ рдХрд░рдиреЗ рдФрд░ рдбрд╛рдЙрдирд▓реЛрдб рдХрд░рдиреЗ рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛ рдХреЗ рдмрд┐рдирд╛ред рдЙрджрд╛рд╣рд░рдг рдХреЗ рд▓рд┐рдП, рд╡реНрдпрд╛рдкрд╛рд░ рдкреНрд░рддрд┐рдирд┐рдзрд┐ рдХреЙрд░реНрдкреЛрд░реЗрдЯ рдбреЗрдЯрд╛ (рдмрд┐рдХреНрд░реА, рдмрд╛рдЬрд╛рд░ рдХреЗ рд░реБрдЭрд╛рди, рдЖрджрд┐) рдХрд╛ рд╡рд┐рд╢реНрд▓реЗрд╖рдг рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ, рдмрд╛рдЬрд╛рд░ рдХреА рдЬрд░реВрд░рддреЛрдВ рдХреЗ рд▓рд┐рдП рдордХреНрдЦреА рдкрд░ рдЕрдкрдиреЗ рдХрд╛рдо рдХреЛ рдмрджрд▓ рд╕рдХрддреЗ рд╣реИрдВ рдФрд░ рд╕рдорд╛рдпреЛрдЬрд┐рдд рдХрд░ рд╕рдХрддреЗ рд╣реИрдВред

рд╡реИрдЬреНрдЮрд╛рдирд┐рдХ рдХрд┐рд╕реА рднреА рдкреНрд░рдпреЛрдЧ рдХреЗ рджреМрд░рд╛рди рдбреЗрдЯрд╛ рдХреЗ рд╕рд╛рде рдХрд╛рдо рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ, рд╡рд╛рд╕реНрддрд╡рд┐рдХ рд╕рдордп рдореЗрдВ рдЗрд╕ рддрд░рд╣ рдХреЗ рдХрд╛рдо рдХреА рдкреНрд░рдЧрддрд┐ рдкрд░ рд╡рд┐рд╕реНрддреГрдд рд░рд┐рдкреЛрд░реНрдЯ рдкреНрд░рд╛рдкреНрдд рдХрд░ рд╕рдХрддреЗ рд╣реИрдВред рдЕрд░реНрдерд╛рддреН, рд╕рдВрд╕рд╛рдзрд┐рдд рдбреЗрдЯрд╛ рдЬрд╛рд░реА рдХрд░рдиреЗ рдХреЗ рд╕рд╛рде рд╕реВрдЪрдирд╛ рдХреА рдкреНрд░рд╛рдкреНрддрд┐ рдФрд░ рдЗрд╕рдХреЗ рд╡рд┐рд╢реНрд▓реЗрд╖рдг рдХреЗ рдмреАрдЪ рд╡реНрдпрд╛рд╡рд╣рд╛рд░рд┐рдХ рд░реВрдк рд╕реЗ рдХреЛрдИ рджреЗрд░реА рдирд╣реАрдВ рд╣реИред

рдЕрдм zSystems рд╡рд┐рдЬреНрдЮрд╛рди, рдмреИрдВрдХрд┐рдВрдЧ, рдкрд░рд┐рд╡рд╣рди, рдмреАрдорд╛ рд╡реНрдпрд╡рд╕рд╛рдп рд╕рд╣рд┐рдд рдХрдИ рдХреНрд╖реЗрддреНрд░реЛрдВ рдореЗрдВ рдХрд╛рдо рдХрд░рддреЗ рд╣реИрдВред рдореЗрдирдлреНрд░реЗрдо рдФрд░ рдЗрд╕рдХреЗ рд╕реЙрдлреНрдЯрд╡реЗрдпрд░ рддреБрд░рдВрдд рд▓реЗрдирджреЗрди рдФрд░ рдбреЗрдЯрд╛ рдХрд╛ рд╡рд┐рд╢реНрд▓реЗрд╖рдг рдХрд░рддреЗ рд╣реИрдВ, рд╕рд╛рде рд╣реА рд╕рд╛рде рд╡рд░реНрддрдорд╛рди рдСрдкрд░реЗрд╢рди рдХреЗ рдврд╛рдВрдЪреЗ рдХреЗ рднреАрддрд░ рдПрдХ рдкреВрд░реНрд╡рд╛рдиреБрдорд╛рди рдореЙрдбрд▓ рдХрд╛ рдирд┐рд░реНрдорд╛рдг рдХрд░рддреЗ рд╣реИрдВред рд╕реНрдкрд╛рд░реНрдХ рдФрд░ zSystems рдХрд╛ рд╕рдВрдпреЛрдЬрди рд╕рдордп, рдкреНрд░рдпрд╛рд╕ рдФрд░ рдзрди рдмрдЪрд╛рдиреЗ рдореЗрдВ рдорджрдж рдХрд░рддрд╛ рд╣реИред рдЪреВрдБрдХрд┐ рд╕реНрдкрд╛рд░реНрдХ рдорд╢реАрди рд╕реАрдЦрдиреЗ, рдкреНрд░рд╛рдХреГрддрд┐рдХ рднрд╛рд╖рд╛ рдХреА рдкрд╣рдЪрд╛рди, рдФрд░ рдЗрдореЗрдЬ рдкреНрд░реЛрд╕реЗрд╕рд┐рдВрдЧ рддрдХрдиреАрдХ рдХрд╛ рд╕рдорд░реНрдерди рдХрд░рддрд╛ рд╣реИ, рд╕рд╛рде рд╣реА рд╕рд╛рде рдЕрдиреНрдп рд╕реБрд╡рд┐рдзрд╛рдУрдВ рдХреА рдореЗрдЬрдмрд╛рдиреА рдХреА рдкреЗрд╢рдХрд╢ рдХрд░рддрд╛ рд╣реИ, рдЖрдИрдмреАрдПрдо рд╕реНрдкрд╛рд░реНрдХ рдХреЛ рдкреВрд░реНрдг рдбреЗрдЯрд╛ рд╡рд╛рддрд╛рд╡рд░рдг рдХреЗ рд░реВрдк рдореЗрдВ рджреЗрдЦрддрд╛ рд╣реИред рдЙрджрд╛рд╣рд░рдг рдХреЗ рд▓рд┐рдП, рдЖрдИрдмреАрдПрдо рдбрд╛рдЯрд╛рдХреИрдк рд╕реЗрд╡рд╛ рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдирд╛, рдЬреЛ рдЗрдирд╕рд╛рдЗрдЯ рдХреНрд▓рд╛рдЙрдб рд╕рд░реНрд╡рд┐рд╕реЗрдЬ рдХрд╛ рд╣рд┐рд╕реНрд╕рд╛ рд╣реИ, рдПрдХ рдЧреНрд░рд╛рд╣рдХ рдЕрдкрдиреЗ рдкреНрд░рд╛рд░реВрдк рдФрд░ рд╕рдВрд░рдЪрдирд╛, рдкрд╛рда рдФрд░ рд╕рдВрдЦреНрдпрд╛рддреНрдордХ рдЬрд╛рдирдХрд╛рд░реА рд╕рд╣рд┐рдд рдХрд┐рд╕реА рджрд╕реНрддрд╛рд╡реЗрдЬрд╝ рдХреА рд╕рд╛рдордЧреНрд░реА рдХреЛ рд╕реНрд╡рдЪрд╛рд▓рд┐рдд рд░реВрдк рд╕реЗ рд╡рд░реНрдЧреАрдХреГрдд рдФрд░ рдкрд╣рдЪрд╛рди рд╕рдХрддрд╛ рд╣реИред



рдирдП рдкреНрд▓реЗрдЯрдлреЙрд░реНрдо рдХреЗ рдЕрдиреНрдп рдлрд╛рдпрджреЗ рд╣реИрдВ:
  • : , Scala, Python, RandSQL .
  • : , , IMS, VSAM, DB2 z/OS, PDSE SMF Apache Spark API.
  • In-place : Apache Spark , . , .
  • Opensource: Apache Spark open-source, .
  • , IBM . Zementis ( ), Rocket Software ( ) Elite Analythics ( , zSystems).
  • Zementis , SPSS, R, Python, SAS open-source . z/OS. Zementis IMS, DB2 z/OS VSAM.
  • c Rocket Software Data Virtualization Service Rocket Service Spark z Systems. . , R z/OS.
  • Elite Analythics zSystems. real-time Zementis SPSS, , ApacheSpark z/OS.


рд╕рд╛рдорд╛рдиреНрдп рддреМрд░ рдкрд░, Apache Spark рдХреЗ рд▓рд┐рдП z / OSPlatform рдбреЗрдЯрд╛ рдкреНрд░реЛрд╕реЗрд╕рд┐рдВрдЧ рд╡рд┐рд╢реЗрд╖рдЬреНрдЮреЛрдВ рдФрд░ рдбреЗрд╡рд▓рдкрд░реНрд╕ рдХреЛ рдЬрд╛рдирдХрд╛рд░реА рдПрдХрддреНрд░ рдХрд░рдиреЗ рдФрд░ рд╡рд┐рд╢реНрд▓реЗрд╖рдг рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдЕрдкрдиреЗ рд╕реНрд╡рдпрдВ рдХреЗ рд╕реНрд╡рд░реВрдкреЛрдВ рдФрд░ рдЙрдкрдХрд░рдгреЛрдВ рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдиреЗ рдХреА рдЕрдиреБрдорддрд┐ рджреЗрддрд╛ рд╣реИред рдпрджрд┐ рдЖрд╡рд╢реНрдпрдХ рд╣реЛ, рддреЛ рдкреНрд░рджрд╛рди рдХрд┐рдП рдЧрдП рдЯреВрд▓ рдХреЛ рдЕрдиреБрдХреВрд▓рд┐рдд рдХрд┐рдпрд╛ рдЬрд╛ рд╕рдХрддрд╛ рд╣реИред

рдкрд░рд┐рдпреЛрдЬрдирд╛ рдореЗрдВ рдЕрдм рдПрдХ рдХрд╛рдлреА рд╡рд┐рдХрд╕рд┐рдд рдкрд╛рд░рд┐рд╕реНрдерд┐рддрд┐рдХреА рддрдВрддреНрд░ рд╣реИред рдПрдХ рддрд░рд╣ рд╕реЗ рдпрд╛ рдХрд┐рд╕реА рдЕрдиреНрдп, 3,500 рдЖрдИрдмреАрдПрдо рд╢реЛрдзрдХрд░реНрддрд╛рдУрдВ рдФрд░ рдбреЗрд╡рд▓рдкрд░реНрд╕ рдХреА рдЧрддрд┐рд╡рд┐рдзрд┐ рдЬреЛ рдЗрд╕ рдврд╛рдВрдЪреЗ рдкрд░ рдЕрдкрдиреА рдкрд░рд┐рдпреЛрдЬрдирд╛рдПрдВ рдмрдирд╛рддреЗ рд╣реИрдВ, рд╡реЗ рдХрд┐рд╕реА рддрд░рд╣ рдордВрдЪ рд╕реЗ рдЬреБрдбрд╝реЗ рд╣реЛрддреЗ рд╣реИрдВред рд╡рд┐рд╢реЗрд╖рдЬреНрдЮ рдЬреАрдерд╣рдм рдкрд░ рдЕрдкрдиреА рд╕рд░реНрд╡реЛрддреНрддрдо рдкреНрд░рдерд╛рдУрдВ рдХреЛ рдкреЛрд╕реНрдЯ рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ ред

Apache Spark рдХреЗ рд▓рд┐рдП IBMz / OS рдкреНрд▓реЗрдЯрдлрд╝реЙрд░реНрдо рдЕрдм рдбрд╛рдЙрдирд▓реЛрдб рдХреЗ рд▓рд┐рдП рдЙрдкрд▓рдмреНрдз рд╣реИ ред

Source: https://habr.com/ru/post/hi395307/


All Articles