Noll
Hortonworks idag är att införa Dataplane Service (DPS), en ny molnbaserad tjänst för att styra virtuella data sjöar. DPS är vad Hortonworks gäller en data “tyg.” Eftersom vi tycker att termen lite otydligt, kommer vi att karakterisera UP som en tjänst som kopplar ihop och implementerar säkerhet – och-styrning-relaterade tjänster, och presenterar dem för att de uppgifter sjön administratör som en katalog av kataloger. UP kommer inte att ersätta tredje part kataloger som används för data discovery, men arbetar tillsammans med dem. Det kommer att sitta i molnet, vilket ger en plats att “register” – datakällor, bygga upp en katalog av metadata för att hantera data-tjänster. Det bygger på befintliga open source-projekt som Apache Ranger, där säkerheten är politik skapas och upprätthålls, och Atlas, som hanterar metadata.
Medan UP kommer att användas för att kontrollera kluster och hantera styrning och säkerhet, det är inte ett cluster management, säkerhet, eller styrinstrument per se. Det är i stället utformade för att koppla in externa tjänster med publicerade Api: er. Hortonworks mål är att bli tredje parter att gin upp sådana tjänster. Med utbyggnaden, Hortonworks är inklusive Data Lifecycle Manager som utför information lifecycle management (ILM) kapacitet omfattar replikering, disaster recovery, säkerhetskopiering och återställning, automatisk nivåindelning av varma och kalla data till olika typer av lagring. Om färdplanen, Hortonworks planer på ytterligare tjänster för säkerhet och distribution.
Behovet UP härstammar från insikten att data sjöar kommer att vara virtuell. Med nya uppdrag, såsom EU: s General Data Protection Förordning (GDPR) placera starka krav på personlig integritet, i många fall, kommer företagen har för att hålla konsumenternas data i ursprungslandet. Översättning: om du är en multi-nationella företag, sekretess-lagar kommer att kräva att du ska ha flera fysiska data sjöar.
Samma gäller för cloud strategi. Vi räknar med att några stora organisationer kommer att lägga all sin data i molnet, eller i någon enstaka moln. Interna riktlinjer eller allmänna föreskrifter som kan tvinga organisationer som annars böjd på cloud deployment att behålla vissa uppgifter om lokaler. Sand för organisationer som vill flytta en kritisk massa av deras data och applikationer till molnet, vi förväntar oss att de kommer att kräva minst andra källor. Igen, som kommer att leda till att flera uppgifter sjöar.
Sedan är det faktum att Hadoop kommer inte att sitta på en ö, men kommer att samexistera med datalager, NoSQL operativa butiker, IoT plattformar, och streaming system. Det är där livet blir intressant eftersom databaser är överlappande. SQL-databaser är att lägga till JSON kapacitet och vice versa, och de är förenade fråga till Hadoop. Under tiden, analytiska verktyg ska äga frågan, oavsett var den går. Sedan finns det de Informatica och IBMs av världen med sina portföljer av data integration verktyg, plus den nyare generationen av data förberedelser, katalogisering, och data sjön verktyg.
DPS är en tid förutom att det Hortonworks portfölj eftersom den erkänner att organisationer som bygger data sjöar är sannolikt att hantera flera instanser och kommer att kräva en åtgärd av sammanhanget mellan dem. UP kommer inte att ersätta verktyg för styrning som redan är en del av Hortonworks plattform, inklusive Ranger, där säkerhetspolitik är satt; Knox, som fungerar som en gateway till företagets kataloger för autentisering av användare, Atlas, för att tagga data enheter för styrning och Falcon, som används för att ange data arbetsflöden.
Djävulen finns i detaljerna eftersom moln leverantörer, tillhandahållare av databasen, data integration verktyg och analytiska verktyg för alla leverantörer visa sig i centrum av världen i planterar sina insatser med styrningen. Och då det är fråga om cloud leverantörer som läser säkerhets -, identitets-och åtkomstkontroll som centrala pelarna i deras tjänst. Hortonworks ” utmaningen med UP kommer att vara den grad som det kan spela bra granne till vart och ett av dessa system med avsikter för styrning.
0