Amazon Web Services kunngjorde tirsdag den generelle tilgjengeligheten av verktøy som gir mer finkornet kontroll til datainnsjøhåndtering.
First, Row and Cell-Level Security for Lake Formation “legger de riktige dataene i hendene på de rette menneskene,” sa AWS-sjef Adam Selipsky under sin AWS re:Invent hovedtale.
Lake Formation gjør det allerede mulig for kunder å flytte data til S3 datainnsjøer, rense og klassifisere dem ved hjelp av maskinlæring og sikker tilgang til sensitive data. Det nye verktøyet lar nå kunder håndheve tilgangskontroller for individuelle rader og celler. I stedet for å lage flere tabeller for hver bruker og administrere datapipelines, kan en kunde definere et sett med retningslinjer for spesifikke rader for spesifikke brukere. Kunder kontrollerer tilgangen til spesifikke rader og kolonner i søkeresultater og i AWS Glue ETL-jobber basert på identiteten til hvem som utfører handlingen.
I mellomtiden eliminerer transaksjoner for styrte tabeller i Lake Formation behovet for batchoppdateringer. “Data er ikke statisk,” sa Selipsky. «Flere og flere data blir lagt til og flyttet raskt.»
Nå kan kunder opprette en ny type tabell – en styrt tabell – og Lake Formation administrerer automatisk konflikter og feil for konsistent visning av data. Brukere vil kunne holde tritt med dataene i sanntid.
Styrte tabeller støtter ACID-transaksjoner som lar flere brukere samtidig og pålitelig sette inn og slette data på tvers av flere styrte tabeller. ACID-transaksjoner lar også kunder kjøre spørringer som returnerer konsistente og oppdaterte data. Ved feil i ETL-prosesser, eller under en oppdatering, blir ikke endringer forpliktet og vil ikke være synlige.
Kunder som bruker styrte tabeller kan bruke automatisk komprimering for lagringsoptimalisering. Når dette alternativet er aktivert, komprimerer Lake Formation automatisk små S3-objekter i styrte tabeller til større objekter for å optimalisere tilgangen via analysemotorer, som Amazon Athena og Amazon Redshift Spectrum.
AWS re:Invent
AWS oppgraderer sitt bransjespill på re:Invent 2021 AWS CEO kunngjør ny privat 5G-tjeneste AWS tar sikte på stormaskiner med migrasjonstjeneste AWS lanserer kvartett av serverløse, on-demand-løsninger Mer finmaskede kontroller kommer til AWS Lake Formation AWS retter seg mot bil- og industrisektorer med FleetWise, TwinMaker Processor-veikart legger til Graviton3, Trainium, nye forekomster IoT RoboRunner har som mål å administrere robotflåter Amazon | Big Data Analytics | Innovasjon | CXO | Kunstig intelligens | Enterprise Software