Quobyte heeft vorige week aangekondigd dat haar Data Center bestandssysteem is de eerste distributed file system te bieden een TensorFlow plug-in, waardoor de verwerkingssnelheid en lineaire schaalbaarheid voor ML-aangedreven toepassingen. Ze zeggen het biedt 30 procent snellere doorvoer performance verbetering voor ML opleiding workflows
Quobyte ‘ s Inc., waarvan de belangrijkste product is van hun scale-out Data Center File System (DCFS), is de eerste distributed file system te bieden een TensorFlow plug-in. TensorFlow is Google ‘ s open-source ML software bibliotheek voor numerieke berekeningen en grootschalige machine learning. Het wordt gebruikt in verschillende industrieën, zoals de autonome voertuigen, robotica, financiële diensten, gezondheidszorg, de overheid, de luchtvaart, defensie, en vele anderen.
Bypass de kernel van het systeem
De plug-in kunt TensorFlow toepassingen te praat rechtstreeks met de Quobyte, het omzeilen van de kernel van het besturingssysteem aanzienlijk verminderen van de kernel-modus context switches en CPU-gebruik. De resulterende verhoogde GPU gebruik van de TensorFlow plug-in versnelt model opleiding ML-workflows.
Omdat het geheel voorbijgaat aan de kernel, de plug-in werkt met zowel de huidige en oudere versies van Linux, en biedt een volledige waaier van flexibele implementatie-opties voor gebruik in ML. Geen toepassing aanpassingen nodig zijn.
DCFS is een moderne, multi-tenant, schaal-out bestandssysteem, zoals die gebruikt worden in de cloud infrastructuren. U kunt beginnen met zo weinig als 3 servers, en groeien tot duizenden. Sterk geautomatiseerd, klanten beheren 100PB van gegevens met slechts een paar admins – een belangrijke besparing ten opzichte van traditionele opslagsystemen.
De Opslag van Bits nemen
Een van de snelst groeiende trends in de opslag plaatsen berekent binnen-opslag te voorkomen dat de overhead van grote hoeveelheden gegevens overbrengen. Als we de overgang naar een digitale beschaving, de gegevens van de groei zal blijven exponentiële voor de komende decennia. Private clouds zal de norm, niet de uitzondering.
Quobyte de TensorFlow plug-in is alleen het meest recente voorbeeld van hoe gaan we het beheren van de groeiende stortvloed aan gegevens. Maar het is vooral tijdig, gezien de explosie van de ML-applicatie ontwikkeling. Als u zeer schaalbare opslag, check ze uit.
Reacties van harte welkom!
Verwante Onderwerpen:
Datacenters
Hardware
Beoordelingen
Mobiliteit
Cloud