Zero
LinkedIn, jeudi, va annoncer un nouveau projet open source qui vise à fournir un support natif pour l’exécution de TensorFlow emplois sur Hadoop.
TensorFlow est le Google open source construit sur l’apprentissage de la machine de la bibliothèque qui est devenu l’un des plus populaires de plates-formes pour la création d’apprentissage automatique et de l’apprentissage en profondeur des applications. Hadoop est le logiciel open-source-cadre pour le stockage des données et l’exécution d’applications sur les grappes de matériel. L’obtention de ces deux systèmes pour fonctionner en mode natif est souvent un obstacle pour les données scientifiques et les ingénieurs, selon LinkedIn.
Dans les étapes TonY, LinkedIn pour exécuter en mode natif TensorFlow sur Hadoop. L’idée de base est de courir TensorFlow des emplois de manière fiable et flexible que les autres citoyens de première classe sur Hadoop, y compris MapReduce et de la bougie, LinkedIn a dit.
“Nous voulions un flexible et durable de manière à combler le fossé entre l’analytique pouvoirs de distribués TensorFlow et la mise à l’échelle des pouvoirs de Hadoop,” Jonathan Hung, un ingénieur logiciel senior sur Hadoop équipe de développement de LinkedIn, a écrit dans un billet de blog.
“Semblable à la façon dont MapReduce fournit le moteur pour l’exécution de Pig/Hive scripts sur Hadoop, Spark et fournit le moteur de course scala code qui utilise Étincelle Api, TonY vise à offrir le même soutien de première classe pour l’exécution de TensorFlow emplois sur Hadoop par des tâches de manipulation telles que les ressources de la négociation et de conteneur de configuration de l’environnement,” Hung expliqué.
En plus de soutenir ces fonctionnalités de base, TonY propose également des fonctionnalités qui visent à améliorer l’expérience de l’exécution de formation à grande échelle, y compris les GPU de la planification, de finesse de demandes de ressources, TensorBoard de soutien, et la tolérance aux pannes.
TonY est disponible sur GitHub — qui, à l’instar de LinkedIn, est maintenant la propriété de Microsoft — à partir d’aujourd’hui.
COUVERTURE LIÉE:
Microsoft ‘futur PDG de GitHub’ parle de l’Atome, en gardant GitHub indépendants et plus
Bientôt-à-être GitHub chef de la direction Nat Friedman a pris à Reddit pour essayer de répondre développeur questions et dissiper les craintes sur les plans de Microsoft pour le service.
LinkedIn lance une fonction de traduction qui s’appuie sur Microsoft AI technologies
Microsoft, LinkedIn a mis au point une nouvelle dynamique au service de traduction pour des postes dans le LinkedIn flux d’actualité, et utilisé une partie de Microsoft cognitives des services pour le construire.
Open source: Pourquoi il est temps d’être plus ouverts sur la manière dont les projets sont exécutés
La sécurité n’est pas la seule considération que vous évaluer des projets open source, de s’appuyer sur de la gouvernance, de la communauté et de professionnalisme de la question.
Rubriques Connexes:
Des Logiciels D’Entreprise
Linux
Développeur
Sécurité
0