#distributed-computing Dépôts
99 dépôts au total
SmartSql = MyBatis in C# + .NET Core+ Cache (Memory | Redis) + R/W Splitting + PropertyChangedTrack + Dynamic Repository + InvokeSync + Diagnostics
Exemples publics exécutables d'utilisation de NLP de John Snow Labs pour Apache Spark.
Livre : MapReduce, Spark, Java et Scala pour les algorithmes de données
Un dict[str, torch.Tensor] qui se comporte comme un seul tenseur, et TensorClass : des classes de données typées et regroupées par lots qui se compilent.
Validé, scalable, développé par la communauté pour l'appel de variantes, RNA-seq et analyse de petits ARN
:rocket: Paquet R: future: Traitement parallèle et distribué unifié en R pour tous
Interface unifiée pour la construction et la gestion de flux de travaux sur différents moteurs de flux de travaux, tels que Argo Workflows, Tekton Pipelines et Apache Airflow.
Créez automatiquement des indices knn Faiss avec les paramètres de recherche de similarité les plus optimaux.
Réducteurs Clojure, mais pour l'exécution parallèle : localement et sur des systèmes distribués.
Liste impressionnante de ressources pour les systèmes distribués
HarmBench : Un cadre d'évaluation standardisé pour le Red Teaming automatisé et le refus robuste
Une liste organisée d'excellentes ressources de calcul parallèle
Backend.AI est une plateforme de cluster informatique simplifiée basée sur des conteneurs qui héberge des frameworks informatiques/ML populaires et divers langages de programmation, avec une prise en charge enfichable d'accélérateurs hétérogènes, y compris les GPU CUDA, les GPU ROCm, les NPU Gaudi, les TPU Google, les IPU GraphCore et d'autres NPU.
Une bibliothèque pour entraîner, évaluer, interpréter et mettre en production des modèles de forêts de décision tels que Random Forest et Gradient Boosted Decision Trees.
Un cours et une référence architecturale fondés sur des sources, destinés aux ingénieurs qui conçoivent des systèmes devant résister au trafic réel, aux défaillances partielles, aux audits de sécurité et à l’évolution des exigences, couvrant la conception de systèmes d’entreprise, les systèmes distribués, les systèmes d’IA, la cybersécurité, la fiabilité, le cloud, le calcul haute performance, l’edge computing et les infrastructures critiques pour les missions.
Une référence pour la prochaine génération de modèles météorologiques mondiaux basés sur les données.
Système d'exploitation pour agents IA auto-hébergé. Vos souvenirs, discussions, agents et fichiers restent sur votre propre matériel, hors ligne par défaut, dans le cloud par choix. Mémoire IA hors ligne (taOSmd), chat de groupe multi-framework auto-hébergé, bureau web complet + boutique d'applications, et clustering automatique sur le matériel grand public que vous possédez déjà (Orange/Raspberry Pi, Mac mini, PC de jeu).
Une plateforme open-source on-chain pour la productisation rapide de modèles IA à l'aide de ressources décentralisées avec flexibilité et évolutivité
Client worker GPU pour le réseau Talos. S'associe à votre compte Talos, sert des tâches d'inférence de modèles ouverts via WebSocket et signale la disponibilité pour les paiements.
Planificateur convivial pour les tâches de sous-nœud destinées aux systèmes HPC
une démo Spring Boot simple avec quelques composants, par exemple : redis, solr, rockmq, etc.
Opérateur Kubernetes pour les applications basées sur MPI (entraînement distribué, HPC, etc.)
Apache Spark 3 - Programmation Spark en Python pour débutants
Fournit des pipelines de développement de modèles de bout en bout pour les LLM et les modèles multimodaux qui peuvent être lancés sur site ou en mode cloud natif.