#spark Repositories
Insgesamt 126 Repositories
:elephant: Elasticsearch Echtzeitsuche und -analyse nativ in Hadoop integriert
Apache Auron ist ein Beschleuniger für Big-Data-Engines, der die native vektorisierte Ausführung nutzt, um die Abfrageverarbeitung zu beschleunigen.
Das Big-Data-Wissensrepository umfasst Data-Warehouse-Modellierung, Echtzeitberechnung, Big Data, Daten-Mittelplattform, Systemdesign, Java, Algorithmen usw.
Mehr als 2000+ Fragen zum Vorstellungsgespräch für Dateningenieure.
Backend (Java Golang) Full-Stack-Wissensarchitektur-System-Zusammenfassung
ApacheCN Open-Source-Organisation: Ankündigungen, Einführung, Mitglieder, Aktivitäten, Kommunikationswege
Apache Spark & Python (pySpark) Tutorials für Big Data Analysis und Machine Learning als IPython / Jupyter Notebooks
:truck: Agile Data Preparation Workflows leicht gemacht mit Pandas, Dask, cuDF, Dask-cuDF, Vaex und PySpark
Das ist das GitHub-Repository für Learning Spark: Lightning-Fast Data Analytics [2nd Edition]
50+ öffentliche DockerHub-Images für Docker & Kubernetes - DevOps, CI/CD, GitHub Actions, CircleCI, Jenkins, TeamCity, Alpine, CentOS, Debian, Fedora, Ubuntu, Hadoop, Kafka, ZooKeeper, HBase, Cassandra, Solr, SolrCloud, Presto, Apache Drill, Nifi, Spark, Consul, Riak
Jupyter-Magics und -Kernels für die Arbeit mit remote Spark-Clustern
Der Experte für Cloud-Native Big Data Management der nächsten Generation zielt darauf ab, Benutzern dabei zu helfen, schnell stabile, effiziente und skalierbare Cloud-Native-Plattformen für Big Data aufzubauen.
Taier ist eine Big-Data-Entwicklungsplattform für Übermittlung, Planung, Betrieb und Wartung sowie Anzeige von Indikatorinformationen
KI-gestützte Entitätsauflösung, Identitätsauflösung, Stammdatenverwaltung und Deduplizierung in großem Maßstab für Menschen und Agenten
GraphFrames ist ein Paket für Apache Spark, das DataFrame-basierte Graphen bereitstellt.
Apache Amoro (incubating) ist ein Lakehouse-Managementsystem, das auf offenen Data-Lake-Formaten aufbaut.
Apache Celeborn ist ein elastischer und leistungsstarker Dienst für Shuffle- und Spill-Daten.
Server für das ListenBrainz-Projekt, einschließlich des Front-End-Codes (javascript/react), den es bereitstellt, und aller Datenverarbeitungskomponenten, die LB verwendet.
ADAM ist eine Genomanalyseplattform mit spezialisierten Dateiformaten, die mit Apache Avro, Apache Spark und Apache Parquet erstellt wurden. Apache 2 lizenziert.
Apache Livy ist eine Open-Source-REST-Schnittstelle zur Interaktion mit Apache Spark von überall aus.
Ein Connector für Spark, der das Lesen und Schreiben von/zu Redis-Cluster ermöglicht
Offene Modellreihe Spark-x2.6. Die Grenzen agentischer Fähigkeiten von On-Device-Modellen erweitern
Eine kuratierte Liste toller Ressourcen im Zusammenhang mit der Ada- und SPARK-Programmiersprache
DoEKS ist ein Tool zum Erstellen, Bereitstellen und Skalieren von Datenplattformen auf Amazon EKS
Dieses Repository enthält den Entwicklungscode für sparkMeasure, eine Bibliothek zur Leistungsanalyse und Fehlerbehebung für Apache Spark. Es vereinfacht das Sammeln, Aggregieren und Exportieren von Spark-Aufgaben-/Stufenmetriken und ist für den praktischen Einsatz durch Entwickler und Data Engineers in interaktiven Analysen, Tests und Produktionsüberwachungs-Workflows konzipiert.
80+ DevOps- & Data-CLI-Tools - AWS, GCP, GCF Python Cloud Functions, Log Anonymizer, Spark, Hadoop, HBase, Hive, Impala, Linux, Docker, Spark Data Converter & Validator (Avro/Parquet/JSON/CSV/INI/XML/YAML), Travis CI, AWS CloudFormation, Elasticsearch, Solr usw.
Scriptis ist für die interaktive Datenanalyse mit Skriptentwicklung (SQL, PySpark, HiveQL), Task-Submission (Spark, Hive), UDF, Funktionen, Ressourcenmanagement und intelligenter Diagnose.
KI-Chatbot basierend auf JDK8! WeChat-Öffentlichkeitsarbeit Midjourney-Grafiken, Schlüsselcode-Einlösung, Web-Unterstützung ChatGPT, Midjourney-Grafiken, SD-Grafiken, Schlüsselcode-Einlösung, Yi-Zahlung, öffentliche Kanalwerbung, E-Mail-Registrierung🔥
Dingo: Ein umfassendes Tool zur Bewertung der Qualität von KI-Daten, -Modellen und -Anwendungen