#nlp Repositories
Insgesamt 494 Repositories
Kuratiertes Tutorial und Ressourcen für Large Language Models, KI-Malerei und mehr.
LightLLM ist ein Python-basiertes Framework für die Inferenz und das Serving von LLMs (Large Language Models), das für sein leichtgewichtiges Design, seine einfache Skalierbarkeit und seine Hochgeschwindigkeitsleistung bekannt ist.
Dieses Projekt reproduziert das Buch Dive Into Deep Learning (https://d2l.ai/) und passt den Code von MXNet an PyTorch an.
MNBVC (Massive Never-ending BT Vast Chinese corpus) ein extrem großer chinesischer Korpus. Auf Augenhöhe mit den 40T Daten, die für das Training von ChatGPT verwendet werden. Der MNBVC-Datensatz enthält nicht nur Mainstream-Kultur, sondern auch Daten aus verschiedenen Nischenkulturen und sogar Marsianisch. Der MNBVC-Datensatz umfasst reine Textdaten in chinesischer Sprache in allen Formen, wie Nachrichten, Aufsätze, Romane, Bücher, Zeitschriften, wissenschaftliche Arbeiten, Dialoge, Posts, Wikis, alte Gedichte, Songtexte, Produktbeschreibungen, Witze, Peinlichkeiten, Chatverläufe usw.
AdalFlow: Die Bibliothek zum Erstellen & automatischen Optimieren von LLM-Anwendungen.
Zusammenfassung und Studium von ChatGPT-Materialien, kontinuierlich aktualisiert......
"Build a Large Language Model (From Scratch)" ist ein E-Book, das tief in die Prinzipien und die Implementierung großer Sprachmodelle eintaucht und sich an Lernende richtet, die die Architekturen, Trainingsprozesse und Anwendungsentwicklung von großen Modellen wie GPT verstehen möchten. Damit mehr chinesische Leser diese äußerst wertvolle Anleitung erhalten können, habe ich beschlossen, sie ins Chinesische zu übersetzen und über GitHub Open Source zu teilen.
Blitzschnelle KI-Entscheidungsfindung und intelligente Verarbeitung multimodaler Daten.
Von Datawhale-Mitgliedern zusammengestellte Bewerbungsgesprächserfahrungen, Inhalte umfassen Machine Learning, CV, NLP, Empfehlungen, Entwicklung usw., alle willkommen zum Starren
Ein chinesisches NLP-Vorverarbeitungs- und Parsing-Toolkit, genau, effizient und einfach zu bedienen Ein chinesisches NLP-Vorverarbeitungs- und Parsing-Toolkit www.jionlp.com
Chinesische NLP-Lösungen (große Modelle, Daten, Modelle, Training, Inferenz)
Kuratiert Tutorials und Ressourcen für Large Language Models, Text2SQL, Text2DSL, Text2API, Text2Vis und mehr.
[EMNLP 2021] SimCSE: Einfaches kontrastives Lernen von Satz-Embeddings https://arxiv.org/abs/2104.08821
Schnelle Einführung in KI-Theorie und angewandte Praxis: Grundlagen, Transformer, NLP, ML, DL, Wettbewerbe. Enthält reichlich Kommentare und Datensätze, damit jeder es verstehen und nachbilden kann.
Einstiegskurse in Deep Learning, Fortgeschrittene Kurse, Spezialkurse, akademische Fälle, industrielle Praxisbeispiele, Deep-Learning-Wissens-Enzyklopädie und Interview-Fragenbank Der Kurs, Fall und das Wissen von Deep Learning und KI
Open-Source-Inferenzserver und Produktionscluster für alle Modelle, die Ihr Agent benötigt.
🛠 All-in-one webbasiertes IDE, spezialisiert auf Machine Learning und Data Science.
Open-Source-KI-Humanizer: Formuliert KI-generierte Texte so um, dass sie natürlich und menschlich klingen. LLM-gestützte Überarbeitung und Übersetzung mit mehreren Engines, inklusive Schritt-für-Schritt-Protokollen. Python-CLI, n8n und Docker.
TextAttack 🐙 ist ein Python-Framework für adversariale Angriffe, Datenaugmentation und Modelltraining in der NLP https://textattack.readthedocs.io/en/master/
[TMLR] Eine kuratierte Liste von Language-Modeling-Forschungen für Code (und andere Software-Engineering-Aktivitäten) sowie zugehörige Datensätze.
Agentenfähigkeit zur Überarbeitung von KI-generiertem Japanisch in natürliches Japanisch
100 Beispiele für Deep Learning, Deep Learning DL, Bildklassifizierung, Objekterkennung, Objektdetektion, Verarbeitung natürlicher Sprache NLP, Textklassifizierung, TensorFlow, PyTorch
:book: Eine Golang-Bibliothek für Textverarbeitung, einschließlich Tokenisierung, Wortarten-Tagging und Extraktion benannter Entitäten.
Rust-native, einsatzbereite NLP-Pipelines und transformerbasierte Modelle (BERT, DistilBERT, GPT2, ...)
Chinesische LLaMA 1&2, Chinesische Falcon Basismodelle; ChatFlow chinesisches Dialogmodell; Chinesisches OpenLLaMA-Modell; NLP-Vortraining/Anweisungsfeinabstimmung Datensätze
Wir möchten ein Repository erstellen, um die Verwendung von Transformatoren im Chinesischen zu veranschaulichen
Deep Learning und Deep Reinforcement Learning Forschungspapiere und einige Codes
Behandelt Vortrainingsdaten, Tokenizer, Transformer, MoE, verteiltes Training, Skalierungsgesetze, Inferenz und Alignment. 6 aufeinander aufbauende Programmieraufgaben für das ganzheitliche Lernen von LLMs.
🔮 Ein erfrischender funktionaler Ansatz für Deep Learning, kompatibel mit Ihren bevorzugten Bibliotheken
aeneas ist eine Python/C-Bibliothek und ein Set von Tools, um Audio und Text automagisch zu synchronisieren (aka Forced Alignment)
Eine Bibliothek zum Debuggen/Inspektieren von Machine-Learning-Klassifikatoren und Erklären ihrer Vorhersagen
Effiziente, schnelle mehrsprachige NLP- und Textsegmentierung mit Go; unterstützt Englisch, Chinesisch, Japanisch und weitere Sprachen.
Eine einheitliche Bibliothek für parametereffizientes und modulares Transferlernen
Text Mining- und Preprocessing-Tools (Textbereinigung, Entdeckung neuer Wörter, Sentiment-Analyse, Entity-Recognition-Linking, Keyword-Extraktion, Wissensextraktion, Syntaxanalyse usw.), unüberwachte oder schwach überwachte Methoden