#nlp Repository
494 repository in totale
Tutorial curati e risorse per modelli linguistici di grandi dimensioni, pittura AI e altro ancora.
LightLLM รจ un framework basato su Python per l'inferenza e il serving di LLM (Large Language Model), noto per il suo design leggero, la facile scalabilitร e le prestazioni ad alta velocitร .
Questo progetto riproduce il libro Dive Into Deep Learning (https://d2l.ai/), adattando il codice da MXNet a PyTorch.
MNBVC (Massive Never-ending BT Vast Chinese corpus) super corpus di lingua cinese ad altissima scala. Al livello dei dati da 40T utilizzati per l'addestramento di chatGPT. Il set di dati MNBVC non solo include la cultura mainstream, ma anche dati da ogni cultura di nicchia e persino dal linguaggio marziano. Il set di dati MNBVC include notizie, saggi, romanzi, libri, riviste, tesi, copioni, post, wiki, poesie antiche, testi di canzoni, descrizioni di prodotti, barzellette, episodi imbarazzanti, registri di chat e ogni altra forma di dati testuali puri in cinese.
AdalFlow: La libreria per creare e ottimizzare automaticamente le applicazioni LLM.
Riassunto e studio dei materiali di ChatGPT, in continuo aggiornamento......
"Build a Large Language Model (From Scratch)" รจ un ebook che approfondisce i principi e l'implementazione dei modelli linguistici di grandi dimensioni, adatto a chi desidera comprendere a fondo le architetture, i processi di addestramento e lo sviluppo di applicazioni di modelli di grandi dimensioni come GPT. Per consentire a piรน lettori cinesi di accedere a questo prezioso materiale didattico, ho deciso di tradurlo in cinese e di condividerlo in open source tramite GitHub.
Processo decisionale AI superveloce ed elaborazione intelligente di dati multimodali.
Esperienza di colloqui compilate dai membri di Datawhale, i contenuti includono machine learning, CV, NLP, raccomandazioni, sviluppo ecc., benvenuti tutti a star
Un pacchetto cinese di pre-elaborazione e parsing NLP, accurato, efficiente e facile da usare Un pacchetto cinese di pre-elaborazione e parsing NLP www.jionlp.com
Soluzioni NLP cinesi (grandi modelli, dati, modelli, addestramento, inferenza)
Tutorial e risorse curati per Large Language Models, Text2SQL, Text2DSL, Text2API, Text2Vis e altro ancora.
[EMNLP 2021] SimCSE: Apprendimento contrastivo semplice di embedding di frasi https://arxiv.org/abs/2104.08821
Guida rapida alla teoria e all'applicazione pratica dell'IA: concetti di base, Transformer, NLP, ML, DL, competizioni. Include abbondanti annotazioni e set di dati, con l'obiettivo che chiunque possa comprendere e riprodurre.
Corsi introduttivi di deep learning, corsi avanzati, corsi speciali, casi accademici, casi di pratica industriale, enciclopedia della conoscenza di deep learning e banca di domande per colloqui Il corso, il caso e la conoscenza di Deep Learning e AI
Server di inferenza open source e cluster di produzione per tutti i modelli di cui il tuo agente ha bisogno.
๐ IDE tutto-in-uno basato su web specializzato in machine learning e data science.
Humanizer AI open source: riscrive i testi generati dallโIA rendendoli naturali e simili a quelli scritti da una persona. Riscrittura con LLM e traduzione con piรน motori, con tracciamento passo dopo passo. Python CLI, n8n e Docker.
TextAttack ๐ รจ un framework Python per attacchi avversari, augmentazione dei dati e addestramento del modello in NLP https://textattack.readthedocs.io/en/master/
[TMLR] Un elenco curato di ricerche sulla modellazione del linguaggio per il codice (e altre attivitร di ingegneria del software), oltre a set di dati correlati.
Skill dellโagente per perfezionare il giapponese generato dallโIA e renderlo naturale
100 esempi di deep learning, deep learning DL, classificazione di immagini, riconoscimento di oggetti, rilevamento di oggetti, elaborazione del linguaggio naturale NLP, classificazione di testo, TensorFlow, PyTorch
:book: Una libreria Golang per l'elaborazione del testo, che include tokenizzazione, etichettatura delle parti del discorso ed estrazione di entitร nominate.
Pipeline NLP native di Rust pronti all'uso e modelli basati su transformer (BERT, DistilBERT, GPT2, ...)
Modelli base Chinese-LLaMA 1&2, Chinese-Falcon; Modello di dialogo cinese ChatFlow; Modello Chinese-OpenLLaMA; Dataset per pre-training/fine-tuning su istruzioni NLP
vogliamo creare un repo per illustrare l'uso dei transformer in cinese
Articoli di ricerca su Deep Learning e deep reinforcement learning e alcuni codici
Copre i dati di pre-addestramento, i tokenizer, i Transformer, il MoE, lโaddestramento distribuito, le leggi di scaling, lโinferenza e lโallineamento. 6 esercizi di programmazione progressivi per apprendere gli LLM a 360 gradi.
๐ฎ Un approccio funzionale rinfrescante al deep learning, compatibile con le tue librerie preferite
aeneas รจ una libreria Python/C e un set di strumenti per sincronizzare automagically audio e testo (aka forced alignment)
Una libreria per il debug/il controllo dei classificatori di machine learning e la spiegazione delle loro previsioni
Elaborazione del linguaggio naturale multilingue e segmentazione del testo efficienti e veloci in Go; supporta lโinglese, il cinese, il giapponese e altre lingue.
Una libreria unificata per l'apprendimento per trasferimento efficiente in termini di parametri e modulare
Strumenti di data mining testuale e pre-elaborazione (pulizia del testo, scoperta di nuove parole, analisi del sentiment, riconoscimento e collegamento di entitร , estrazione di parole chiave, estrazione di conoscenza, analisi sintattica, ecc.), metodi non supervisionati o debolmente supervisionati