#attention-mechanisms Repository
Scopri 39 repository GitHub open source attivi contrassegnati con #attention-mechanisms, che raccolgono un totale di 77,773 stelle (con una media di 1,994 stelle per progetto). Il progetto leader di questo argomento è lucidrains/PaLM-rlhf-pytorch, con 7,858 stelle.
39 repository in totale
Implementazione di RLHF (Reinforcement Learning with Human Feedback) sull'architettura PaLM. Fondamentalmente ChatGPT ma con PaLM
[ICLR 2024] Modelli Linguistici Efficienti in Streaming con Pozzi di Attenzione
Un elenco definitivo e completo di articoli su Vision Transformer/Attention, inclusi articoli, codici e siti Web correlati
Deformable DETR: Transformer deformabili per il rilevamento di oggetti end-to-end.
Sintesi di articoli correlati sull'attenzione visiva. Il codice correlato verrà gradualmente rilasciato su Jittor.
Implementazione di AudioLM, un approccio di modellazione linguistica SOTA per la generazione audio da Google Research, in Pytorch
Implementazione in PyTorch di Self-Attention Generative Adversarial Networks (SAGAN)
Implementazione di Toolformer, Language Models That Can Use Tools, di MetaAI
Implementazione di Make-A-Video, il nuovo generatore text-to-video SOTA di Meta AI, in Pytorch
Rete Convoluzionale Grafica Temporale per la Predizione del Flusso di Traffico Urbano Metodo
[CVPR 2025] Apprendimento di Campi di Flusso nell'Attenzione per la Generazione Controllabile di Immagini di Persone
I moduli plug-and-play più completi per l'intera rete nel 2025, condivisi gratuitamente! CVPR2025, AAAI2025, ICLR2025, TNNLS2025, arXiv2025...... Comprende tutti i campi dell'intelligenza artificiale (machine learning, deep learning, ecc.), adatti per classificazione di immagini, rilevamento di oggetti, segmentazione di istanze, segmentazione semantica, segmentazione panottica, stima della posa, segmentazione di immagini mediche, segmentazione di oggetti video, ritaglio di immagini, editing di immagini, tracciamento di singoli oggetti, tracciamento di oggetti multipli, riconoscimento di persone, RGBT, rimozione del rumore dall'immagine, rimozione della pioggia, rimozione della nebbia, rimozione delle ombre, rimozione della sfocatura, super risoluzione, rimozione dei riflessi, rimozione dei motivi moiré, recupero di immagini, restauro di immagini, recupero di immagini iperspettrali, fusione di immagini, colorazione di immagini, imaging ad alta gamma dinamica, compressione video e di immagini, nuvole di punti 3D, rilevamento di oggetti 3D, segmentazione semantica 3D, stima della posa 3D, ecc. e altri compiti relativi all'intelligenza artificiale come l'elaborazione del linguaggio naturale, i modelli linguistici di grandi dimensioni, il multimodale, ecc. Aggiornamento continuo......
CVPR2023 - Attivazione di più pixel nel Transformer di Super-Risoluzione di Immagini TPAMI - HAT: Transformer di Attenzione Ibrida per il Restauro di Immagini
LLM Transparency Tool (LLM-TT), uno strumento interattivo open-source per l'analisi del funzionamento interno dei modelli linguistici basati su Transformer. *Dai un'occhiata alla demo su* https://huggingface.co/spaces/facebook/llm-transparency-tool-demo
Modelli Fondazionali Multimodali di Frontiera per la Comprensione di Immagini e Video
Implementazione di Band Split Roformer, una rete di attenzione SOTA per la separazione di sorgenti musicali da ByteDance AI Labs
[ICLR 2025] Samba: Semplici modelli ibridi a spazio di stati per efficiente modellazione del linguaggio a contesto illimitato
Un elenco di alcuni lavori recenti sulla compressione dei token per Vit e VLM
Implementazione di Muse: Generazione da Testo a Immagine tramite Trasformatori Generativi Mascherati in Pytorch
Implementazione di MeshGPT, generazione di mesh SOTA utilizzando Attention, in Pytorch
Implementazione di Phenaki Video, che utilizza Mask GIT per produrre video guidati da testo della durata massima di 2 minuti in Pytorch
Implementazione dell'attenzione plug-in e play da "LongNet: Scaling Transformers to 1,000,000,000 Tokens"
PyTorch Dual-Attention LSTM-Autoencoder per serie temporali multivariate
Implementazione di MEGABYTE, Previsione di sequenze da un milione di byte con trasformatori multiscala, in Pytorch
Implementazione di un singolo strato del MMDiT, proposto in Stable Diffusion 3, in Pytorch
Implementazione non ufficiale di iTransformer - SOTA Time Series Forecasting utilizzando reti di attenzione, da Tsinghua / Ant group
🦖Implementazione Pytorch di popolari meccanismi di attenzione, Vision Transformers, modelli simili a MLP e CNN.🔥🔥🔥
Un'implementazione dell'attenzione locale a finestra per la modellazione del linguaggio
Domande frequenti
Qual è il repository #attention-mechanisms più popolare su GitHub?
Il progetto open source #attention-mechanisms più alto in classifica su GitHub è lucidrains/PaLM-rlhf-pytorch, con 7,858 stelle. Implementazione di RLHF (Reinforcement Learning with Human Feedback) sull'architettura PaLM. Fondamentalmente ChatGPT ma con PaLM
Quali linguaggi di programmazione sono più utilizzati nei repository #attention-mechanisms?
Tra i progetti #attention-mechanisms più alti in classifica su GitHub, i linguaggi di programmazione più comuni sono Python, Jupyter Notebook, TypeScript.
Come viene calcolata la classifica dei repository #attention-mechanisms?
Monitoriamo 39 repository open source attivi contrassegnati con #attention-mechanisms (500+ stelle), per un totale di 77,773 stelle e una media di 1,994 stelle per repository. Le classifiche vengono aggiornate quotidianamente tramite l’API di GitHub.