#nlp Репозитории
Всего репозиториев: 494
CoreNLP: Набор инструментов Java для основных задач NLP: токенизация, сегментация предложений, NER, разбор, кореференция, анализ настроений и т. д.
Запускайте LLM дома в стиле BitTorrent. Дообучение и инференс до 10 раз быстрее, чем при выгрузке.
Реализация модели Transformer из "Attention is All You Need" на PyTorch.
Простой, Pythonic, обработка текста: анализ настроений, разметка частей речи, извлечение именных фраз, перевод и многое другое.
FreeAskInternet — это совершенно бесплатный, ЧАСТНЫЙ и ЛОКАЛЬНО работающий агрегатор поиска и генератор ответов, использующий МНОЖЕСТВО LLM, без необходимости в GPU. Пользователь может задать вопрос, и система выполнит многодвижковый поиск и объединит результаты поиска с LLM, чтобы сгенерировать ответ на основе результатов поиска. Все это БЕСПЛАТНО для использования.
Список статей 86-страничной обзорной статьи SCIS «The Rise and Potential of Large Language Model Based Agents: A Survey» за авторством Zhiheng Xi et al.
Библиотека Python от Stanford NLP для токенизации, сегментации предложений, NER и парсинга множества человеческих языков
Станьте выдающимся исследователем/инженером в области ИИ/МО с помощью этого нестандартного учебника, который охватывает математику, вычисления и машинное обучение на основе интуиции.
Инструмент Python и командной строки для сбора текста и метаданных в Интернете: Краулинг, скрейпинг, извлечение, вывод в формате CSV, JSON, HTML, MD, TXT, XML
Китайские большие языковые модели LLaMA-2 и Alpaca-2, Фаза II + модели с сверхдлинным контекстом 64K (Chinese LLaMA-2 & Alpaca-2 LLMs with 64K long context models)
Открытая библиотека для систем диалогов end-to-end на основе глубокого обучения и чат-ботов.
Официально поддерживается, поддерживается PaddlePaddle, включая CV, NLP, Speech, Rec, TS, большие модели и так далее.
Официальная реализация OCR-free Document Understanding Transformer (Donut) и Synthetic Document Generator (SynthDoG), ECCV 2022
Навык Claude, который редактирует написанный ИИ корейский текст так, чтобы он звучал по-человечески — гуманизатор корейских текстов, созданных ИИ: обнаруживает и переписывает переводной стиль, механический параллелизм и ещё 71 признак текста, сгенерированного ИИ
Библиотека для автономного перевода с открытым исходным кодом, написанная на Python
Библиотека NLP для создания ботов с извлечением сущностей, анализом тональности, автоматическим определением языка и многим другим
Этот репозиторий представляет собой тщательно подобранную коллекцию ссылок на различные курсы и ресурсы по искусственному интеллекту (ИИ)
👮♂️Инструмент для фильтрации чувствительных слов для Java.(Чувствительные слова/запрещенные слова/незаконные слова/грязные слова. Высокопроизводительный фреймворк Java для фильтрации чувствительных слов, реализованный на основе алгоритма DFA. Встроенная поддержка классификации и уровней тегов слов. Не публикуйте контент, связанный с политикой, рекламой, маркетингом, обходом файрвола, нарушением национальных законов и т.д. Высокопроизводительный компонент обнаружения и фильтрации чувствительных слов, с функциями взаимного преобразования упрощенного и традиционного китайского, преобразования полноширинных и половинных символов, преобразования китайских иероглифов в пиньинь, нечеткого поиска и т.д.
Китайская версия CLIP, которая обеспечивает китайский межмодальный поиск и генерацию представлений.
ИИ для здравоохранения с приоритетом локальной обработки: распознавание клинических именованных сущностей (NER) и обезличивание персональных данных (PII) в соответствии с HIPAA на оборудовании под вашим контролем. Более 2 200 медицинских моделей, обработка PII на основе моделей для 35 языков, а также среды выполнения для Python, MLX, Android и браузера. SDK по лицензии Apache-2.0.
Извлекать ключевые слова из предложений или заменять ключевые слова в предложениях.
Сверточная нейронная сеть для классификации текста в TensorFlow
Крутые предварительно обученные китайские модели NLP, Сборник высококачественных китайских предварительно обученных моделей & больших моделей & мультимодальных моделей & больших языковых моделей
Список распространённых стоп-слов на китайском (список стоп-слов ХГУПИ, список стоп-слов Байду и т.д.)
EasyR1: Эффективная, масштабируемая платформа обучения RL с несколькими модальностями на основе veRL
Argilla — это инструмент для совместной работы инженеров по ИИ и экспертов в предметной области для создания высококачественных наборов данных
:herb: Китайские синонимы: Чат-бот, Интеллектуальный набор инструментов для Q&A
Репозиторий для BenCao [оригинальное название: HuaTuo (华驼)], Настройка инструкций больших языковых моделей с использованием китайских медицинских знаний. Репозиторий модели 本草 (оригинальное название: 华驼), настройка инструкций больших языковых моделей на основе китайских медицинских знаний
text2vec, текст в вектор. Инструмент представления текста в виде векторов, преобразующий текст в матрицы векторов, реализующий модели Word2Vec, RankBM25, Sentence-BERT, CoSENT для представления текста и расчета сходства текста, готов к использованию из коробки.
Библиотека C для разбора/нормализации уличных адресов по всему миру. Работает на основе статистического НЛП и открытых геоданных.
Руководство по инжинирингу запросов, генеративному ИИ и LLM от Learn Prompting | Присоединяйтесь к нашему Discord для самого большого сообщества по изучению инжиниринга запросов
Промпт-инжиниринг | Управление версиями промптов | Используйте GPT или другие модели на основе промптов для получения структурированных выходных данных. Присоединяйтесь к нашему Discord для обсуждения промпт-инжиниринга, LLM и других новейших исследований
Учебники по началу работы с PyTorch и TorchText для анализа настроений.
«Большие языковые модели» авторы: Чжао Синь, Ли Цзюньи, Чжоу Кунь, Тан Тяньи, Вэнь Цзижун