Git Stars Git Stars

#text-tokenization Репозитории

Откройте для себя 3 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #text-tokenization, с общим числом 3,189 звёзд (в среднем 1,063 на проект). Лидером этой темы является microsoft/BlingFire, набравший 1,877 звёзд.

3
Всего репозиториев
3,189
Всего звезд
1,063
Среднее количество звезд на репозиторий
Языки программирования: C++ Rust Go

Всего репозиториев: 3

1
microsoft/BlingFire

Молниеносно быстрая библиотека для работы с конечными автоматами и регулярными выражениями.

microsoft
⭐ 1,877 C++ 👤 microsoft Organization 🕐 Обновлено 2024-12-08 📅 Создано 2019-03-13
2
unicode-rs/unicode-segmentation

Графемные кластеры и границы слов в соответствии с правилами UAX#29

unicode-rs
⭐ 687 Rust 👤 unicode-rs Organization 🕐 Обновлено 2026-11-10 📅 Создано 2015-04-13
3
alasdairforsythe/tokenmonster

Нежадный токенизатор подслов и тренер словаря для Python, Go, C++ и Javascript

alasdairforsythe
⭐ 626 Go 👤 alasdairforsythe User 🕐 Обновлено 2026-07-10 📅 Создано 2023-05-12

Часто задаваемые вопросы

1

Какой репозиторий по теме #text-tokenization наиболее популярен на GitHub?

Самый высоко оценённый проект с открытым исходным кодом по теме #text-tokenization на GitHub — microsoft/BlingFire, набравший 1,877 звёзд. Молниеносно быстрая библиотека для работы с конечными автоматами и регулярными выражениями.

2

Какие языки программирования чаще всего используются в репозиториях по теме #text-tokenization?

Среди наиболее высоко оценённых проектов по теме #text-tokenization на GitHub чаще всего используются языки программирования C++, Rust, Go.

3

Как рассчитывается рейтинг репозиториев по теме #text-tokenization?

Мы отслеживаем 3 активных репозиториев с открытым исходным кодом, отмеченных тегом #text-tokenization (500 и более звёзд), с общим числом 3,189 звёзд и в среднем 1,063 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.