#parquet 仓库
探索 45 个标记为 #parquet 的活跃开源 GitHub 仓库,它们累计获得 105,539 个 Star(平均每个项目 2,345 个)。该主题的领先项目是 questdb/questdb,拥有 17,543 个 Star。
共 45 个仓库
Parseable 是一个开源的统一基础设施可观测性平台,基于 Rust 构建并采用数据湖架构。它能够跟踪跨应用程序、代理和系统的日志、指标、追踪和事件,并通过列式遥测压缩技术将存储成本降低高达 90%。
OLake Go:一款开源工具,可将数据库、Kafka 和 S3 中的数据复制到 Apache Iceberg 和 Parquet。数据源:Postgres、MySQL、MongoDB、Oracle、MSSQL、DB2、Kafka、S3。原名 datazip-inc/olake。表维护功能位于 datazip-inc/olake-fusion。
Petastorm 库支持在 Apache Parquet 格式的数据集上,对深度学习模型进行单机或分布式训练和评估。它支持 Tensorflow、Pytorch 和 PySpark 等机器学习框架,并可从纯 Python 代码中使用。
开源中国股市(A股)本地数据湖:沪深股票行情、A股股票数据与金融数据,面向量化研究、量化交易与回测,涵盖财务数据、期货数据、资金流向、公告、指数、行业与宏观数据。86 个每日更新的数据集,内置复权行情与历史成分数据,支持行级溯源、PIT 和原生 MCP。免注册、免 Token,可自托管。面向量化研究、回测与 AI 智能体的开源中国股市数据湖。
ADAM 是一个基因组学分析平台,使用了 Apache Avro、Apache Spark 和 Apache Parquet 构建的专业文件格式。Apache 2 许可。
80+ DevOps 和数据 CLI 工具 - AWS、GCP、GCF Python Cloud Functions、日志匿名化器、Spark、Hadoop、HBase、Hive、Impala、Linux、Docker、Spark 数据转换器和验证器 (Avro/Parquet/JSON/CSV/INI/XML/YAML)、Travis CI、AWS CloudFormation、Elasticsearch、Solr 等。
开源、原生支持 SQL 的时序数据库,专为需要长期保存的遥测数据打造。每秒写入 3800 万条以上记录,每秒查询 2500 万行以上。兼容 InfluxDB Line Protocol 和 Telegraf。数据以开放的 Parquet 格式存储在您的存储设备上。单一二进制文件。原生支持 S3/Azure。可在隔离网络环境中部署。AGPL-3.0。
从 PostgreSQL 内部复制到/从 S3、Azure Blob Storage、Google Cloud Storage、http(s) 存储、本地文件或标准输入流的 Parquet
Graph Data Science:一个 Python 中的抽象层,用于构建知识图谱,与流行的图谱库集成 – 基于 Pandas、NetworkX、RAPIDS、RDFlib、pySHACL、PyVis、morph-kgc、pslpython、pyarrow 等。
select * from logs; Tailpipe 是一个开源 SIEM,可提供即时的日志洞察,由 DuckDB 提供支持。直接从您的终端在几秒钟内分析数百万条事件。
Data Preview 🈸 扩展,用于导入 📤 查看 🔎 切片 🔪 骰子 🎲 图表 📊 和导出 📥 大型 JSON 数组/配置、YAML、Apache Arrow、Avro、Parquet 和 Excel 数据文件
一个基于 C++20 的实验性嵌入式 SQL 引擎。支持直接使用 SQL 在进程内查询 Parquet、CSV、JSON、Arrow、Avro、SQLite 和 Excel 文件。处于早期阶段。
reth-indexer 直接从 reth 数据库读取数据,并将数据解码后索引到传统和替代数据库/数据存储(postgres, GCP bigquery 等)中,所有操作仅需一个简单的配置文件即可完成,无需额外设置,同时公开了一个可用于查询数据的 API。
常见问题解答
GitHub 上最受欢迎的 #parquet 仓库是什么?
GitHub 上排名第一的开源 #parquet 项目是 questdb/questdb,拥有 17,543 个 Star。QuestDB 是一个高性能、开源的时间序列数据库
#parquet 仓库中最常使用的编程语言有哪些?
在 GitHub 上排名靠前的 #parquet 项目中,最常见的编程语言是 Rust, Go, Python, C++。
#parquet 仓库的排名是如何计算的?
我们跟踪了 45 个标记为 #parquet 且拥有 500+ 个 Star 的活跃开源仓库,共计获得 105,539 个 Star,平均每个仓库拥有 2,345 个 Star。排名每日根据 GitHub API 更新。