#parquet リポジトリ
#parquetのタグが付いた、GitHub上の45件のアクティブなオープンソースリポジトリをご覧ください。合計スター数は105,539個で、プロジェクトあたりの平均は2,345個です。このトピックをリードしているのは、17,543個のスターを獲得しているquestdb/questdbです。
リポジトリ合計45件
Parseableは、Rustで構築され、データレイクアーキテクチャを採用したオープンソースの統合インフラストラクチャ可観測性プラットフォームです。アプリケーション、エージェント、システム全体にわたるログ、メトリクス、トレース、イベントを追跡し、列指向のテレメトリ圧縮によってストレージコストを最大90%削減します。
OLake Go:データベース、Kafka、S3からApache IcebergおよびParquetへのオープンソースのレプリケーションツールです。データソース:Postgres、MySQL、MongoDB、Oracle、MSSQL、DB2、Kafka、S3。旧名称はdatazip-inc/olakeです。テーブルのメンテナンス機能はdatazip-inc/olake-fusionにあります。
S3、PostgreSQL、SQLite、Apache Iceberg および Delta Lake を備えた Apache Kafka® 互換ブローカー
Petastorm ライブラリは、Apache Parquet 形式のデータセットからディープラーニングモデルの単一マシンまたは分散トレーニングと評価を可能にします。Tensorflow、Pytorch、PySpark などの ML フレームワークをサポートし、純粋な Python コードから使用できます。
Quiltは、AWS上の科学的データ管理プラットフォームで、チームとAIが深くバージョン管理され、文脈豊富なデータパッケージを通じてデータを見つけ、信頼し、再利用することを支援します。
中国株式市場(A株)向けのオープンソース・ローカルデータレイク。上海・深セン市場の株価、A株データ、金融データを、クオンツ研究・取引・バックテスト向けに提供します。財務データ、先物データ、資金フロー、公告、指数、業種、マクロデータを収録。毎日更新される86のデータセットに、調整後価格と過去の構成銘柄を標準搭載し、行単位のデータ来歴、PIT、MCPネイティブ対応を備えています。登録不要、トークン不要。セルフホスト可能。クオンツ研究、バックテスト、AIエージェント向けのオープンソース中国株式市場データレイク。
ADAMは、Apache Avro、Apache Spark、Apache Parquetを使用して構築された特殊なファイル形式を持つゲノム解析プラットフォームです。Apache 2ライセンス。
.NET 用の ETL フレームワーク (CSV、Flat、Xml、JSON、Key-Value、Parquet、Yaml、Avro 形式ファイルのパーサー / ライター)
80以上の DevOps & データ CLI ツール - AWS、GCP、GCF Python Cloud Functions、ログ匿名化ツール、Spark、Hadoop、HBase、Hive、Impala、Linux、Docker、Spark データ コンバーター & バリデータ (Avro/Parquet/JSON/CSV/INI/XML/YAML)、Travis CI、AWS CloudFormation、Elasticsearch、Solr など。
保存しておきたいテレメトリデータのための、オープンソースでSQLネイティブな時系列データベース。毎秒3,800万件以上のレコードを取り込み、毎秒2,500万行以上をクエリできます。InfluxDB Line ProtocolおよびTelegrafと互換。お使いのストレージにオープンなParquet形式で保存。単一バイナリ。S3/Azureをネイティブサポート。エアギャップ環境に対応。AGPL-3.0。
PostgreSQL内からS3、Azure Blob Storage、Google Cloud Storage、http(s)ストア、ローカルファイルまたは標準入出力ストリームへの/からのParquetのコピー
Graph Data Science: Pandas、NetworkX、RAPIDS、RDFlib、pySHACL、PyVis、morph-kgc、pslpython、pyarrow などの一般的なグラフライブラリと統合された、知識グラフ構築のための Python の抽象化レイヤーです。
ブラウザで動作する完全オープンソースのDuckDBワークベンチ。SQLエディタ、ノートブック、チャート、AIアシスタント。インストール不要、サインアップ不要、バックエンド不要 — データがタブから出ることはありません。
select * from logs; Tailpipeは、DuckDBを搭載した、即座のログインサイトを提供するオープンソースSIEMです。ターミナルから直接、数百万件のイベントを数秒で分析できます。
Tauriをベースにした、DuckDB、SQLite、PostgreSQL、MySQL、ClickhouseなどのCSV/Parquetファイルやデータベース用の高速ビューア
大規模な JSON 配列/設定、YAML、Apache Arrow、Avro、Parquet & Excel データファイルをインポート 📤 閲覧 🔎 スライス 🔪 ダイシング 🎲 チャート 📊 & エクスポート 📥 するための Data Preview 🈸 拡張機能
C++20で記述された実験的な組み込みSQLエンジン。Parquet、CSV、JSON、Arrow、Avro、SQLite、ExcelファイルをSQLで直接インプロセスでクエリ可能。初期段階。
reth-indexer は reth DB から直接読み込み、データを従来のデータベースおよび代替データベース/データストア(postgres, GCP bigquery など)にインデックス化します。すべて簡単な設定ファイルでデコードされ、追加のセットアップなしで、データをクエリするための API を公開します。
よくある質問
GitHubで最も人気のある#parquetリポジトリは何ですか?
GitHubで最も上位にランクインしているオープンソースの#parquetプロジェクトは、17,543個のスターを獲得しているquestdb/questdbです。QuestDBは、高性能なオープンソースの時系列データベースです
#parquetリポジトリで最もよく使われているプログラミング言語は何ですか?
GitHubで上位にランクインしている#parquetプロジェクトでは、Rust, Go, Python, C++が最も一般的なプログラミング言語です。
#parquetリポジトリのランキングはどのように算出されていますか?
#parquetのタグが付いた45件のアクティブなオープンソースリポジトリ(スター500個以上)を追跡しています。合計スター数は105,539個で、リポジトリあたりの平均は2,345個です。ランキングはGitHub APIからのデータに基づいて毎日更新されます。