#data-engineering リポジトリ
リポジトリ合計152件
Apache Hamilton は、データサイエンティストやエンジニアが、リネージ/トレーシングとメタデータをエンコードする、テスト可能でモジュール化された自己文書化データフローを定義するのに役立ちます。Python が実行されるすべての場所で実行およびスケーリングされます。
記事、リスティング、検索結果、レコメンデーションのユーザーエンゲージメントを高めるローコード機械学習パーソナライズドランキングサービス。フレンドリーな学習ランキングエンジン
データエンジニアリングを学ぶのに最適な場所です。データエンジニアリングコミュニティによって構築および維持されています。
👾 naoは、オープンソースのエージェント型BIで第1位です。(1) nao-core CLIでコンテキストを作成し、(2) すべての人が使えるnaoチャットインターフェースをデプロイします。
データエンジニアリングの未来 — 現代的なデータスタックのためのCLIベースのSQLクライアントであり、データに対してAIネイティブなコンテキストエンジニアリングを可能にします。
データサイエンス、データエンジニアリング、機械学習、ディープラーニング、コンピュータサイエンス、プログラミング、ソフトウェアエンジニアリングなどに関する180以上のYouTubeチャンネルの包括的なリスト。
無料の30時間SQLコースの教材:SQL Server、MySQL、PostgreSQLのデータベース、全41章のすべてのクエリ、そしてスライド。
MLRun は、オープンソースの MLOps プラットフォームで、ML アプリケーションのライフサイクル全体にわたる継続的な ML アプリケーションを迅速に構築・管理します。MLRun は、開発および CI/CD 環境に統合され、本番データ、ML パイプライン、およびオンラインアプリケーションの配信を自動化します。
ktx はデータおよび分析エージェントのための実行可能なコンテキストレイヤーです 🐙 Claude Code、Codex、またはその他のAIエージェントが、あなたの会社の完全なコンテキストを備えて分析データベースを正確にクエリできるようにします
https://www.dolthub.com/repositories/chenditc/investment_data のスクリプトとドキュメント
自社サーバーまたはクラウドにデプロイできるオープンソースの ETL/ELT。DuckDB を基盤に構築:ノーコード/ローコードのビジュアルパイプラインまたは SQL、446 のコンポーネント、dbt、CDC、データ品質、リバース ETL、データリネージュ、AI エージェント向け MCP に対応。ベンダーのクラウド不要、行単位の課金なし。
トップテック企業からの300以上のエンジニアリングブログ記事のキュレーションされたコレクション。最高のエンジニアリングチームが大規模で現実世界の問題をどのように解決するかを学びます。
初のオープンソースのデータ発見およびオブザーバビリティプラットフォーム。データプラクティショナーの生活を楽にし、ビジネスに集中できるようにします。
書籍に付属するソースコード:Google Cloud Platform のデータ サイエンス、Valliappa Lakshmanan、O'Reilly 2017
Quiltは、AWS上の科学的データ管理プラットフォームで、チームとAIが深くバージョン管理され、文脈豊富なデータパッケージを通じてデータを見つけ、信頼し、再利用することを支援します。
Snowflake、Databricks、BigQuery、Kafkaなど、さらに15以上のプラットフォームに対応したオープンソースのデータコントラクトテスト。Open Data Contract Standard(ODCS)に基づいて構築。MITライセンス。
2つのソースシステム(CRMとERP)から、ブロンズ、シルバー、ゴールドの各レイヤーを経て、SQL Serverにデータウェアハウスを構築します。無料の完全版プロジェクトのファイルとスクリプト。