#hadoop リポジトリ
#hadoopのタグが付いた、GitHub上の43件のアクティブなオープンソースリポジトリをご覧ください。合計スター数は238,277個で、プロジェクトあたりの平均は5,541個です。このトピックをリードしているのは、28,776個のスターを獲得しているdonnemartin/data-science-ipython-notebooksです。
リポジトリ合計43件
データサイエンスPythonノートブック:ディープラーニング(TensorFlow、Theano、Caffe、Keras)、scikit-learn、Kaggle、ビッグデータ(Spark、Hadoop MapReduce、HDFS)、matplotlib、pandas、NumPy、SciPy、Pythonの基本、AWS、およびさまざまなコマンドライン。
Luigi は、複雑なバッチジョブのパイプラインを構築するのに役立つ Python モジュールです。依存関係の解決、ワークフロー管理、可視化などを処理します。また、Hadoop サポートが組み込まれています。
🏆 実時間でノーコード、強力かつ安全なORM 🚀 バックエンドがコード不要でAPIとドキュメントを提供し、フロントエンド(クライアント)はレスポンスJSONをカスタマイズできます 🏆 実時間、ゼロコード、フル機能・高度に安全なORMライブラリ 🚀 バックエンドAPIとドキュメントはコード不要で、フロントエンド(クライアント)は返却JSONのデータと構造をカスタマイズできます。
JVMを使用してディープラーニングモデルをデプロイおよびトレーニングするためのツールのスイート。主な機能には、Keras、TensorFlow、ONNX/PyTorchのモデルインポート、数学コードを実行するためのモジュール式で軽量なC++ライブラリ、コアC++ライブラリ上に構築されたJavaベースの数学ライブラリが含まれます。また、SameDiff:ディープラーニングの実行のためのPyTorch/TensorFlowライクなライブラリも含まれています...
1200以上のDevOps Bashスクリプト - AWS、GCP、Kubernetes、Docker、CI/CD、API、SQL、PostgreSQL、MySQL、Hive、Impala、Kafka、Hadoop、Jenkins、GitHub、GitLab、BitBucket、Azure DevOps、TeamCity、Spotify、MP3、LDAP、コード/ビルドのリンティング、Linux、Mac、Python、Perl、Ruby、NodeJS、Golangのパッケージ管理、高度なドットファイル:.bashrc、.vimrc、.gitconfig、.screenrc、tmux..
H2Oは、オープンソース、分散型、高速、スケーラブルな機械学習プラットフォームです。ディープラーニング、勾配ブースティング(GBM)およびXGBoost、ランダムフォレスト、一般化線形モデリング(Elastic Netを使用したGLM)、K-Means、PCA、一般化加法モデル(GAM)、RuleFit、サポートベクターマシン(SVM)、スタックドアンサンブル、自動機械学習(AutoML)など。
DataSphereStudio は、データアプリケーションの開発および管理のためのワンストップポータルで、データ交換、デセンシタイズ/クリーニング、分析/マイニング、品質測定、可視化、タスクスケジューリングなどのシナリオをカバーします。
過去の学習プロジェクト:Sparkによる映画推薦、スクレイピング、Webアプリ、バックエンド。新版の継続的な開発については cinematch-recommender をご覧ください。
ビッグデータナレッジリポジトリは、データウェアハウスモデリング、リアルタイムコンピューティング、ビッグデータ、データミドルプラットフォーム、システム設計、Java、アルゴリズムなどを含みます。
Alibaba DataXの後継として積極的にメンテナンスされている、高速で汎用性の高いオープンソースETLツール。30種類以上のRDBMSおよびNoSQLデータソースに対応。
Docker & Kubernetes 用の 50+ DockerHub 公開イメージ - DevOps, CI/CD, GitHub Actions, CircleCI, Jenkins, TeamCity, Alpine, CentOS, Debian, Fedora, Ubuntu, Hadoop, Kafka, ZooKeeper, HBase, Cassandra, Solr, SolrCloud, Presto, Apache Drill, Nifi, Spark, Consul, Riak
450+ AWS, Hadoop, クラウド, Kafka, Docker, Elasticsearch, RabbitMQ, Redis, HBase, Solr, Cassandra, ZooKeeper, HDFS, Yarn, Hive, Presto, Drill, Impala, Consul, Spark, Jenkins, Travis CI, Git, MySQL, Linux, DNS, Whois, SSL 証明書, Yum セキュリティ更新, Kubernetes, Cloudera など...
Hadoopエコシステムで一般的に使用されるビッグデータコンポーネントのドキュメントを定期的に更新。優先順位順に:Flink、Solr、Sparksql、ES、Scala、Kafka、Hbase/phoenix、Redis、Kerberos(プロジェクトにはHadoopマインドマップ、Evernoteノート、Scala版シンプルデモ、常用ツールクラス、デセンシタイズ済みtrain codeが含まれます。継続更新!!!)
80以上の DevOps & データ CLI ツール - AWS、GCP、GCF Python Cloud Functions、ログ匿名化ツール、Spark、Hadoop、HBase、Hive、Impala、Linux、Docker、Spark データ コンバーター & バリデータ (Avro/Parquet/JSON/CSV/INI/XML/YAML)、Travis CI、AWS CloudFormation、Elasticsearch、Solr など。
このシステムは、私の卒業設計プロジェクトであり、「ユーザープロファイルに基づいた映画推薦システムの設計と実装」というタイトルです。主にDjangoを基本フレームワークとして採用し、MTVパターンを使用しています。データベースはMongoDB、MySQL、Redisを使用し、Doubanプラットフォームから収集した映画データを基本的なデータソースとしています。主にユーザーの基本情報や使用操作記録などの行動情報に基づいてユーザータグを開発し、Hadoop、Sparkのビッグデータコンポーネントを使用して分析・処理する推薦システムです。管理システムにはDjangoの組み込み管理システムを使用し、simpleuiで美化しています。
Eコマースビッグデータ商品リアルタイム推薦システム、Vue + TypeScript + ElementUI + Spring + Spark
よくある質問
GitHubで最も人気のある#hadoopリポジトリは何ですか?
GitHubで最も上位にランクインしているオープンソースの#hadoopプロジェクトは、28,776個のスターを獲得しているdonnemartin/data-science-ipython-notebooksです。データサイエンスPythonノートブック:ディープラーニング(TensorFlow、Theano、Caffe、Keras)、scikit-learn、Kaggle、ビッグデータ(Spark、Hadoop MapReduce、HDFS)、matplotlib、pandas、NumPy、SciPy、Pythonの基本、AWS、およびさまざまなコマンドライン。
#hadoopリポジトリで最もよく使われているプログラミング言語は何ですか?
GitHubで上位にランクインしている#hadoopプロジェクトでは、Java, Python, Shell, Scalaが最も一般的なプログラミング言語です。
#hadoopリポジトリのランキングはどのように算出されていますか?
#hadoopのタグが付いた43件のアクティブなオープンソースリポジトリ(スター500個以上)を追跡しています。合計スター数は238,277個で、リポジトリあたりの平均は5,541個です。ランキングはGitHub APIからのデータに基づいて毎日更新されます。