#spark 仓库
共 126 个仓库
本系统是我的毕业设计项目,题目为“基于用户画像的电影推荐系统的设计与实现”。主要是以Django作为基础框架,采用MTV模式,数据库使用MongoDB、MySQL和Redis,以从豆瓣平台爬取的电影数据作为基础数据源,主要基于用户的基本信息和使用操作记录等行为信息来开发用户标签,并使用Hadoop、Spark大数据组件进行分析和处理的推荐系统。管理系统使用的是Django自带的管理系统,并使用simpleui进行了美化。
一个轻量级、多租户、可扩展且安全的网关,它使 Jupyter Notebook 能够跨分布式集群(如 Apache Spark、Kubernetes 等)共享资源。
一个可二次开发 Chat Bot 单轮对话 Web 端 MVP 原型模板,基于 Vue 3, Vite 8, TypeScript, Naive UI, Pinia(v3), UnoCSS 等主流技术构建。🧤 简单集成大模型 API,采用单轮 AI 问答对话模式,每次提问独立响应,无需上下文,支持 SSE 打字机效果流式输出,集成 markdown-it, Mermaid/KaTex/LaTex 公式高亮预览。支持星火、智谱、硅基流动、Deepseek V4/V3/R1 深度思考推理模型预览,兼容 <think> 标签,包含蒸馏 skill。💼 易于定制和快速搭建 Chat 类大语言模型产品(附示例截图)。
通过在 Docker 上使用 JupyterLab 界面构建您自己的集群,来学习使用 Scala、Python (PySpark) 和 R (SparkR) 中的 Apache Spark。 :zap:
快速为您的项目生成相关的合成数据。Databricks Labs 合成数据生成器(又称 `dbldatagen`)可用于在 Databricks 环境中生成大型模拟/合成数据集,用于测试、概念验证(POC)及其他用途,包括 Delta Live Tables 管道。