Fire框架是由中通大数据自主研发并开源的、专门用于进行Spark和Flink任务开发的大数据框架，可节约70%以上的代码量。首创基于注解进行Spark和Flink任务开发，具备实时血缘、根因诊断、动态调优、参数热调整等众多平台化功能。Fire框架在中通内部每天处理数据量高达数千亿，在外部已被数十家公司所使用。

使用python爬取数据并采用Django搭建系统的前后台，使用Spark进行数据处理并进行电影推荐

三足乌数据中台，集数据接入、数据开发、数据治理、数据标签、数据资产、数据服务、数据运维、系统管理等功能为一体。打通数据壁垒，解决数据孤岛问题，实现数据低代码开发，助力政府、企业数字化转型。

数据血缘，支持spark sql,presto sql,tidb sql, flink sql, datax血缘,Spark/flink jar 运行命令的血缘解析；支持with语法

大数据技术派，分享优质文章，技术资料，包括但不限于主流的大数据技术：Hadoop、Kafka、Hbase、Flink、Spark等。

大数据笔记，包含Hadoop、Spark、Flink、Hive、Kafka、Flume、ZK.....

一个简单的网易云音乐大数据分析，采用 Saprk 框架进行分析，并以前端 vue 使用 ECharts 进行展示

Spark SQL运行中间件，运行在Spark SQL上的动态SQL利器

基于Spark ml，构建从数据预处理，特征工程，机器学习模型训练，服务定时调度再到服务发布等功能的平台。支持自定义的spark ml模型，pmml模型的服务发布，以Rest的方式提供接口服务

基于Hadoop和Spark的大数据分析系统，支持Flink实时数据采集和数据分析。基于Hive的离线数仓，als协同过滤推荐系统

基于SPARK封装的Java版本快速开发框架，用户只需要关心业务代码，无需关注繁琐的技术细节，大大提高实时流开发效率和难度。集成incubator-sedona支持gis运算

大数据学习文档、实战代码、源码解析、测试数据,包含python、mysql、shell、hadoop、hive、zookeeper、hbase、flume、kafka、spark、flink、dolphinscheduler、elasticsearch、sqoop、clickhouse

亿级数据分钟级入缓存，Spark、Redis、限流

pyspark 上手项目

This project is used for tracking lineage when using spark. Our team is aimed at enhancing the ability of column relation during logical plan analysis.Spark列级血缘(字段血缘)关系处理。