Skip to content

Latest commit

 

History

History
20 lines (20 loc) · 713 Bytes

README.md

File metadata and controls

20 lines (20 loc) · 713 Bytes

概述

这是一个用于spark项目的spark模板项目,结合了以前同事(杜,杨,刘等童鞋)的一些代码 承接1.0.0版本,结合在工作或者其它项目中学习到的一些自己觉得有用,记录在这个项目里,也是对自己的一个积累 总体上应该是写得不好 😅 终究是能力有限

client目录

数据库,连接池,HDFS等客户端

core目录

核心接口

job目录

根据业务需求编写spark任务

listener目录

各种监听器

model目录

各种实例

udf目录

各种Spark UDF

utils目录

各种工具对象

script目录

这个工程中spark-submit,小文件合并的一些shell脚本