背景 当前比较流行的hdfs间数据迁移工具有hadoop默认提供的distcp,阿里开源的DataX,这些工具能够满足常规的大部分需求,但是当时碰到hadoop版本不一致、kebe
最近更新: 4年多前Spark快速开发框架,提高开发效率,主要针对离线任务场景
最近更新: 4年多前通用svn、git增量部署补丁生成器,可用于svn/git/gitee管理的maven项目的增量部署文件生成,支持多模块父子项目. 桌面版地址:https://gitee.com/hackempire/patch-generator-desk
最近更新: 5年多前Spring Boot项目使用maven-assembly-plugin根据不同环境打包成tar.gz或者zip
最近更新: 5年多前一个完善的Spark Streaming二次封装开源框架,包含:kafka偏移量管理,web后台管理,web api启动、停止spark streaming,宕机告警、自动重启等等功能支持,用户只需要关心业务代码,无需关注繁琐的技术细节,大大提高实时流开发效率和难度。
最近更新: 6年前