Releases: dromara/CloudEon
Releases · dromara/CloudEon
Release v1.3.0
新功能 (feat):
- 日志模块完善,使用elasticsearch 和filebeat整合,完成收集大数据组件日志功能开发
- 增加pod event页面,查看角色实例对应pod状态
- 集成hue服务
- 指令页面增加关联服务,更方便查看
- 角色列表页根据角色名分组展示
- 页面header增加文档、官网等入口
优化 (improve):
- zookeeper默认增加选举重连次数
- datanode多盘支持
- 调整修改配置页面
- 删除拉取镜像步骤
修复 (fix):
- 修复hiveserver2跑mr时,yarn jobhistoryserver无法查看成功后的任务详情和日志
- 解决Dinky执行flink on yarn 任务失败问题
- 修复安装 amoro 提示找不到文件 FileNotFoundException
- hive和yarn容器注入环境变量HADOOP_CONF_DIR,修复容器内无法使用hadoop命令查看fs
文档更新 (doc):
- 增加日志收集文档
- Dinky支持Flink Yarn Application模式相关文档更新
- 添加minikube environment deployment
- 完善Dinky相关文档
贡献者的名单如下:
- Mericol
- Pandas886
- anzhen-tech
- koyfin
- linzehao
- rugalcrimson
- wangjj
- xiaojian
- 不二
- 奋斗吧少年
Release v1.2.0
新增功能(Features):
- 实现用k8s job进行初始化服务任务,替换原来用ssh执行命令的方式,提高兼容性和更好监听状态和获取日志
- 增加namespace设置功能,不再写死default namespace
- 集成新组件Trino、Amoro
- 初步集成filebeat用于大数据服务的日志采集
- 实现下载服务实例配置文件接口
修复缺陷(Bug Fixes):
- 修复安装dinky,SQL脚本找不到
- 修复flink standalone的rest地址无法外部访问
- 修复hdfs组件的环境变量,导致pod内无法正常使用hdfs命令
- 修复fink提交任务到YARN集群问题
优化改进(Enhancements):
- 组件jvm参数增加gc日志文件生成
- 优化贡献文档
- 优化任务日志输出,精简日志内容
- 选择框架会自动显示内置的服务版本
- FAQ文档增加去除节点污点方式
- 优化deployment启动,删除无用日志打印
- 优化K8S节点信息提取hostname和ip,兼容K8S和K3S
Release v1.1.0
新增功能
- 支持Kyuubi服务,实现Spark SQL查询
- 增加Kyuubi监控面板
- 支持Iceberg数据湖功能,实现Iceberg在Flink和Spark上的集成
- 支持Elasticsearch组件
- 支持数据采集seatunnel组件
- 支持OLAP组件Kylin5
- 支持实时计算Dinky组件
优化改进
- 优化组件Docker镜像,精简大小
- 改进节点SSH连接,支持指定私钥
- 优化监控面板,修复多个面板问题
- 优化部分组件的容器资源控制问题,包括hbase/flink/spark/hive/yarn/hdfs/zookeeper
修复缺陷
- 修复停止服务时角色Pod错乱的问题
- 修复Zookeeper无法修改客户端端口的问题
- 修复HBase Shell无法在Pod中使用的问题
- 修复偶尔出现ssh导致的命令执行卡住问题
- 修复hive容器缺失mysql驱动问题
贡献者
@Pandas886
@limaiwang
@KangTomwk
@linshenkx
@tgluon
@Mericol
@linzehao
@wangkang1
@pan3793
@tangxiuhong
Release v1.0.0
- 多k8s集群管理
- 实现k8s上管理部署大数据服务
- 节点管理
- 服务角色重启、启动、停止
- 服务重启、启动、停止、配置、删除
- 服务告警提示、服务dashboard
- 服务配置
- 指令记录详情
- 服务角色实时日志
- 配置告警规则,查看活跃告警、历史告警
- 支持hdfs服务在Kubernetes上运行
- 支持yarn服务在Kubernetes上运行
- 支持zookeeper服务在Kubernetes上运行
- 支持doris服务在Kubernetes上运行
- 支持hive服务在Kubernetes上运行
- 支持spark服务在Kubernetes上运行
- 支持flink服务在Kubernetes上运行
- 支持dolphinscheduler服务在Kubernetes上运行
- 支持hbase服务在Kubernetes上运行
- 支持kafka服务在Kubernetes上运行
- 支持prometheus服务在Kubernetes上运行
- 支持grafana服务在Kubernetes上运行
- 支持alertmanager服务在Kubernetes上运行