更新日志 · v1.0.72025/05
# v1.0.7 平台能力增强版本
发布时间:2025 / 05
v1.0.7 为平台能力增强版本,在前序版本基础上,引入数据可视化与元数据治理能力,并对核心计算引擎进行升级,进一步完善大数据平台的分析与管理能力。
# 一、版本概述
在 v1.0.6 的基础上,本版本主要围绕 数据分析可视化、元数据治理 与 计算引擎升级 三个方向进行增强:
- 引入自助式数据可视化平台,提升 Web 端分析与报表体验
- 升级元数据管理组件,增强与 Ambari / Bigtop 的适配能力
- 对批处理与流处理核心引擎进行统一升级,提升性能与生态兼容性
- 全环境基于 Bigtop 构建,统一依赖管理与部署方式
本次更新不涉及底层架构调整,属于能力增强与平台完善型版本。
# 二、版本变更说明
# 新增组件
- Superset 4.1.2 数据可视化与报表平台,支持多数据源接入与仪表盘搭建,用于提升数据分析与自助报表能力。
# 组件升级
Atlas 2.4.0 元数据管理与数据血缘分析组件,优化与 Ambari / Bigtop 的集成适配能力,提升集群元数据治理效率。
Spark 3.5.5 分布式批处理计算框架,提升大规模数据处理性能,并增强与主流开发生态的兼容性。
Flink 1.17.2 高性能流处理引擎,支持实时计算与流批一体应用场景。
# 构建与部署优化
- 全环境统一基于 Bigtop 构建
- 支持一键部署与自动依赖管理,提升环境一致性与可维护性
说明
计算引擎升级涉及运行时与依赖版本调整,建议在升级前完成现有作业的兼容性验证。
# 三、组件版本清单(新增 / 升级)
| 组件名称 | 组件版本 | env 版本 | 用途说明 |
|---|---|---|---|
| Superset | 4.1.2 | 1.0.7 | 数据可视化与报表平台,支持多数据源分析 |
| Atlas | 2.4.0 | 1.0.7 | 元数据管理与数据血缘分析组件 |
| Spark | 3.5.5 | 1.0.7 | 分布式批处理计算框架 |
| Flink | 1.17.2 | 1.0.7 | 高性能流处理引擎 |
升级说明
v1.0.7 可在 v1.0.6 集群环境上平滑升级;可视化与元数据组件为能力增强型引入,不影响原有数据处理链路。
- 03
- Ranger Admin 证书快速导入脚本02-15