商业版更新日志

💎 v1.1.10 - 2025-10-31

本次版本围绕 多源数据集成、MongoDB 数据源接入与清洗规则体系完善 展开，全面提升了 qData 在异构数据环境下的任务编排、数据处理与可视化操作体验。
同时对 数据资产模块、日志机制与前端交互体验 进行了优化，进一步强化系统的稳定性与可维护性。

🛠 主要更新内容

1️⃣ 数据集成

• 新增 多表 Join 关联组件，支持多表左/内连接、字段映射、条件配置及类型校验，满足复杂数据融合需求。
• 新增 MongoDB 数据源连接，支持连接测试、集合结构自动识别及字段映射。
• 新增 MongoDB 输入输出组件，支持集合级数据读取与写入（插入、更新、覆盖写）。
• 新增 Java 脚本组件，可在数据集成流程中灵活编写自定义逻辑。
• 支持 多异构数据源输入与输出（MySQL、DM8、Kingbase、Doris、MongoDB 等），实现跨源数据汇聚与多端分发。
• 优化 ETL 组件属性配置与交互逻辑，提升可视化建模的流畅度与稳定性。

2️⃣ 清洗规则

• 完善清洗规则体系，前后端联动一致，配置更直观、执行更高效。
  • 字段值替换
  • 超长字段截取
  • 日期格式统一
  • 主键去重
  • 日期空值填充
  • 手机号格式统一
• 优化清洗规则配置项布局，支持示例预览与参数校验。
• 提升规则执行日志与异常提示的可读性，便于排查与维护。

3️⃣ 功能优化

• 优化 数据质量任务日志存储机制，日志结构更清晰、检索更高效。
• 数据资产模块代码重构，优化目录结构与依赖关系，提升模块扩展性与维护效率。
• 优化 数据发现与资源检索性能，提升大数据量场景下的响应速度。
• 增强系统异常捕获与错误提示机制，降低任务运行风险。
• 优化 ETL 页面连线交互，提升复杂流程下的操作流畅度与精确性。
• 图片预览支持 点击任意空白区域关闭，交互更自然。
• 作业管理组件新增 描述字段，便于任务配置说明与后期维护。
• 优化前端加载性能与页面响应速度，整体操作体验更顺畅。

本次版本重点在于 多源数据集成能力拓展与清洗规则体系完善。

💎 v1.1.8 - 2025-08-28

本版本重点优化 数据清洗重构与资产管理优化。

🆕 新功能

• 清洗规则管理
  • 新增规则分类管理（支持多级分类】）
  • 录入规划中的全部规则（编码、名称、描述、场景、示例）
• 数据资产
  • 资产详情页优化
  • 资产血缘集成：可直接查看数据源上下游关系
  • 新增质量 / 清洗 Tab，支持任务新增、报告展示、调度周期修改
• 数据研发
  • 新增/优化 ETL 转换组件
  • 转化组组件交互逻辑重构，与质量任务规则交互保持一致
  • 表输入组件仅支持“我申请到的资产”
• 数据服务
  • API 发布取消表范围限制，支持选择数据库内所有表

🐛 问题修复

• 日志问题：解决 DS 与后端必须部署在一起的问题，多节点日志合并
• 数据源管理：拉取表结构无权限时，优化报错信息展示
• 逻辑模型：物化失败无提示问题修复；字段主键必填逻辑优化；金仓字段类型长度不一致问题修复

💎 v1.0.0 - 2025-05-26

• 🎉 qData 数据中台初始商业版本发布！
• 包含系统管理、数据集成、数据开发、数据服务等核心功能。