首页 > 技术

瓴羊Dataphin V5.5版本发布:让数据用出增长!数据资产交付全面提速、更稳、更易用

2026-01-22 09:35:55      西盟科技资讯   


  2026年伊始,又到了各个公司业务复盘与新规规划的关键期。开年盘点和春节大促准备撞在一起,业务方新需求排山倒海,你是不是也正在经历这些“致命”瞬间?

  “老板深夜@我,说‘能不能照着这个销售看板,明天给我做个客户分析的?’ 我上哪给他变一个去!”

  “核心交易数据在隔离区,业务想做实时风控,但网络策略审批要一个月,项目直接卡死!”

  “运营扔过来100G的用户行为日志压缩包,说‘帮我们分析一下’,光解压和预处理就得折腾一天!”

  “凌晨3点,上游业务库崩了,报警群炸锅。我得在几百个任务里,手动找出30个依赖它的任务设空跑,眼花缭乱…”

  “每天早上的核心报表,总因为等不到凌晨的实时数据而‘开天窗’,天天早上7点手动重跑,人都麻了。”

  “BI同事抱怨:‘你们API加个字段,我们报表代码就得改一遍,太折腾了!’”

  “新人问我:‘哪个表能查上个月的GMV?’ 我愣是想了半天,自己也记不清表名了…”

  面对上述痛点,全新升级的Dataphin V5.5 带来了针对性解决方案。无论是紧急需求响应、复杂网络接入,还是运维效率提升,新版本让每个难题都有对应的破局利器,带你从从容容实现数据从“能用”到“好用”的跃升。以下是本次版本升级给大家送上的七大锦囊妙计,速速收藏!锦囊1:X-应用创作——把需求直接“生成”为可上线的数据应用

  应用场景

  业务部门期望结合大模型的能力,面向一些轻量化业务场景快速开发小型应用,将Dataphin内的数据提供给“业务应用”,例如:搭建客户线索看板、需求管理看板等轻量化数据应用;

  功能特性

  基于用户输入的需求详情,自动生成需求文档,并支持在线MarkDown格式的编辑;

  自动检索 Dataphin 内已上线的数据服务 API,支持手动添加和删除

  自动安装应用依赖,并生成应用代码,包含对上述API的调用

  严格的权限管控,仅当应用成功发布后,才可看见所调用API的数据;同时支持将应用链接分享给他人进行使用。

  业务价值

  把“需求沟通成本”变成“可复用交付资产”:需求文档自动生成、所需API自动检索、应用代码自动开,交付路径标准化

  最大化复用既有API资产:减少重复开发,让数据能力更快变现为业务结果 锦囊2:实时集成增强——支持 Hologres,复杂网络也能跑得起来

  应用场景

  实时数据需要落地 Hologres 承载高并发分析/交互查询

  数据源处于隔离网络、专线或外部网络,默认集群无法直连仍需构建实时链路

  功能特性

  实时集成目标端支持 Hologres

  支持针对默认集群不可连通的数据源配置实时集成:基于采集的元数据进行实时集成任务创建

  业务价值

  实时价值更快落地到分析场景:更顺畅支撑实时看板、实时运营与服务化输出

  复杂企业网络环境可交付:减少“连不通、落不下、跑不起来”的项目风险 锦囊3:离线集成升级——非结构化归集 + 更多连接器 + 更安全

  应用场景

  需要将文件类数据(日志/文本/归档文件等)统一归集到 OSS/S3/HDFS/FTP

  存量系统(GBase 8c、Salesforce 等)需要更快接入与迁移

  安全合规要求任务日志不可暴露敏感信息

  功能特性

  支持非结构化数据归集:OSS、S3、FTP、HDFS 多文件系统作为来源与目标

  离线集成输入/输出组件、整库迁移来源端支持 GBase 8c

  优化:Salesforce 支持批量读取;FTP 读取JSON内容能力升级;支持隐藏集成运行日志中的密码全局变量值

  业务价值

  数据资产覆盖更全:结构化+非结构化统一汇聚,为非结构化数据处理做准备,支撑更完整的数据底座

  接入更快、迁移更稳:吞吐提升、兼容增强,缩短项目周期

  更符合企业级安全要求:降低凭据泄露与合规风险 锦囊4:研发调度与运维提效——批量、可视化、可检索

  应用场景

  CRM 系统突发故障,无法从系统同步最新客户数据到数据仓库,运维人员夜间需要在任务生成实例之前,紧急将受到影响的客户数据集成任务置为空跑,让下游任务可以使用历史旧的客户数据运行,而不是报错阻塞

  查找任务的角度有多种

  某一个重点任务,调整到更早的产出时间,给其整个上游链路中的集成任务指定独立的资源组,即筛选查找某个任务上下游并限定任务类型

  某一个业务项目结束后,与其相关的任务分布在多个 Dataphin 项目,包含集成,计算任务等多种类型的任务。业务规则变更后,与这个业务相关的 SQL 计算任务需要对过去一段时间的历史补数据。即筛选查找某个业务相关的特定类型任务。

  功能特性

  1.支持运维批量修改调度类型,无须走提交发布流程

  2.支持下载节点指定层级的上下游节点列表

  3.下载的列表经过筛选后,可上传用于任务筛选

  4.同一个业务项目的任务可以打上同一个标签,通过标签筛选任务

锦囊5:离线研发新增“检查节点”——实时产出可消费才继续跑

  应用场景

  数据实时入湖后同时存在实时以及离线消费链路,离线任务需要依赖实时集成任务产出,但不确定数据是否已准备好,是否具备可消费条件。

  功能特性

  新增检查节点:可检测实时集成任务产出表的消费位点,支持按调度时间偏移检查、按指定位点检查

  支持检查停止策略:多次尝试仍不满足则终止本次检查

  业务价值

  提升链路稳定性与SLA达成率:减少因时序不一致导致的失败与返工

  把经验变机制:在调度层实现可消费校验,降低人工盯盘成本 锦囊6:数据服务增强——更多数据源、更可控的 API 输出与密钥管理

  应用场景

  企业级应用的数据库引擎的选型多样以满足不同场景需求,希望把 DolphinDB、GBase 8c 等数据能力统一 API 化对外提供

  调用API时,当前需要指定API的返回字段,当API返回字段变更时,需要重新编写调用API的代码;希望默认获取全部的有权限的字段,避免修改获取代码,而仅需上层应用使用字段时进行适配

  API的执行SQL可帮助排查问题,但在有安全合规要求时,需要隐藏执行SQL的信息

  有些企业有自己的API和应用管理系统,并且有AK/SK轮换的要求,需要进行提供自主设置AK/SK的能力

  功能特性

  API 开发新增支持 DolphinDB、GBase 8c(查询类 GET/LIST 为主,支持同步/异步)

  创建 API 可配置是否返回执行 SQL

  调用不指定返回字段时,默认返回所有有权限字段

  公共云 API 网关或内置网关支持自定义 AK/SK

  业务价值

  更快服务化存量数据平台:让更多系统纳入统一服务出口

  更稳的对外交付体验:权限内“应返尽返”、问题定位更高效

  更可控的安全管理:密钥自主管理与轮换更符合企业治理 锦囊7:资产运营与元数据增强——让数据资产更好找、更好管、更好用

  应用场景

  用户输入“2025 Q4 销售”的搜索词,即可借助智能分词和排序,迅速精准定位所有相关数据表,提升检索效率。

  企业希望利用资产的多维元数据,包括上架时间、上架人等,作为内部审计、运营分析与管理的重要依据。

  企业每晚做销售额结算,夜间为计算高峰期。数据采样任务需避开此时段,避免影响结算任务的稳定运行。

  功能特性

  资产目录:支持分词检索与智能排序;

  资产管理后台:支持更多筛选维度,如资产维护人员、初次/最近上架时间、初次/最近上架人;

  元数据管理:资产系统属性可自定义展示名和描述;

  数据采样管理:支持统一配置“扫描禁用期”,灵活管控采样任务执行时段

  业务价值

  查找高效:提升数据资产的检索效率

  管理精细:提升资产管理效果

  运营灵活:满足企业个性化审计与运营需求

  稳定保障:保障关键业务的稳定运行

  Dataphin V5.5 七大锦囊,聚焦把数据能力更快转化为业务结果:用智能化把需求直接变成可上线应用,用更强的实时/离线工程能力提升交付确定性,用更易用的运维与资产运营降低日常成本。让数据从“能用”走向“好用、常用、用出增长”。

相关阅读