近日,星环科技大数据开发工具 Transwarp Data Studio 2.4.0版本重磅发布,新版本中数据开发、数据治理、数据运营三大套件能力全部升级,让数据开发更便捷、数据治理更高效、数据运营更智能。本次升级的核心能力如下:

数据开发套件,助力企业完成数据统一化

数据开发套件包含了大数据整合工具 Transporter、数据库在线开发与协同工具 SQLBook 和任务调度软件 Workflow ,该套件作为星环科技大数据基础平台 Transwarp Data Hub 的生态开发应用工具,针对数据开发场景,提供数据集成、SQL 开发和任务调度的能力,帮助企业将数据归集到数据湖仓,完成数据统一化的过程。

在 2.4.0 版本中数据开发套件进行了如下更新:

  • 任务流调度模块新增了 Python , JAVA , R , Scala 类型任务调度能力支持;增加自定义日历能力,任务可以在日历下进行调度执行;增强参数能力,新增工作区参数,加密参数,临时参数,支持参数跨服务、任务流引用和传递;支持非容器化部署执行器;

  • 数据集成模块新增支持文本文件、Excel文件的离线数据加载;对接告警中心,支持添加告警规则,并支持邮件,站内信,短信发送;支持在目标端配置自动创建分区表等;

  • SQL 开发模块新增函数管理能力以及 SQL 参数能力。

数据开发套件的三大核心优势:

  • 分布式架构设计,可支持PB级别的数据平台建设,支持日均十万级任务调度,性能可扩展;

  • 支持 SQ L关键词和 SQL 片段推荐,数据开发知识积累,智能化持续优化开发体验和开发效率;

  • 基于大数据平台计算能力提供数据转换能力,避免传统ETL工具本身的计算瓶颈。

数据治理套件,完成数据资产化

数据治理套件,针对企业过去信息系统烟囱式的构建方式以及数据开发和管理过程不规范的问题,提供数据治理能力,帮忙企业进行数据资产盘点、数据标准统一和解决数据质量问题,完成数据资产化的过程。

TDS 的数据治理套件作是基于星环数据治理咨询方法论的、一站式的面向企业各类信息系统的数据管控平台,集成元数据管理、数据标准管理、数据质管理量等模块,提供全生命周期数据治理能力。

在 2.4.0 版本中数据治理套件进行了如下更新:

  • 数据治理模块新增数据模型管理能力,提供逻辑模型和物理模型的开发和管理能力;

  • 元数据模块增强元数据自动采集范围,新增支持 KunDB、达梦、SAP HANA 等数据源类型;支持批量订阅元数据;

  • 数据标准模块新增主数据标准类别;优化质量检查报告和落标检查报告,提供维护人员和治理人员两种视角的报告内容和入口;数据质量模块新增支持在质量任务中自定义配置质量参数值功能;

  • 数据治理套件各模块各类型任务接入通知中心,支持多种通知渠道以及通知触发条件配置;

数治理套件的核心优势

  • 可以事前通过 TDS 内置知识库,对行业文献、企业内部知识文档以及已有的数据标准、标规则内容,进行智能解析和知识沉淀,扩大数据标准对标的支撑业务主题范围,提高推荐准确率。同时,可以根据用户对推荐结果的判定行为对智能推荐算法进行自动化迭代和优化;

  • TDS 数据治理套件是一站式产品架构,由完整的数据治理功能模块组成,并集成至统一平台中,各功能模块根据数据治理方法论有机的形成功能联动和流程,提供一站式工具应用体验;

  • TDS 数据治理套件提供基于星环大数据技术的数据治理任务执行能力,高效完成数据治理作业。

数据运营套件,助力数据运营平台建设

数据运营套件包含:数据服务平台 Midgard、标签平台 Starviewer、数据商城 Foresight。提供数据标签体系构建和自助取数,直接对接数字化转型应用的 API 开发和管理,并能将上述套件产生的数据产品在统一的共享门户中进行企业内部共享交换,将企业各类型数据资产以分析、服务和共享的方式提供服务,发挥资产价值,最终支撑数字化转型相关应用,完成数据业务化的过程,并提供数据资产共享交互,构建企业数据生态化,助力数据运营平台建设。

在 2.4.0版本中数据运营套件进行了如下更新:

  • 数据服务模块新增 SQL 模式创建 API,支持查询类 SQL 和非查询类 SQL;支持管理业务分组,对 API 资源进行隔离和管控;新增API路由配置;

  • 数据商城模块新增支持对资源编目进行可见范围控制,支持按照机构粒度选择可见范围;支持的资源类型扩展,新增数据标签、非结构化文件两类资源;支持配置资源的共享类型(有条件共享/无条件共享);

  • 新增数据标签开发平台模块,提供多种类型标签的开发、管理、发布、下线等生命周期管理能力,提供基本的标签数据分析能力;提供将发布后的标签数据在数据商城提供对外共享的能力;

目前,星环科技 TDS 已经在金融、能源、政府、医疗等多个行业落地,海洋石油富岛公司借助 TDS,建设了大数据技术平台及体系化的数据资产管理平台,实现技术业务化、数据业务化,实现化工生产过程的降本增效,推进公司数字化转型;某医学大数据研究平台通过 TDS 的数据资产定义、资产目录建立、数据溯源、数据全程监控及资产评估改进工具,实现数据资产的全生命管理,为研究所构建了高性能、高可靠性、高安全性及可扩展性的医学大数据研究平台,实现了医疗数据的规范化、流程化、质量化,帮助研究所专业的医学数据分析团队高效挖掘病历样本等科研数据的价值,落地科研业务,保障科研进度的稳步推进;华夏基金基于TDS,融合了 TA(Transfer Agent开放式基金登记过户)系统、OTS(Online Trading System 网上交易)系统、反洗钱系统、会计系统、资讯系统、交易系统及直销和代销数据,为营销数据中心、反洗钱系统、投研指标系统、数据分析等业务应用建立了数仓、数集及专用库,对投研指标系统相关数据进行了迁移与整合,为华夏基金构建基于大数据等技术的统一分析数仓打下了平台基础。

星环科技TDS 2.4.0 发布: 数据开发、数据治理、数据运营套件能力再次升级相关推荐

  1. 星环科技 TDS 联邦计算能力,让企业异构数据源数据合作畅通无阻

    在数据成为生产要素的今天,企业愈发需要更高效.简洁利用数据的方法来快速响应不断变化的商业和情报分析.传统方式是数据集成(ETL)后再做分析,但目前需求在变化,数据源也在变化,数据集成系统越来越庞大,导 ...

  2. 全面升级!星环科技基础软件再升级,赋能数字中国建设

    3月24日,星环科技举行2021线上发布会,支持10种主流数据模型的多模数据平台和数据云产品.实现AI建模的全生命周期管理人工智能等产品新版本齐齐亮相. 星环科技坚持核心技术自主原创,专注于大数据基础 ...

  3. 【观察】星环科技:走向融合数据云新时代,背后必有强大数据底座

    毫无疑问,今天国家对数字经济给予了前所未有的高度重视.近期国家就正式印发了<"十四五"数字经济发展规划>,明确将继续坚持推进数字产业化和产业数字化,赋能传统产业转型升级 ...

  4. 【观察】星环科技重构数据云平台,持续释放数据红利和价值

    申耀的科技观察 读懂科技,赢取未来! 众所周知,如今的世界正在以加速度进入到智能时代,特别是随着各项业务的云化深入以及万物互联,数据处理能力的进一步提升,智能算法一次又一次的突破,以及云计算在传统产业 ...

  5. 星环科技的“星图解密”:只有偏执狂,才能让中国基础软件打破对国外进口的依赖...

    "[报名]数据猿年度精彩活动推荐:访谈调研+企业盘点+榜奖峰会,与数据猿共筑2021 大数据产业创新服务媒体 --聚焦数据 · 改变商业 孙元浩是个<三体>迷. 在<三体& ...

  6. 智能化、多模态、平民化,星环科技行业大模型、向量数据库深度解析

    星环科技落地未来数据技术,实现数据处理智能化.多模态.平民化. 出品 | CSDN云计算 以ChatGPT为代表的超大语言模型的迅速应用,加速了AI普及,让AI伸手可及,并开始走进我们的工作和生活.毫 ...

  7. 【观察】星环科技:布局行业大模型赛道,加速国产化替代进程

    以ChatGPT和GPT所代表的大模型,已经在国内形成了"海啸效应",几乎所有的科技公司都在想方设法进入大模型的赛道.背后的核心驱动力,就在于大模型的最大价值在于普遍提升个人生产力 ...

  8. 刚刚!国产大数据基础软件第一股星环科技成功上市,开盘大涨超52%

    作者 | 冬梅 10 月 18 日,"国产大数据基础软件第一股"星环信息科技(上海)股份有限公司(简称"星环科技")正式登陆科创板,股票代号为星环科技(6880 ...

  9. 流上机器学习,星环科技Sophon Base助力海洋石油富岛工艺监测智能化

    随着企业数字化.智能化的加速,企业对AI技术应用的需求不断增加,AI技术与产业融合的力度加大,更多的智能化应用快速落地,帮助企业降本增效. 1.Sophon实现AI建模的全生命周期管理 作为中国领先的 ...

最新文章

  1. Intersection of Two Linked Lists——经典问题
  2. python外星人入侵游戏代码大全-Python游戏:外星人入侵游戏编程完整版!内附代码...
  3. CSV格式文件注意细节
  4. java报错找不到对象,使用Spring源码报错java:找不到类 InstrumentationSavingAgent的问题...
  5. 分布式为什么使用Redis
  6. Mysql学习总结(67)——MYSQL慢查询日志
  7. python中字符串中的换行符号是什么_Python字符串中的换行符和制表符
  8. Linux之父道歉后,Linux社区颁布开发人员行为准则
  9. SDOI 2016 游戏
  10. 距离公式汇总以及Python实现
  11. 打分现场流程策划及排练大致流程-仅参考
  12. 美化fedora字体
  13. Rust : codewars的Sum of Pairs
  14. public 函数_C++:11友元函数、友元类
  15. python中国地图数据下载_中国地图数据可视化(Python+selenium+Matplotlib),PythonSeleniumMatplotlib...
  16. vue 中使用菜鸟打印
  17. 你租的房子遇 “坑” 了么?
  18. Pyspark 案例实践 假新闻分类
  19. tk域名ml域名ga域名cf域名免费顶级域名获取及域名解析绑定IP发布网站
  20. 农村饮用水项目微信支付完整代码

热门文章

  1. Python实现SVM的实例(包括网格调参和测试)总结综述
  2. trunc_normal = lambda stddev: tf.truncated_normal_initializer(0.0, stddev)解析
  3. mmclassification
  4. 第一阶段项目(2 body)
  5. web开发灵感推荐--34个有吸引力的电影网站设计灵感
  6. Unity UGUI 用BMFont工具自制艺术数字字体超超超详细教程(附工具下载链接)
  7. 解决word文档网格设置每行36字符数但显示32个字
  8. 用BP神经网络解决简单的分类问题
  9. 软件项目测试流程的规划
  10. 非线性控制理论与模型预测控制MPC-知识总结