“京东云深海数据平台” 焕新升级

embedded/2024/10/22 7:15:29/

深海数据平台 致力于为每一个数据客户提供灵活化、一站式、智能化的数据开发与管理工具。同时,根据客户行业提供成熟的数据业务全链路解决方案,包括数据集成、开发、元数据管理等功能,帮助数据开发人员快速高效地完成数据相关工作,使得企业更加科学规划和合理构建全域数据,以开放的方式实现企业内部数据共享,充分发挥数据价值。

升级背景

自深海数据平台上线以来,我们已成功在金融证券、政府部门、零售等行业领域得到广泛应用,助力企业在数据开发与管理方面取得了显著成效。在深入了解各行各业需求的基础上,我们不断优化产品,积累了丰富的实践经验。为了更好地满足市场及客户的需求,我们决定对深海数据平台进行升级。

此次升级,我们充分借鉴了以往的成功案例,针对行业痛点,打造了更强大、更稳定的公有云数据平台。升级后的深海数据平台在性能、安全性、易用性等方面均有大幅提升,能够为企业提供更加高效、智能的数据服务。此外,我们还紧跟行业发展趋势,增加了多项创新功能,以满足不断变化的市场需求。

版本简介

JBDP新版本为数据开发、数据安全治理能力带来了极大的提升:

  1. 升级多租户能力:平台支持多租户隔离,确保各租户数据安全稳定,提高资源利用率,满足不同规模企业需求。

  2. 计算存储资源按量付费:用户可根据实际使用量付费,灵活调整资源,降低成本,实现成本配置最优化。

  3. 开通免费体验模式:新用户可免费试用平台功能,零成本感受产品价值,为合作奠定基础。

深海数据平台全新升级后,对各领域、不同体量的客户提供更适配的服务,全方位满足企业需求,助力业务发展。

功能介绍

数据集成

  • 支持向导式配置,通过可视化配置快速完成数据同步任务的配置工作

  • 来源数据源和目标数据源支持多种数据源类型

  • 任务规则支持定时作业、一次性作业、条件触发、手动作业和文件触发等多种作业类型,对作业运行规则可进行失败重试、超时时长配置等操作

  • 任务运行频率支持分钟、小时、天、周、月 频率进行数据采集

  • 支持任务的并发限速配置;可配置任务并发数、通道限流、jvm配置等

数据开发

  • 支持存算分离,降低存储成本

  • 支持云仓引擎,可以在统一的平台上进行引擎任务的开发、发布和运维等操作

  • 支持智能编辑器、可视化依赖编排

  • 支持脚本版本管理,包括创建、删除、修改、查看脚本、上传脚本等配套功能,帮助企业快速地完成数据开发

  • 支持管理发布记录,对发布的版本进行管理,可以对发布的任务进行查看、对比、重新发布(回滚)

运维中心

  • 支持运维大屏,智能告警,及时监控任务概况进行处理。

  • 支持小时分钟级调度,增强离线开发数据处理能力,保障数据准确及时输出

  • 支持批量补数功能,帮助数据开发人员快速弥补历史数据

  • 支持查看任务依赖关系,以任务列表和任务链路的形式展示

数据图谱

  • 支持查看元数据分区信息、分区字段

  • 提供血缘分析等功能,让企业清晰了解数据来源、加工过程及使用情况

  • 支持分词、模糊匹配等检索方式

  • 支持数据权限精细化管理,确保数据在合规范围内使用,为企业筑牢数据安全防线

核心功能介绍

  • 按量付费,存算分离

功能说明:

存算分离功能是一种先进的云计算架构模式,它将数据存储与数据处理计算分开部署和管理,存储按照使用量进行计费,计算资源按照任务执行消耗CU来进行计费,帮助用户降低使用成本。适应不同场景下的数据处理需求,助力企业实现数据价值的最大化。

应用场景:

数据密集型分析任务

当需要进行大规模数据分析和处理时,您可以通过存算分离功能,将计算任务与数据存储分离,实现高效的数据处理。包含对海量数据进行批量查询、复杂计算和实时分析,而无需担心存储资源的限制,提升数据处理效率。

图片.png

  • 全链路的开发能力

功能说明:

JBDP提供全链路的开发能力,旨在为用户提供从数据集成、数据开发、数据运维到数据元管理的一站式服务,同时通过有形产品和实施方法论,帮助客户持续不断的将数据转变成资产并最终服务于业务使用。推进客户转型升级、创新发展,加速客户全面数字化转型升级,实现更高的经营绩效,更强的竞争优势,更可持续的发展。

应用场景:

通过JBDP,可以实现全生命周期的数据中台数仓模型管控体系建设。

数据源在数据图谱的保障下经过数据集成、数据开发、数据运维后产生的分析数据可以回流指导业务数据,增强企业内数据价值管理。

图片.png

  • 运维大屏及时监控,小时分钟级调度保障数据准确

功能说明:

运维总览功能支持运维实例总览,及时查看时间范围内实例及任务运行情况,包括运行实例总数、成功实例、不成功实例等概览,可视化显示当日运行不成功实例原因、任务运行情况分布和调度数量趋势等信息。

运维中心支持对任务运行的管理,可以展示每个任务的运行记录、更改任务信息、终止或重跑任务,支持批量补数。

应用场景:

实时风险监控,运维大屏上实时展示任务异常指标等关键信息,迅速显示故障点,帮助运维团队快速定位问题并进行修复。
数据准确性保障,分钟级的调度保障能够在最短时间内恢复数据的正常处理,减少潜在的风险。

图片.png


http://www.ppmy.cn/embedded/108768.html

相关文章

SpringMvc的具体操作,如何配置springMvc(完整教程)

第一步&#xff1a;引入依赖 <dependency><groupId>org.springframework</groupId><artifactId>spring-web</artifactId></dependency><dependency><groupId>org.springframework</groupId><artifactId>spring-w…

python基础语法九-多进程和多线程

书接上回&#xff1a; python基础语法一-基本数据类型 python基础语法二-多维数据类型 python基础语法三-类 python基础语法四-数据可视化 python基础语法五-函数 python基础语法六-正则匹配 python基础语法七-openpyxl操作excel python基础语法八-异常 1. 多进程 1.…

华为23年笔试题

消息传输 题目描述 在给定的 m x n (1 < m, n < 1000) 网格地图 grid 中&#xff0c;分布着一些信号塔&#xff0c;用于区域间通信。 每个单元格可以有以下三种状态&#xff1a; 值 0 代表空地&#xff0c;无法传递信号&#xff1b; 值 1 代表信号塔 A&#xff0c;…

最直接显示 ubuntu 版本号的命令

有时候去看ubuntu版本号&#xff0c;去网上查&#xff0c;很多文章都列出一堆命令&#xff0c;复制命令运行一下&#xff0c;都是打印一些不相关的信息&#xff0c;我只是想看ubuntu版本号而已&#xff0c;能否直接列出版本号就可以了。 有&#xff0c;下面这条命令就是直接的…

docker进阶 compose等

Docker Compose 简介&#xff1a; 比如有100个微服务&#xff0c;不需要手动启动每一个&#xff0c;可以使用docker compose定义运行多个容器&#xff0c;高效管理化。 定义、运行多个容器 YAML file配置文件 single command 命令 写docker-compose.yaml docker-compose …

Microk8s ingress启动失败, 10254端口被占用问题定位

问题描述 RHEL9 VM里安装了Microk8s&#xff0c;且使用了Nginx ingress Controller插件&#xff0c;443端口正常。 VM重启一次后&#xff0c;发现443端口没有LISTEN&#xff0c;不能对外提供服务。 定位过程 查看ingress pod状态&#xff0c;为CrashLoopBackOff # kubectl …

大数据-123 - Flink 并行度 相关概念 全局、作业、算子、Slot并行度 Flink并行度设置与测试

点一下关注吧&#xff01;&#xff01;&#xff01;非常感谢&#xff01;&#xff01;持续更新&#xff01;&#xff01;&#xff01; 目前已经更新到了&#xff1a; Hadoop&#xff08;已更完&#xff09;HDFS&#xff08;已更完&#xff09;MapReduce&#xff08;已更完&am…

关于SIMD

遇到太多次了&#xff0c;感觉还是有必要记一下 文章目录 前言所谓SIMD 一、SIMD是什么&#xff1f;二、内存对齐三、如何确保数据对齐&#xff1f;总结 前言 所谓SIMD 一、SIMD是什么&#xff1f; SIMD&#xff08;Single Instruction, Multiple Data&#xff09; SIMD 是一…