大数据管理中心规划设计方案(ppt可编辑)

news/2024/4/24 13:15:09/文章来源:https://blog.csdn.net/zuoan1993/article/details/130379253

本资料来源公开网络,仅供个人学习,请勿商用,如有侵权请联系删除。

统一汇聚 推动业务数据协同5

b4cb7bba7f252d7e6d87227d61f8ecbe.jpeg

价值提炼 支撑精准服务与科学管理6

582e92b7222b513f0be098442c23fe4f.jpeg

实时感知 辅助城市治理高效运行7

150f1d058410239868c03e26f49bd71c.jpeg

大数据资源平台目标体系规划11

e2bfdd2f25dad4d4c15d0430d435dee3.jpeg

建设目标与思路12

使能高效协同,全面优化数据动态更新与同步机制
推动公共数据完整归集,按需及时同步和更新公共数据,形成大数据枢纽,保证
委办间政务协同
驱动数据应用,进一步完善大数据中心主题库建设
完成主题数据库建设,推动数据资源整合及数据分析应用
聚焦服务赋能,初步构建中台能力开放体系
搭建统一流数据处理和业务中台,并完善数据共享服务与数据分析和可视化 服务,提升数据共享与开放效能
加强数据运营,推动全市数据统一标准化管理及运维
构建统一数据开发与调度,增强数据管理能力 建立统一数据运维和自有的大数据组件技术栈,保障平台稳定运营
确保安全可控,完善数据安全和平台安全管控
建立完整的平台安全和数据安全管控体系,保障数据安全管控

e476bfc1022d09817589ec64c3479f05.jpeg

大数据资源平台功能框架13

60403378cfa99910cd02a97dd3c69b0d.jpeg

2.构建数据中台核心能力,赋能多样化应用场景15

ce1463d6bdbb30fe5dd618895ec1ae16.jpeg

2.1.数据层整体实现方案-数据架构16

◼ 大数据资源平台支撑数据共享交换(生产职能)、数据分析、数据开放三大核心数据服务,包括大数据资源区、对外 开放区和实验区三大数据区。

◼ 大数据资源区:包括市级数据湖和市级数据 库两大数据资源
- 数据湖:主要存放市级政府部门业务数据库、 未经加工的原始业务数据库,支持存储结构 化、非结构化等多种类型的数据,以及用于点 对点共享交换数据
- 市级数据库:主要用于存放经过一系列清洗、 转换、加载、治理步骤后的高质量的政务数 据资源,以及全市各部门、各区政务共享交 换过程中的数据。
◼ 对外开放区:主要用于存放对外开放的数据, 通过单独的对外开发区与大数据资源区隔离, 可以提供更高级别的数据安全保护。
◼ 实验区:主要用于存放非正式的用于技术创新和技术验证的实验数据。

3204fa6a40bf5bc968dd7f5dc2650a99.jpeg

2.2.数据层整体实现方案-数据分层17

◼ 大数据资源平台市级数据库面向不用数据应用、行业领域及主题划分为基础库、主题库、指标库和专题库,市级数据 库和数据湖从数据层次上划分为ODS、DWD、DWA和ST等四个主要层次。

◼ ODS层数据:该层数据为数据 湖落地的贴源数据,其数据结构 与政务应用等系统的原始数据结 构保持一致,是市级数据库的数 据来源。
◼ DWD层数据:该层数据为数据 湖贴源数据清洗后的明细数据。 根据数据标准,对贴源数据进行
清洗、转换,实现数据的标准化 和一致性。
◼ DWA层数据:在明细数据进行 上根据上层应用需要进行横向关 联和纵向汇总的共享模型数据。
◼ ST层数据:面向不同应用的应 用结果数据。

f2667a6e9e9d7a092776bcf67723438e.jpeg

2.3.大数据资源区实现方案-市级数据湖18

e8aa5a4f09d2e4a14069e435611a50c3.jpeg

2.4.大数据资源区实现方案-市级数据库-公共基础库19

c0ed03c2d0232a8c7844595b6cd2f313.jpeg

3.打造全方位的服务开放能力,使能城市智慧运营20

c56fe3087d8a966951479fdab35c5dc0.jpeg

3.3.服务开放层-AI中台服务22

• 基础设施:提供平台的所有基础设施资源,包括计算资源、存储资源等,为整个平台 提供基础支持;

• 平台组件:包括大数据平台、容器平台, 为整个AI云平台提供基础运营环境;

• AI平台:为AI中台核心业务层,包含数据 管理服务、模型训练服务、模型管理服务 推理服务、资源调度服务和运营管理服务 面向业务使用人员提供端到端人工智能研 发生产通用能力;

• A能力:包含各类人工智能A能力,例如图像识别能力、视频分析能力、自然语言理 解能力、知识图谱等;

• 业务应用:包含各类人工智能应用,例如人流疏导、环境治理、智能安防等。

2adec17b7ec3d9edee00e00cfe72024f.jpeg

4.1.5.数据管理-数据质量管理29

f2b13e112042f87d69b0c91bcbc2bff5.jpeg

6.对数据生命周期各阶段相关过程安全提供技术保障34

e80fab415c63251c56a0f64c049f5f9c.jpeg

篇幅有限,无法完全展示,喜欢资料可转发+评论,私信了解更多信息。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.luyixian.cn/news_show_103736.aspx

如若内容造成侵权/违法违规/事实不符,请联系dt猫网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Qt+MySql开发笔记:Qt5.9.3的msvc2017x64版本编译MySql8.0.16版本驱动并Demo连接数据库测试

若该文为原创文章,转载请注明原文出处 本文章博客地址:https://hpzwl.blog.csdn.net/article/details/130381428 红胖子网络科技博文大全:开发技术集合(包含Qt实用技术、树莓派、三维、OpenCV、OpenGL、ffmpeg、OSG、单片机、软硬…

【数据结构初阶】第七节.树和二叉树的基本操作

作者简介:大家好,我是未央; 博客首页:未央.303 系列专栏:Java初阶数据结构 每日一句:人的一生,可以有所作为的时机只有一次,那就是现在!!! 文章目…

港科夜闻|香港科技大学(广州)与中国电信广东公司签署战略合作协议

关注并星标 每周阅读港科夜闻 建立新视野 开启新思维 1、香港科技大学(广州)与中国电信广东公司签署战略合作协议。根据协议,双方将围绕各自科技创新及发展需要,整合双方的优质资源和优势能力,务实开展多方位的战略合作。本次合作&#xff0c…

6.微服务项目实战---Sleuth--链路追踪

6.1 链路追踪介绍 在大型系统的微服务化构建中,一个系统被拆分成了许多模块。这些模块负责不同的功能,组合成 系统,最终可以提供丰富的功能。在这种架构中,一次请求往往需要涉及到多个服务。互联网应用构建在不同的软件模块集上…

【算法与数据结构】6 学会对算法进行性能测试

欢迎来到爱书不爱输的程序猿的博客, 本博客致力于知识分享,与更多的人进行学习交流 本文收录于算法与数据结构体系专栏,本专栏对于0基础者极为友好,欢迎与我一起完成算法与数据结构的从0到1的跨越 算法性能测试 一、前情回顾二、算法性能测试1.生成测试用例2.使用测…

多种内网穿透的实现方案

1. 内网穿透的应用场景 1.1. 开发调试 比如企业微信、钉钉等开发,需要一个回调地址,开发的时候,希望回调到开发的电脑上,打断点进行调试,这就需要穿透到内网的开发机器。 1.2. 演示测试 有需要演示或测试的系统&am…

SLAM论文速递:SLAM—— MID-Fusion:基于八叉树的对象级多实例动态SLAM—4.26(1)

论文信息 题目: MID-Fusion:Octree-based Object-Level Multi-Instance Dynamic SLAMMID-Fusion:基于八叉树的对象级多实例动态SLAM 论文地址: https://ieeexplore.ieee.org/abstract/document/8794371发表期刊: 2019 International Conf…

凌恩生物文献分享|一株细菌完成图也能发一区10分+!

期刊:Science of the Total Environment 影响因子:10.753 发表时间:2022 样本类型:Bosea sp. Ads-6菌株 客户单位:中国科学院微生物研究所 一、研究背景 环境中抗生素残留和耐药性的增加引发了许多…

亚马逊美国站纽扣电池标准

近日,亚马逊美国站公布要求卖家需遵守扭电池和硬币电池的新包装和警示标签规定公告。 在亚马逊销售单独的纽扣电池和硬币电池,则从2023年3月2日开始,您需要证明您的符合儿童安全包装和警告标签要求。 适用产品有;单独的纽扣电池或硬币电池&a…

Android SeekBar控制视频播放进度(二)——seekTo()不准确

Android SeekBar控制视频播放进度二——seekTo不准确 简介seekTo()视频帧 和 视频关键帧解决办法方法一方法二 简介 上一篇文章中,我们介绍了使用SeekBar控制视频播放,使用过程中发现,对于一些视频,我们拖动SeekBar进度条调节播放…

谈谈如何用开源网关进行 API 管理

需求痛点 1.企业不清楚到底有多少个API,无法形成API资产管理等问题。 2.API在不同集群的生命周期问题。 3.API运行状态监控和告警问题。 4.API请求限流、流量控制以及安全等问题。 功能介绍 Apinto的API管理提供API生命周期控制:可管理所有API&…

【DRF配置管理】如何在视图类使用get_objects()

原文作者:我辈李想 版权声明:文章原创,转载时请务必加上原文超链接、作者信息和本声明。 DRF应用和管理 【DRF配置管理】Django使用DRF框架 【DRF配置管理】如何在视图类配置参数(一) 【DRF配置管理】如何在视图类配置参数(二) 【DRF配置管理…

跨数据中心下的 Kafka 高可用架构分析

导语 本文介绍了 Kafka 跨数据中心的两种部署方式,简要分析两种方式下的不同架构以及优缺点,对这些架构可能碰到的问题也提供了一些解决思路;同时也说明了 Kafka 跨数据中心部署的社区解决方案和商业化解决方案。 背景 Kafka 作为世界上最…

Excel技能之实用技巧,高手私藏

今天来讲一下Excel技巧,工作常用,高手私藏。能帮到你是我最大的荣幸。 与其加班熬夜赶进度,不如下班学习提效率。能力有成长,效率提上去,自然不用加班。 消化吸收,工作中立马使用,感觉真不错。…

宠物领养系统【GUI/Swing+MySQL】(Java课设)

系统类型 Swing窗口类型Mysql数据库存储数据 使用范围 适合作为Java课设!!! 部署环境 jdk1.8Mysql8.0Idea或eclipsejdbc 运行效果 本系统源码地址:https://download.csdn.net/download/qq_50954361/87708775 更多系统资源库…

「OceanBase 4.1 体验」|大厂开始接入的国产分布式数据库,不来了解了解?

OceanBase 4.1 体验 前言OCP Express在线升级功能租户级物理备库TP(事务处理)和AP(分析处理)优化TP 性能优化AP 性能优化 结尾 前言 上次我们讲了本人自己亲自上手OceanBase 4.1的初体验,国产的分布式数据库也太太太太…

【STM32】基础知识 第八课 MDK 工程

【STM32】基础知识 第八课 MDK 工程 准备工作新建寄存器版本 MDK 工程步骤新建工程文件夹添加文件魔术棒设置绝对路径和相对路径对比测试程序 新建 HAL 库版本 MDK 工程CMSISHAL 库简介DriversMiddlewaresDevice 和 Include HAL 库文件介绍HAL 库 API 函数和比那辆命名规则HAL …

【ArcGIS】常见问题总结

1 arcgis如何打开*.adf文件 在处理数据时发现,获取到的土地利用类型数据有两个文件夹,一个叫info,另一个叫lucc2010(年份),打开lucc2010里面是一系列的*.adf文件,数据应该如何打开呢&#xff1…

【Vue】Vue 前端设计模式梳理

文章目录 一、什么是设计模式?二、设计几个原则三、常见的设计模式及实际案例【1】单例模式1. 什么是单例模式?2.Vue中的单例模式 【2】工厂模式1. 什么是工厂模式?2.Vue中的工厂模式 【3】策略模式1. 什么是策略模式?2.策略模式的…

QT笔记——QtPropertyBrowser的使用

上一节,我们将了如何去配置QtPropertyBrowser 本节,我们将说明 如何 去 使用QtPropertyBrowser 这个属性类的一些基本知识 简单的几种用法: 首先: 我们需要创建一个Widget 提升一个类 为 QtTreePropertyBrowser .h文件 QtVariant…