大数跨境
0
0

东华大数据平台数据管理和分析处理

东华大数据平台数据管理和分析处理 东华软件数据智能事业部
2018-05-16
0
导读:大数据中心汇集的信息资源面向全警使用,向全省各业务警种及各市县公安机关开放使用。全是各级公安机关信息化主管部门负责信息资源库的管理、数据入库、清洗、转换并按相关规定提供信息资源共享和服务

大数据中心汇集的信息资源面向全警使用,向全省各业务警种及各市县公安机关开放使用。全是各级公安机关信息化主管部门负责信息资源库的管理、数据入库、清洗、转换并按相关规定提供信息资源共享和服务,总体结构如下:

数据汇聚整合系统可以汇聚、整合公安数据、政府和企事业涉及公共安全数据,必要时可以进一步汇聚整合安全、军队、武警等相关部分数据资源,形成可以支撑公安各专业警种各市县公安公安机关实战业务的全方位数据服务。

数据汇聚整合系统可以整合的数据分为公安系统内部数据和系统外部数据两类。

公安系统内部数据主要包括:国保、治安、刑侦、经侦、出入境、边防、消防、技侦、网警、交警、指挥中心、科信、禁毒、反恐等不同警种的数据。

公安系统外部数据则指公安部门之外的相关部门和行业数据,如外交、工业和信息化厅、民航、铁路、教育、卫计委、城建、银行、交通、宗教、民政、安全、军队、武警等部门以及快递、车辆租赁、出租车、打车、旅游、商超等政府、军队、企业数据。

数据汇聚整合系统整合的数据类型、数据容量可以根据需要进行扩充。根据信息资源规划和数据库建设章节所述内容建立数据服务体系。


系统的特点如下:

  1. 产品采用双总线设计(数据总线、服务总线):融合了ESB(服务总线)和ETL(数据总线)功能于一体的全新理念设计的中间件产品,为数据整合、应用集成提供有力的支撑。有效的避免传统ESBETL采用两个产品进行项目实施的整合问题,提供工作效率,进一步降低成本。

  2. 提供基于B/S图形化的服务编排工具目前国内外绝大部分的ESBETL中间件提供的服务编排工具都是基于C/S的,仅适合于开发人员使用。本产品提供基于B/S的可视化、图形化的在线服务编排工具,实现拖拽式的服务定制和编排,并支持在线调试、部署、管理等。

  3. 提供大量的服务应用模板:为方便用户进行服务定制,减少用户使用的复杂度,本产品根据以往大量的项目经验,提炼出了大量的通用功能模板,如数据库同步、文件交换、服务代理、数据服务访问等模板。

  4. 提供强大的安全保障机制:本产品提供对服务和数据的安全保障机制,支持对服务进行授权访问,支持多种身份认证机制(CAOAuthTokenHttpBasicJWTCAS等)。产品提供对数据访问授权,支持表级、字段级、记录级进行数据库数据访问控制。

  5. 提供对大数据平台支持:提供对大数据平台的适配能力,支持HBase采集和存储、HDFS采集和存储、Impala数据检索、Hive QL数据处理、Phoenix SQL数据检索等大数据适配器。

  6.  支持大文件(2G以上)的高效可靠传输:依托数据拆解包机制,对大文件进行拆包后进行数据传输,并通过MD5的方式校验数据的一致性和完整性。

  7. 100+各类型的组件,满足不同类型的需求:目前提供了100多个各类型的组件,实现数据集成、应用集成、云端资源集成、物联集成方面的功能。

  8. 灵活的二次开发和定制能力:产品采用OSGISCA、扩展点等先进的架构理念设计,提供灵活的二次开发能力,可以通过组建定制,实现任意数据、任意格式适配扩展。




【声明】内容源于网络
0
0
东华软件数据智能事业部
东华数据智能事业部主要致力于人脸识别比对产品、视频结构化产品和公安大数据产品,人脸识别产品包括人脸卡口、智能人像比对、移动人像比对、智能访客系统等。更多详细介绍请持续关注我们,我们将在这里为您带来产品展示,案例分享等。欢迎您与我们交流互动。
内容 16
粉丝 0
东华软件数据智能事业部 东华数据智能事业部主要致力于人脸识别比对产品、视频结构化产品和公安大数据产品,人脸识别产品包括人脸卡口、智能人像比对、移动人像比对、智能访客系统等。更多详细介绍请持续关注我们,我们将在这里为您带来产品展示,案例分享等。欢迎您与我们交流互动。
总阅读13
粉丝0
内容16