雷竞技

概述

随着信息化生长步入DT时代，，，，数据在组织中的价值体现愈发凸显，，，，“数据驱动营业”的理念在各行各业快速扎根、生长，，，，组织对数据价值的挖掘能力的要求也随之愈来愈高。。。。。。。一种能与古板关系型数据治理软件能有用互补，，，，填补关系型数据治理软件在多结构类型支持、海量数据处置惩罚、重大实时/非实时盘算剖析等方面缺陷的数据处置惩罚软件平台呼之欲出。。。。。。。

雷竞技信息大数据平台（Sm@rtBDP）是基于Hadoop生态系统构建而成的可资助组织快速建设高效、实时的“大数据”处置惩罚、剖析能力的一体化数据开发、治理平台，，，，可为组织数据中心的大数据收罗、大数据存储、大数据盘算、大数据剖析及大数据剖析提供轻量级解决计划。。。。。。。通过平台提供的综合数据治理和整合能力买通数据壁垒，，，，毗连数据孤岛，，，，实现海量数据的整合、存储、盘问、统计、剖析等功效。。。。。。。

产品先容

雷竞技信息大数据平台（Sm@rtBDP）整体包括三大部分：大数据运行平台、大数据监控平台和大数据开发平台。。。。。。。

大数据运行平台用来提供大数据的运行情形包括漫衍式文件系统、资源治理、并行盘算框架、内存并行盘算、流式盘算、集群协调效劳、并行盘算SQL执行器、并行盘算剧本语言、新闻中心件、列式数据库、事情流、文件数据收罗、关系型数据库数据收罗等大数据手艺的运行情形。。。。。。。其中集成了23种Hadoop生态系统常用的组件，，，，可以支持多种盘算类型的应用的混淆负载，，，，包括批处置惩罚应用、交互式盘问、高频读写、全文检索、数据挖掘和实时流盘算等多种盘算类型。。。。。。。各行各业可基于这些盘算手段和方法举行上层应用的建设。。。。。。。在清静治理方面遵照国家标准，，，，接纳现在海内外先进的信息清静手艺和有用的清静战略和手艺手段，，，，从平台外部清静以及平台自身清静着手，，，，建设清静管控中心，，，，提升平台的效劳和数据清静性。。。。。。。

大数据监控平台是用来装置大数据平台运行情形、治理监控大数据平台的集群情形。。。。。。。主要功效包括：监控集群的主机状态、集群的磁盘使用情形、集群的CPU使用情形、集群的内存使用情形、集群的网络使用情形；；；治理漫衍式文件系统、资源治理、并行盘算框架、内存并行盘算、流式盘算、集群协调效劳、并行盘算SQL执行器、并行盘算剧本语言、新闻中心件、列式数据库、事情流、文件数据收罗、关系型数据库数据收罗等大数据手艺；；；通过web的方法为集群添加主机、删除主机，，，，针对每个主机可以添加删除各个大数据组件。。。。。。。

大数据开发平台是为开发职员提供的平台，，，，能够提高开发职员的开发效率。。。。。。。它为开发职员提供基于eclipse的开发插件，，，，开发职员可以不必会见大数据运行情形就可以举行开发测试及调试；；；基于WEB的会见漫衍式文件系统，，，，可以上传文件、下载文件、删除文件；；；提供了基于WEB的方法操作列式数据库，，，，可以审查列式数据库数据中保存的表以及每个表的表结构，，，，并且还能审查每个内外的数据；；；提供的数据收罗的界面工具，，，，提供对关系型数据库的数据收罗，，，，支持手动执行数据收罗和准时数据收罗。。。。。。。大数据开发平台还提供了对文本文件的数据收罗支持对文本文件的增量数据收罗和全量数据收罗；；；提供并行盘算框架、内存盘算、流式盘算的开发框架，，，，开发职员可以更利便、高效的开发并行盘算的程序。。。。。。。

适用场景

雷竞技信息大数据平台（Sm@rtBDP）可提供对以下应用场景的优异支持：

■ 大数据重大剖析：能够充分使用集群的并行盘算能力支持海量数据重大剖析。。。。。。。

■ 大表盘问和剖析：能够对历史数据举行重大盘问剖析，，，，例如亿级数目以上数据重大盘问或批量剖析。。。。。。。平台能够使用集群的并行盘算提高盘问速率，，，，支持高并发、高吞吐盘问。。。。。。。

■ 海量历史数据存储：能够以极高的性价比支持海量历史数据的存储。。。。。。。使用平台的廉价存储，，，，可将数据存储到布式文件系统（HDFS）中，，，，提供盘问剖析效劳。。。。。。。相关于传总共享贮存性价比更高，，，，相对带库使用利便。。。。。。。

■ 重大的网页数据剖析，，，，如舆情剖析、社会知足度剖析：能够基于网页数据，，，，实现数据整合及数据剖析处置惩罚。。。。。。。大数据平台提供漫衍式存储、并行化盘算框架、机械学习库等支持能力。。。。。。。

■ 非结构数据存储：支持报表、图片，，，，互联网收罗的文本等非结构化数据存放到漫衍式文件系统HDFS中。。。。。。。在大数据平台漫衍式文件系统下存储数据可靠并使用利便。。。。。。。

■ 实时信息处置惩罚：支持高并发（每秒5000笔以上）的实时信息处置惩罚。。。。。。。收罗的数据不落地，，，，基于内存举行实时盘算及盘问。。。。。。。

价值

■ 大都据类型存储治理手艺，，，，可同时提供结构化、半结构化及非结构化数据的存储治理及会见效劳支持；；；

■ 可线性扩展的漫衍式平台，，，，可容易支持海量数据（PB级）存储及并行盘算；；；

■ 海量数据中检索数据的毫秒级响应能力，，，，可轻松破解通例关系数据库中同样场景保存的性能问题；；；

■ 富厚的流式盘算组件支持，，，，提供如大屏展示、实时数据展现等营业场景的支持能力；；；

■ 功效全、质量高、价钱优，，，，可助客户以较低的投入完成相同需求的支持实现。。。。。。。

优势

■ 高性能。。。。。。。关于实时数据盘算能力能够抵达秒级；；；举行的关系型的数据盘问测试，，，，取得3～6倍的性能优势；；；

■ 高可靠性。。。。。。。从硬件、文件系统和漫衍式盘算框架所有层面接纳高可靠设计架构，，，，有用地避免基于开源产品的不可靠问题；；；支持集群中某台机械宕机或者某台机械泛起故障时，，，，实时盘算集群包管数据不会丧失、营业可以正常举行；；；

■ 高稳固性。。。。。。。支持营业的一连性，，，，在企业IT情形下，，，，提供可靠、清静稳固的7x24 效劳；；；

■ 高兼容性。。。。。。。支持州操作系统如REDHAT，，，， CENTOS等主流Linux操作系；；；支持种种的硬件平台，，，，如IBM的效劳器、HP效劳器、PCServer、X86虚拟机等；；；

■ 简朴易用，，，，无邪开放。。。。。。。浚浚？？？
？墒踊缑，，，，鼠标拖拽添加功效模浚浚？？？
？，，，，易维护；；；Hadoop架构可以轻松扩展到数千节点，，，，支持在运行阶段不宕机的情形下添加集群里的机械，，，，在集群机械里添加组件；；；支持横向扩展安排,支持险些不受限制的系统横向扩展需要；；；周全兼容Apache Hadoop刊行的版本，，，，支持Hbase、Pig、Hive、MR、Oozie等种种开源计划；；；

■ 高度集成，，，，自主立异。。。。。。。提供统一的集群及效劳治理，，，，具有标准的效劳框架和富厚的API，，，，能够利便接入新的组件并举行治理，，，，也能便捷地与其他系统集成；；；清静性以多个条理加入和集成到平台中。。。。。。。提供用于身份验证、授权、可归责性以及数据；；；さ囊π，，，，确保平台及数据清静；；；高性能。。。。。。。