RG-iData大数据
RG-iData大数据
RG-iData大数据

校园信息化建设已然进入到了“智慧校园”时代,构建“互联网+”信息化建设格局,用互联网思维推进校园信息化建设,连接现有数据,整合系统资源,扩展应用覆盖,强化科学的决策分析已经成为各高校首要发展方向。在高校日常教学和管理中,积累了大量历史数据,随着校园Wi-Fi 普及,每天都产生大量的实时网络行为数据。教务系统等日常数据与网络数据各自为营,形成一个个数据孤岛。如何连接、存储、挖掘这些数据的价值,成为了高校的核心关注点。随着大数据技术日趋成熟,可对各类源数据进行采集、清洗、处理,构建大数据仓库。采用数据挖掘等技术,可以构建大数据分析框架和模型,提取数据资源中具有潜在应用价值的信息和规律。成熟的大数据技术方案可支撑高校大数据需求,同时,国家层面发力大数据方向,各级部门的政策文件和资金支持,加上学校的对大数据的价值意识觉醒,最终推动高校大数据的落地。

RG-iData(Ruijie intelligent Data)作为锐捷自主开发的大数据解决方案,首先,支持各类型数据的采集(如设备数据、互联网数据和校内业务系统数据等);其次,提供可扩展的分布式大数据平台存储和计算资源,为海量数据的存储和分析提供高效支撑,将大数据的价值可视化,快速展现。整个方案形成一站式大数据服务,解决高校在信息化建设中碰到的问题和挑战。

更多+
产品特征

数据采集组件

考虑到未来信息化的发展及计算机科学技术的发展,大数据管控平台可以支撑无线数据、有线数据的向后适配性全量、增量采集。目前能够支持设备数据采集、业务系统数据采集、互联网数据采集等。

1)  设备数据采集

高校中网络设备每时每刻都在产生着大量非结构化或半结构化数据,如上网日志、身份认证日志、无线AP的日志和URL日志等,数据采集组件可以对以上数据进行设备数据采集,同时也涵盖无线AP对终端位置探测数据采集。

2)  业务数据采集

学校的一卡通系统、学工系统、门禁系统、教务系统、科研系统和图书馆系统等业务数据分散地存储在各个厂商系统的数据库中。使用数据采集组件,可以对接几乎所有主流的关系型数据库,如MySQL、MS SQL Server、Oracle、IBM DB2等。

3) 互联网数据采集

互联网中存在的大量非结构化数据,本方案中采用分布式的网络爬虫方案,可以快速实时地从互联网爬取URL分类、APP分类等信息,通过爬虫将所需信息如URL分类、APP分类获取下来作为类库集。

大数据基础平台

针对高校信息化的快速发展,随之产生的各种数据暴涨,如无线数据、上网数据、部分业务数据等,要求大数据解决方案必须提供可灵活扩展的存储能力,并为之配套高性能的分析能力。

采用分布式存储架构,集群化部署方式,能够平滑升级,通过增加节点数量实现性能提升,实现结构化数据和非结构化数据差异化处理,整体实现统一的运维管理入口。平台采用B/S架构,支持主流Linux系统上运行;支持R、Python、Scala、Java等主流编程语言;支持Mysql、SqlServer、Oracle、NoSql、MogonDB、Redis、Hbase等数据库。支持节点在线扩展,不中断当前系统的运行,提升性能线性。

提供MapReduce、Spark、Storm等多种计算框架,离线计算、内存计算和流式计算并存,满足高吞吐、大数据量和低时延实时处理等多方面的数据计算要求。提供机器学习算法库,包含聚类分析、分类算法、频度关联分析和推荐系统在内的常用机器学习算法。通过大数据平台的深度挖掘和关联分析,为全校师生员工及各部门、各学院提供数据服务以及综合数据分析服务。支持R 语言进行数据分析,支持传统SQL 、Hive 、Spark 进行数据分析。

平台提供WEB图形化界面实现集群的管理和监控,集群节点的运行状态都能在界面上显示,能够监控节点CPU利用率均值及峰值、内存容量及其利用率、物理机磁盘使用情况等;提供集群管理界面:能够支持新增集群,集群启动、停止等操作;集群配置、扩展主机、集群检查。

通过集群HA切换、数据冗余备份、应用及采集组件互备支撑稳定性。集群主节点任意