勤智 创新创业大数据平台_解决方案
ssh/telnet、TCP、syslog、trap、脚本、WMI、netflow/cflow/sflow/netstream协议等。
? 支持对大数据平台涉及的各种设备状态的实时监控(如:通断、资源使用
情况、端口状态、流量峰值、流量变化量等其他关键指标等) ? 支持网络设备的流量的应用层协议分析和监控.
? 借助类似曲线图表现大数据平台内部最近一个小时,最近一天,最近一周,
最近一月,最近一年的服务器或者集群的cpu负载,内存,网络,硬盘等指标
? 支持各类监控指标的告警阈值的人工和自动调整 ? 支持告警信息的短信、邮件通知以及声光报警通知 ? 支持网络拓扑和机房的视图可视化管理
? 支持网络资源的配置自动备份
? 软件资源监控
大数据平台内部的软件资源复杂,需要支持统一化的一体监控模式,支持对Hadoop架构体系内所有软件模块和系统(HBase、HDFS等)、关系型数据库(MySQL集群、Oracle、SQLServer等)、中间件系统、前端应用、软件TCP端口等软件资源的监控和管理,支持SNMP、SSH/telnet、JMX、JDBC等监控方式和协议,实现:
? 支持大数据平台内部的各种传统关系型数据库和数据库集群、Hadoop架
构中HDFS/HBase等的状态、内存数据库状态、各类中间件资源状态、平台内部和前端应用状态、各类内外部的接口状态的实时监控 ? 支持各类监控资源的告警阈值的人工和自动调整 ? 支持告警信息的短信、邮件通知以及声光报警通知 ? 软件信息变动和资源使用异常等关键指标的监控
? 基于软件关联关系的监控,实现基于多个软件和硬件的业务级别的监控
3.2.2 平台故障处理管理
大数据平台涉及的软硬件信息和数据量较大,平台上线运行后会面临海量的故障信息,故障信息分析是运维工程师面临的难题,而云计算、虚拟化等新技术的广泛采用进一步加剧了运维管理的复杂度。需要对运维流程进行梳理,将技术人员从繁重的运维工作中解脱出来,实现运维作业的标准化、自动化,缩短业务
21 / 25
勤智 创新创业大数据平台_解决方案
响应时间,提高服务质量。平台的各类故障和告警处理的管理主要针对平台运行期间所有异常事件的统一管理,确保所有异常事件都被处理的管理功能。借助国家标准和ITIL的SLA模型,需要建立一套完备的故障事件、问题、变更和发布等的标准化故障处理流程,规范故障处理的过程,做到故障的及时处理、追踪、统计,确保每一个问题和故障都能被及时的处理。提供页面/邮件/短信/声音/光/消息客户端/WebService接口及时通过责任人进行告警处理。
3.2.3 日常平台管理任务自动化
日常平台管理工作中有很多是标准化的工作,如巡检、值班等工作。这些工作会占用大量的时间,将人工的操作、管理转变为系统自动化的操作和管理,可以节省时间,将精力投入到更紧急、更重要的工作中。
? 自动巡检功能
平台的监控管理系统自动将需要巡检的设备状态发送到系统中,自动进行设备运行状态和重要指标性能数据的收集汇总形成自动巡检结果,同时巡检过程全程记录,通过巡检工单,能够跟踪巡检的执行情况。
? 人工巡检功能
针对非监控资源的巡检,可通过系统内提供的人工巡检功能完成巡检结果的记录,为巡检任务执行的计划、监督和结果的电子化管理提供了有效的手段。
? 值班管理
系统提供值班管理功能实现管理人员的排班、值班、交接班等信息的电子化管理,系统自动排班。
3.2.4 故障处理自动化
? 告警的处理过程通过基于ITIL的事件、问题、变更等标准化的流程进行管理
? 系统自动进行告警过滤、压缩,避免海量告警。 ? 自动将关键告警通过消息发送给责任人。 ? 系统自动运行预定义的脚本恢复故障。
? 对于需要技术人员处理的故障,系统自动创建工单,派发给管理人员处理。
? 系统自动关联知识库,协助技术人员处理工单。
22 / 25
勤智 创新创业大数据平台_解决方案
? 技术人员处理结束后处理方案一键转知识,知识不断累积。 ? 平台内部管理的移动化
支持移动终端的平台状态监控和故障事件的处理,实现管理人员不在现场时的实时平台状态的监管,实现平台状态监控管理的移动化办公。移动终端可以通过政府内网的无线网络系统直接接入、也可以通过互联网经过加密的专用VPN通道访问政务内网的特定资源。
3.3 科研专家和数据资源
以勤智数码与成都电子科技大学联合成立的“机器学习与数据智能联合实验室”进行挂牌,为大数据平台发展提供优质的科研专家资源。
以国信优易分中心的形式挂牌,平台提供与国信优易数据访问的接口支持,创新创业大数据平台成为整个地区访问国信优易拥有的国家部委重要数据资源的唯一入口。依托国信优易的未来国家级大数据共享促进中心的发展定位,将在未来基于数据驱动的运营体系中会处于非常有利的发展格局。
4 项目收费和收益模型
政府委托勤智数码作为创新创业大数据平台的建设和运营方,建议由政府指定的全资公司与各个委办局签订数据共享和使用协议,该全资公司与勤智数码签订服务框架协议,由政府向勤智数码以购买服务的方式来支撑大数据平台的正常运营,收费模型保证项目的投资收益。目前规划的收费和收益模型总结如下:
4.1 平台运营服务
政府每年向平台支付平台运营服务费,平台为政府提供如下服务内容: ? 勤智数码为政府建设一套创新创业大数据平台,为实现政务数据的共享交
换能力,为政府内部的数据共享、分析和挖掘提供必要的服务。 ? 基于勤智数码为政府建设的大数据平台,为智慧城市建设历程中所有垂直
行业应用提供底层的统一数据平台支撑能力,为政府实现城市级的数据沉淀提供必要的服务。
? 勤智数码为创新创业大数据平台提供专业的运营维护服务,确保平台的持
23 / 25
勤智 创新创业大数据平台_解决方案
续稳定运行。
? 平台提供国信优易数据的访问接口服务,作为区域内唯一的访问接口对外
提供服务。
4.2 数据运营服务收益
政府委托勤智数码对平台内的数据和上层应用进行全面的运营,借助平台中基于数据驱动的运营体系直接收益。计划按照目前已规划的政务数据、国信优易的数据、智慧城市运营产生的数据等,数据价值巨大,初步预估超过数十亿元。政府全资公司可以获得数据运营直接收益的30%。
结合平台建设投资的计划,预计数据驱动的运营服务起始阶段属于无收益投资阶段,随着平台运营收益程逐年增长,预估整体最终在2~3年左右后开始收益。
4.3 大数据产业链发展促进收益
通过对创新创业项目的孵化,产生落地的创新项目,直接促进更多的社会就业岗位,提升就业率。如年孵化10个投资千万的大数据创新项目,可间接产生超过5亿元的地方产值增长,大数据产业可间接获得近100亿的发展空间。通过对大数据产业链的整体促进作用,从上游的数据拥有和制造环节,到中游的数据加工和使用环节,再到下游的基于数据创业的投资收益环节,都有直接的影响。
政府在产业链上游属于数据的拥有者,收益最大;同时政府也属于产业链中游的数据使用者,对政府内部的管理促进收益也很明显;最终通过产业链下游的投资环节的蓬勃发展,直接促进整体GDP规模的提升。
4.4 政府社会收益
政务数据共享交换机制的建立,解决各委办局数据孤立的历史难题,借助数据共享体系建立创新出多个内部或对外惠民应用,让老百姓直接感受到政府提供的免费服务,间接大幅提升民生服务满意度,提高政府领导的执政效果,提升政府大数据产业建设推广的标杆性社会综合影响力。
通过打造创新创业的投资环境,直接提升了区域的整体品牌形象,吸引外来人才,培育了本土技术、商业、投资等各类人才的发展,社会整体对外的城市形
24 / 25
勤智 创新创业大数据平台_解决方案
象提升效果会非常明显。
5 项目建设阶段目标
创新创业大数据平台,初步规划在项目正式启动后一年内实现数据共享交换平台基础支撑体系能力的建成、创新创业云端平台建成、大数据特色竞赛平台建成、统一门户建成。
使得大数据产业在年底初步可以开始吸引大数据创新创业人才入驻,初步具备创新创业项目孵化能力,大数据创新创业的形象的推广启动等。
25 / 25