1.3.4 项目实施需求
在本项目管理过程中应该遵循以下原则:
科学管理原则。在本项目的过程中应采用科学的理论、方法和工具。以保证本项目的开展科学、规范、高效、高质。
充分沟通原则。在本项目过程中项目经理主导沟通活动有计划地开展,与各项目成员单位有效的沟通,以及时、全面的交流项目信息。
需求导向原则。在本项目过程中项目建设工作开展以用户需求为导向。在和客户充分沟通后,帮助软件开发单位形成正式的、成文的需求文件,作为项目建设工作开展的导向。
质量保证原则。在本项目过程中通过全力配合软件开发部门制定质量保证原则、质量保证计划、建立配置管理系统、开展测试工作来保证本项目高质量的完成。
为了确保项目实施质量,项目建设各方要遵循规范化的项目管理方法,其中包括项目进度管理、质量管理、风险管理、变更管理、沟通管理等项目管理的具体措施和方法,制定切合实际的,确保项目顺利实施的,完善的项目实施管理方案。
项目实施重点难点分析
项目实施过程中的主要难点及重点分析如下:
1、与各数据源单位确认数据资源现状,明确数据资源对接方式,获取基础数据资源;
2、大数据采集、处理、存储、分析、挖掘技术的应用;包括: (1)大数据集成平台的数据整合、数据治理
对于传统的部门使用大数据平台,数据整合、数据治理是非常重要和比较困难的阶段,旅游大数据不同数据源之间的数据整合面临:数据的一致性、数据的完整性、数据的准确性、数据的安全等问题如何解决,当然还有不同数据怎么来存放,进而实现高效的数据存储和分析。这些都是在大数据实施过程中需要花很多时间和经验来实现的。
(2)大数据平台上的数据建模
26
由于大数据平台面临数据的一致性、数据的完整性、数据的准确性等问题,所以导致大数据平台上面的建模变得比较困难,此外还有不同行业面临的大数据平台建模问题各不相同。传统行业在大数据上面的建模面临的挑战还是非常多。 (3)数据挖掘和算法的实现
大数据平台的数据挖掘技术有Hadoop的Mahout、Spark的Mllib、SparkR等,这个现有的挖掘库存在很多问题,如:分布式计算。对整个团队的人员要求非常的高。
(4)应用开发
类似于在Hadoop上面实现一个传统的EDW的功能,常见用的比较多的就是SQL on Hadoop技术,如:Hive、Impala、Tez、Presto、Kylin、SparkSQL等。 3、基础设施(服务器、存储设备、网络系统等)需满足项目建设要求。
1.3.5 知识产权需求
承建方有义务向建设方提供项目实施过程中必须的、合法的、有效的、符合国家保密规定的、不侵犯任何第三方知识产权的有关资料、信息。
本项目所有知识产权的归属问题应依据合同中明确规定执行。 采购人享有本项目实施过程中产生的知识成果及知识产权。
在项目实施过程中采用自有知识成果,并提供相关知识产权证明文件。使用该知识成果后,投标人需提供开发接口和开发手册等技术文档,并承诺提供无限期技术支持,采购人享有永久使用权(含采购人委托第三方在该项目后续开发的使用权)。
1.3.6 保密义务需求
在本项目建设过程中,承建方对所获得的建设方的全部形式和内容的信息、资料、数据承担保密义务。不得在本项目目的以外使用上述信息、资料,并不得向任何第三方披露、许可使用。建设方的资料包括但不限于以下,由建设方向承建方通过口头、书面、电子或其他方式提供的关于技术和系统及其他方面的一切数据、报告、信息、预测和记录等内容: (1)建设方的机构设置和运行机制;
27
(2)建设方的电子设备及其它辅助产品、安全产品的型号、规格、数量、配置、运行状态、日志等资料;
(3)平台名称、功能、业务类型、系统测试及试运行期间的资料等信息; (4)平台在运行过程中形成的各类数据信息。
(5)因为维护工作获取的有关系统配置、技术档案等内部技术资料,非经用户方允许不得擅自拷贝和对外泄露。
(6)因为维护工作获取的客户资料、用户数据和报表等经营数据,非经用户方允许不得擅自拷贝和对外泄露。
1.3.7 售后服务要求
为了能更好地服务政府,要求配备一支拥有丰富服务经验及高度敬业精神的技术专家队伍,以便对旅游大数据集成平台的各种硬件平台,软件系统进行准确、及时的诊断和维护,使系统一直保持良好的工作状态。必须提供详细的技术支持和运维服务方案,确保该平台7*24小时安全稳定运行。系统发生重大故障修复时间不超过 2小时,非重大故障修复时间不超过8小时。(重大故障指导致系统无法访问、访问困难或重要功能无法正常运作或其他影响较大的故障;计划外停机是指未经用户同意的停机)。 具体要求包括并不限于:
(1)须对所投产品提供1年质保,并可以提供上门服务。
(2)制订详细的应急处置预案,确保故障得以及时解决,并提交完整的运维月报和年报,针对每一次系统问题事件,提交问题处理报告,说明问题类型、问题原因、问题解决方案等情况。
(3)系统通过验收正式上线起,提供为期1年的免费运维服务(具体时间以合同约定日起算)。服务范围包括:系统非新增功能二次开发、安装、升级、调试、漏洞修复、问题处理、系统调优、系统管理等。(需提供承诺函)
(4)运维期间,承诺以其技术团队为系统提供技术支持。服务方式包括并不限于电话、互联网、E-MAIL和现场等方式。 (5)提供7x24小时电话支持和技术服务。 (6)按照用户要求进行配置管理和设定发布流程。
28
(7)系统运行过程中发现的系统漏洞,免费予以修复;超出质保期且项目也应予修复,但可收取合理费用。 (8)免费提供系统使用培训;
(9)配置2名专职售后服务工程师提供驻场服务 (10)软件系统必须提供源代码。
1.4 总体方案
1.4.1 总体架构设计
成都旅游数据中心大数据集成应用平台主要内容包括构建“一库二体系一平台”, 一库”指建立成都旅游大数据中心数据库集群,“二体系”是具体指平台标准规范体系和安全体系,“一平台”指建成成都旅游数据中心大数据集成应用平台,形成“一体化”的架构设计思想。其次,对已建成的旅游局内部各子系统,进行完善和升级,实现对各应用子系统和各类用户的统一管理;平台可以支持对各旅游业务应用系统的弹性接入;支持在平台上开发基于Web Service 等技术开发标准的调用接口,使得各第三方系统、设备可以便捷的接入本平台,充分体现平台的开放性。
图:成都旅游数据中心大数据集成应用平台总体架构
成都旅游数据中心大数据应用集成平台支持广域网运行模式的三层网络架
29
构体系,既要可以满足用户个性化需求以及系统安全性等方面的需要;又要同时保持系统核心架构的稳定性,保证系统的可用性、可靠性和可扩展性。
平台采用三层或以上体系构架,基于SOA架构实现服务,具备易部署、易管理和易使用的特点,各系统通过发布和获取服务来对外提供和获取信息。系统总体将采用B/S和C/S相结合的架构,实现基于WEB应用,实现客户端零代码维护。
基础设施服务:基于服务器、存储、网络及安全设备等,通过整合基础设施资源,提高资源利用率,为各种应用提供可扩展的、安全稳定的基础支撑。本项目主要利用成都市云计算中心的基础设施资源。
平台服务:基于数据采集与交换平台,按照数据标准规范对数据进行清洗、转换、汇集、规整及质量监控,建立缓冲库,通过元数据库规范数据整合、管理和服务过程,建立中心库,通过数据集市、数据仓库等形式对外提供数据检索、数据分析、数据报表、访问接口、数据比对等服务。
应用层:为大数据应用体系、数据分析应用提供数据支持。
标准体系:标准规范体系涉及到基础设施服务、数据管理与服务、安全保障、日常管理与运维等多个层面,是数据中心的基础。
安全保障体系:安全保障体系涵盖物理安全、存储安全、网络安全、数据安全和信息安全等,为数据中心各环节、各阶段、各层面提供全方位的安全保障。
接入层与用户层:提供系统所有访问用户访问接入渠道,根据本项目的要求,采用成都市云计算中心基础网络接入,并配合统用户一认证实现远程用户接入时的身份认证和授权。远程用户可采用浏览器或APP方式访问应用系统。用户层指访问和使用本项目的用户,主要包括政府、企业、以及公众。
其中应用层的主要内容包括:
1、旅游运行分析模块,从常规旅游统计数据、旅游大数据、旅游产业数据三个方面切入,为旅游大数据分析提供数据测算模型,精准展示旅游运行分析成果。
2、旅游宣传营销子平台,通过成都旅游综合门户、景区视频监控、游客服务系统等,提供线路信息展示、景区热力图展示、客流量展示、高峰游客量展示、天气查询、空气质量、交通查询、导游领队查询、景区游客流量查询、旅游产品
30