加入收藏 | 设为首页 | 会员中心 | 我要投稿 核心网 (https://www.hxwgxz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

生态环境大数据分析应用示范平台总结

发布时间:2021-01-12 08:34:46 所属栏目:大数据 来源:网络整理
导读:生态环境大数据分析应用示范平台总结 1、前言 这个项目从2015年12月开始到2016年11月结束,历时一年,一年的时间有接近八个月的时间我待在呼和浩特。经历了冷暖交替,基本熟悉了当地的饮食生活习惯,结束的时候真有点依依不舍。这是第一个独立负责完成的项目

生态环境大数据分析应用示范平台总结

1、前言

这个项目从2015年12月开始到2016年11月结束,历时一年,一年的时间有接近八个月的时间我待在呼和浩特。经历了冷暖交替,基本熟悉了当地的饮食生活习惯,
结束的时候真有点依依不舍。这是第一个独立负责完成的项目,中间经历了很多,有苦,有甜。项目初验结束的时候就想写篇文章总结一下,一直没有写(太懒了)。
现在终验已经结束,想来已经没有借口拖下去了,前两天整理了一下
大纲,今天开始写,预计两天将文章写出来,一是总结一下最近一年的工作信息,二是回顾学习、总结经验。

2、概述

生态环境大数据分析应用示范平台是内蒙古自治区环保厅的一个项目,隶属于污染源统一监管,主要目的是为生态环境信息化管理提供决策依据,主要涉及两个
方面,一是乌海周边污染源排放大数据分析(IBM单位承建),二是重点污染大数据分析(我们公司承建),重点污染源大数据分析分为两个部分,一是电力行业
大数据分析,二是重点污染源在线监控大数据分析。

3、项目背景

3.1如何接到这个项目

公司和内蒙古环保厅有着长期的合作关系,加上本公司的技术、产品实力,以及销售人员的不懈努力,经过招标,公司接到了这个项目,同时接到的还有网格化统

一监管示范平台。

3.2我是如何接触到这个项目的

本来我是科技公司一个做产品的职员,重来没想做项目,并且我做的东西和项目关系不大(主要涉及H5,nodejs,Java,以及少许的Go),但是有一天老大找我说
想让我带个团队做个项目,可以会有段时间出差,让我考虑下。当时并不知道是什么项目,然后开启动会的时候就叫上了我,就这样接触到了这个项目,这个时
候项目还不是我负责(主要负责周边工作,安排开会时间,学习项目需要的东西,编写周报等)。在项目要开始进行开发的时候,老大给我打电话问我考虑的
怎么样了。想让我担任项目经理,当时的时候是有点虚的,毕竟没有经验。后来老大说虚什么,有什么问题我在后面给你顶着,就这样我同意了,之后项目
相关的事情就我负责了。

3.3项目目标

电力行业及重点污染源大数据分析平台一方面利用电力行业大数据,对行业现状、能源消耗及污染物排放现状进行分析,最终对行业未来及超低排放进行预
测;另一方面利用信息技术对重点污染源各项指标进行指标体系定义、数据采集、过滤校核、分析计算,并通过对结果的分析诊断得出数据质量的优劣,为
企业的差别化、精细化、精准化管理提供依据。平台建设能够提高各渠道的数据采集效率,能够自动进行计算和结果分析。为决策管理的开展提供科学的数
据支持。

4、项目人员

一个项目的完成少不了各种人员的投入,协调不同人员的工作关系是非常重要的。根据本项目的具体需求,人员主要分为一下几个部分:管理人员、产品人员、
发人员以及其他相关人员。管理人员主要有公司CTO、老大、产品经理和我,CTO主要负责技术支持,老大负责给我当后盾,产品经理负责需要调研、用户沟通、
编写相关文档、演示等工作。其他人员作为一个项目都是知道,研发人员主要有CXF、FYF、LC、TZC、HWF和我,CXF负责非结构化文件的处理及相关工作,
FYF负责CEMS数据采集等相关工作,LC负责相关算法的编写和数据同步,TZC和HWF负责前台页面开发,我负责自助查询组件、业务逻辑、以及前台页面开发。

5、项目阶段

5.1准备阶段

准备阶段主要是销售人员和产品人员负责,当时我还没有到呼和浩特,具体的信息不清楚。

5.2设计阶段

我到呼和浩特的时候是三月下旬,那个时候呼和浩特还是比较冷,还好有暖气,但是天气特别干燥,基本每天鼻子都会结血痂。到了之后才知道项目需要很多
文档资料,还要预约人员进行需求评审,同期的很多项目都已经做了,但是我们的文档还没有写完,同时在需求的同时开始进行详细设计。不过幸运的是快要
清明节了,就在内蒙呆了几天就回了,回来后抓紧编写文档。
再到呼市的时候已经是清明节后了,预约相关人员进行评审。幸运的是需求评审一次就过了。需求评审后抓紧开始详细文档的编写。在编写详细设计文档的时候
开始进行相关基础功能的开发,在需求评审结束后没有多久详细设计文档编写完成了。完成之后开始进行相关功能的开发。赶上五一,回来找房子,没有找到合
适的,就和房东续签了。五一过后就到了呼市,开始进行项目的开发,在六月初的时候完成了详细设计文档的外部评审。

5.3实施阶段一

实际上,在设计阶段我们已经在开始做实施阶段的事情了。在实施阶段遇到了几件比较重大的事情:一是非结构化数据的处理比想象中的要麻烦很多;二是
CEMS分钟数据的算法分析相当麻烦,需要大量的测试验证;三是有段时间客户不满意我们的工作内容;四是人员的不足;五是硬件没有及时到位,导致程序
没能及时部署测试。
为了解决这些事情,不同的人员开始加紧解决不同的事情,那段时间,有好几个同事从公司到呼市出差。在呼市加班加点干了两周,这些事情才慢慢得以解决完
成。项目中难免有些需求变动,有些时候不得不加班加点得干。在这里感谢这些朋友,没有你们的付出,项目不能按时按量的完成。
在这段时间抽空出去玩了两趟,放松放松心情。项目实际上在8月低的时候,基本已经结束了。但是很有很多小问题需要修改,还要整理大量的文档。这个
时候有些功能还要继续调优,趁这段时间修改了刚开始确定的前端框架,修改为bootstrap,完善了基础管理功能。

5.4实施阶段二

时间很快进入9月份,这个时候开发工作基本结束了。主要在整理各种文档,其中补了190份左右的日报,这个要感谢公司测试人员的帮忙才能在短时间内完成。
9月底的时候趁着十一假期我到郑州溜达了一圈,到开封和嵩山玩了一圈,之后从郑州直接回家了。本来说好十一过后项目初验的,但是拖到了20号,在初验前
一个周末我到了呼市,整理各种文档,准备文档装订,但是无奈文档太多最后只好到打印店打印了。我们两个人从上午11点到打印店,一直待到晚上快9点的
时候结束了。一共装订了136本,所有费用一共4500,这是我所打印使用费用最多的一次了。当天就有同期的项目在验收,还好在当天打印完成了。虽经波折,
但是项目还是和预期一样验收通过了。

5.5验收阶段

初验结束后,项目进入试运行阶段。初验结束后,用户希望我们做一个大屏出来。处理初验后的一些事情之后没几天,就回到了公司。在公司设计大屏的东西,
之后两周接到通知要到乌海培训,本来不想去,无奈厅里面也要培训,所以又到了呼市。在培训的时候知道终验要提前,大屏从设计到开发可能只有一周时间
了,还要针对大屏进行设计优化,所以加紧了大屏的设计和开发工作。从大屏设计出来,到开发完成一共不到一周的时间,总体效果还可以。在终验之前完成
了所有项目需要的文档及其他相关工作。终验一共两天,第一天结束后,整个大项目聚餐,第二天公司聚餐,第三天我就回来了。11月24号回到了上海,大数
据项目整个过程就完成了。

6、文档资料

本项目收获之一是完成了大量的文档编写工作

6.1准备阶段

准备阶段的文档由总集公司统一整理,没有准备相关的文档。

6.2设计阶段

《项目开发计划》 1份
《需求规格说明书》 1份
《详细设计说明书》 1份
《需求设计评审意见》 1份

6.3实施阶段一

《项目实施计划》 1份
《测试方案》 1份
《测试计划》 1份
《测试用例》 1份
《日报》 182份
《周报》 41份
《月报》 10份
《模块开发卷宗》 1份
《会议纪要、评审意见》 3份

6.4实施阶段一

《用户手册》 1份
《操作手册》 1份
《安装手册》 1份
《培训文件》 1份

6.5验收阶段一

《系统测试报告》 1份
《系统开发总结报告》 1份

6.6验收阶段二

《初步验收报告、意见》 1份
《试运行方案》 1份
《试运行记录》 1份
《试运行报告》 1份
《培训方案》 1份

6.7总结

以上是这个项目形成的最总版文档,最终装订成册的文档一共85本。值得庆幸的是这些文档都已经整理成模板文件,对于常规的项目按着这个结构来,基本不会有什么大问题。

7、项目总结

7.1时间投入

我是从15年12月底开始接触的,从那个时候算起一共11个月,整个项目周期一共12月。

7.2人员投入

人员投入是一个比较难估量的数据,如果按人天计算的话应该在300人/天左右。

7.3成本情况

当初预算的成本是25人月来的,实际上用了大概3/5。

7.4完成情况

基本完成预定的目标,但是有些地方有一定的偏差。

8、项目收获

8.1公司收获

对于公司来说,第一个收获肯定是收入,第二是完成数据质量评估体系的建立,第三是完成了对大数据系统的建立工作。

8.2团队收获

对于团队来说,第一个是磨合了团队之间默契度,第二是加强了团队之间的沟通工作,第三是大家一块完成了一个还算可以的项目。

8.3个人收获

对于我来说,收获最大的是经验。第一个从开始负责到结束的项目;第二个收获是加强了与人沟通的能力;第三个是认识了一批对我帮助很大的朋友;第四个是
专业技能的加强(学习了bootstrap、echarts、saiku等知识);第五是趁着这个项目感受了一下北国风光。

9、个人总结

9.1失败的地方

对于这个项目失败的地方,第一,没有按着当初计划的时间完成开发工作,导致公司的一些安排滞后;第二,时间安排不合理,有段时间安排的过于紧张,有段
时间又比较轻松;第三,人员的流动性带增加项目的不稳定性;第四,没有在开发之初固定好开发框架,导致后来的换框架的工作,增加了工作量,延误了时
间。这些问题可以控制,但是我没有把控好,在以后的工作中需要注意、改过。

9.2成功的地方

成功的地方有很多,一是独立完成了整个项目的开发协调工作;第二,是完成了整个项目的框架搭建工作(不完善);第三,是学习了大量以前没有接触到的知识,
加强了前端技能;第四,是通过这个项目积累的经验,这些经验是不经历过就永远都不知道或不理解的。第五是认识了大量的朋友,感谢他们对我的帮助,没有
他们的指导和帮助我进步不会这么快。

9.3总结

这个项目历时一年,总体来说,时间相对来说比较长,但是从开始人员投入到项目结束,实际上并没有这么长的时间。所以,时间相对来说有些分配不均。这个
项目实际上的功能不是很多,但是都比较复杂,并且数据来源是一个相当大的问题,功能点和业务系统的需求不一样,基本都是探索性的功能。解决这些问题
需要大量的时间,大量的人力,这就是中间为什么有一段时间特别忙碌的原因了。还有最大的一点,就是我学会了如何找人帮忙做事情,这是以前我完全没有
想到的,有些事情不是你能做你就有时间做的,不同的职责做不同的事,放开自己的心态,你做不了所有的事。在呼市呆了大半年的时间,呼市的美食吃了很
多,可能很多在呼市呆了很久的人都不一定有我吃的多。内蒙主要产牛羊肉,牛羊肉当然是特色了,比较好吃的是锡林浩特的羊肉(锡盟羊肉),做的比较好的
餐厅就多了。一般比较特色的蒙餐餐厅有格日勒阿妈、巴彦德乐海,其他的小店不一定能找到;其次是内蒙的辣鸭头,以前是不吃鸭肉,吃了两次后感觉还
不错;还有各种烧烤店,在呼市应该吃了不下八次烧烤,冰煮羊也是比较特色的餐厅;其他的比如谭记小厨、有虾有鱼、唐食语粥等。

10、个人感悟

15年5月的时候我离开南京,现在回想一下是一个正确的决定。在南京上学,之后在南京上班。最后来到上海这家公司,跨越两个城市。来到现在的公司不到
一年开始当时设想的工作,刚开始的时候还是很担心的,好在坚持下来了。这个是第一个我独立带领完成的项目,应该有很多话要说,但是突然有不知道从哪里
开始说起。
毕业之初想着三年后当上项目经理,技术能独当一面,现在来看第一个目标算是完成了,第二个目标就不知道有没有完成了。当知道的越来越多以后就越来越担
心,懂得太少了,应该好好学习,但是要学习的东西有太多。最近想学习数据分析算法、spark、scala以及hadoop相关的东西,但是我的目标又好像不是
这些东西(崇尚管理和技术并重),匆匆岁月不能每个东西都学习,总要有所舍弃,也许以后有新的东西又想接触。以前的时候很容易静下心来学习,就算有
一段时间不能安心,但是最近总是静不下心来,也许是最近有些烦心事吧,希望这篇文章过后能调节过来。
项目结束了,有些怀念在呼市的生活了,很大一部分原因可那边没有人打扰,晚上可以干自己想干的事,也没有人管我,完全靠自觉,晚上的时间可以自由支
配,能安心下来好好学习。然后朋友就说你的乐趣在哪里?是啊,我的乐趣在哪里!很多时候我在想,经过这个项目我到底学到了什么,改变了我什么,怎么才能
做得更好呢!单身狗开始呼吁,请求援助单身狗,请求带单身狗找乐趣!关爱单身狗 ,人人有责!。
这个项目从技能上方面来说我有了很大的提高,从管理来说,就是就是自己独立完成了第一个项目,从沟通上来,说提高了与人沟通的能力。其他方面我认识一
批对我帮助很大的人,感谢他们给我的帮助。在这里需要特别感谢TP,感谢他给我这次独立带项目的机会,不知是否满意我的工作;感谢Joy,感谢她给我工作、
生活上的指导、感谢她把她的人生经验传授给我,让我少走了很多弯路,绕过了很多坑;感谢WJJ,她给我最大的帮助是让我认识到了自己的缺点,教授了我很
多以前根本不会但又是我需要的东西,传授了我很多经验;还有很多我需要感谢的人,感谢他们的帮助,让我顺利完成第一个项目。

(编辑:核心网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读