江苏水运数据整合及其应用

2009-06-13 06:26许成涛孟波波
西部大开发·中旬刊 2009年12期
关键词:数据整合数据分析

许成涛 孟波波

摘要:利用网络、数据库、多维分析以及地理信息系统等技术,结合江苏省水路交通管理的特点和信息化基础,以江苏省水路交通整体分析应用为目标,研究水路交通数据整合及其应用,并开发相应的信息系统。系统通过数据整合与分析处理形成江苏省水路交通分析相关的大样本的细节数据,并且利用相关的分析模型对这些数据进行分析,以多维分析和地理信息分析等手段展现给用户,实现数据可视化。

关键词:水运数据;数据整合;数据分析

中图分类号:F552文献标识码:B文章编号:1009-8631(2009)12-0072-02

一、引言

江苏省位于江、淮、沂、沭、泗五大江河尾闾,又有京杭大运河贯穿南北,滨江临海、地势平坦、河湖众多,水网密布,全省航道里程约2.4万公里,为江苏省水路运输的发展提供良好的自然条件。根据统计资料,2008年江苏省水路货运周转量3063.28亿吨公里,同比增长4.55%,占全省综合运输货物运输周转量的66.7%,江苏省水运在综合运输网中所起的作用已远远超过了水运发达国家和地区,是其他运输方式不可替代的。

随着江苏省水运经济快速发展,水运规模不断扩大、水运组织模式多元化的特征越来越明显。进一步加强水运管理,优化政府对水运经济发展的调控,对水运数据分析工作的准确性、时效性都提出了越来越高的要求。因此,加强对水运业务数据的系统性研究,优化水运业务数据收集及处理方式,提高对数据的利用效能,显得尤为重要。

二、水运数据资源及利用现状

水运数据资源是指与水路交通运输规划、建设、管理、决策等业务相关的各类数据。根据产生和来源方式的不同,可以将水运数据进行分类,如表1所示。

目前江苏省水路交通行业管理职能分别由省港口管理局、厅航道局、运管局和地方海事局四个部门承担,各个管理部门各自开发了针对自身业务管理所需要的信息化系统,提高了行业管理水平,并积累了大量的水运数据。但由于水路行业管理职能限制,导致水路交通信息资源分散,缺乏统一、规范的数据标准,使得水路信息资源的共享程度较低,不能有效发挥水路信息资源作用。因此,为满足我省水路交通快速发展的需要,积极推进水路交通信息资源的整合,将有力促进交通信息资源共享和应用,提升水路交通行政管理部门管理水平和服务能力,为水路交通规划、建设和行业管理提供强大的数据支撑,具有重要意义。

三、江苏水运数据整合

完善水运数据资源整合工作是整合行业业务和公众服务信息资源的基础。根据江苏省水运数据的分布特点以及应用需求,水运数据的整合工作主要分为如下几个方面:

1)数据体系设计。从水路交通运输的总体出发,设计结构合理和覆盖全面的数据体系,主要考虑将数据分为基础、运行和出行三大部分,同时在此基础上根据主题分析的需要,设计一系列的主题数据库,从而构建一个完整的水路交通数据库。

2)数据交换集中。通过数据交换平台,根据数据更新频度的需要,进行定时或实时的抽取,实现水运数据向水路交通数据库的集中。

3)数据处理。由于数据来源于不同的部分,在数据集中后,需要对数据进行处理,除了常规的噪声数据、缺失数据、不符合规则数据的处理之外,还需要处理来自不同管理部门、不同应用系统数据之间的对应关系,从而将这些数据融入到逻辑体系完整的水路交通数据库中。

整体的数据整合工作如图1所示。

四、水运数据应用及分析

在水运数据整合的基础上,可以针对不同的用户对象和不同的应用目标开发不同的数据应用。

4.1数据共享应用

针对不同水路交通管理部门之间的数据共享的需求,以水路交通数据库作为中介平台,提供数据共享服务,使得数据共享逻辑从网状结构过渡到星状结构,优化数据共享结构。

4.2公众信息服务应用

在全面完整的水路交通数据库的基础上,可以统一的向社会公众特别是水路运输从业人员提供一站式的水路交通信息服务,降低获得信息服务的成本。

4.3水路交通分析

水运数据整合最主要的应用目标,是利用各个管理部门掌握的各类水运数据,进行各类分析,为水路交通管理部门的规划、建设、管理和决策提供数据上的支持。

图2是水运数据应用分析框架。根据船舶签证、报港和过闸数据,进行融合分析形成船舶航行线路数据,并且水运基础设施的数据结合,形成船舶的航次航线,然后在此基础上用数学模型、GIS分析和OLAP分析等多种分析方法针对交通量、运输量、航道通航状况以及船舶运输状况等分析。

1)水路交通主题分析。主题分析包括主题数据仓库的构建、数据整合及上层分析展现方面的功能,包括主题仪表盘分析、应用集成发布、即席查询、预定义报表等。分析的主题包括船舶数量主题、船舶总吨主题、交通量主题和货运量主题,分析的维度包括船籍港、时间序列、船舶类型、货物种类和运输起讫地等。

2)水路交通GIS分析。GIS分析应用地理信息系统技术对交通量、运输量等数据进行表现,分析的内容包括交通量、货运量的时空分布情况,以及货物的流量流向分析等。五、结语利用数据库及数据交换技术,在江苏省水运管理的现有数据基础上,实现了数据的整合,并且综合利用模型分析、OLAP分析和多维分析对整合的水运数据进行深度分析,为水路交通管理部门及上级主管部门的科学决策提供科学、直观、高效的可视化辅助支持。

参考文献:

[1] 丰玮. 论江苏水运发展优势[J]交通科技, 2003,(05).

[2] 王明志. 水运信息化现状及发展设想[J]水路运输文摘, 2004,(12).

[3] 肖静. 面向水路交通信息平台的数据处理技术与应用研究[D]. 中国优秀硕士学位论文全文数据库.

作者简介:许成涛(1981- ),男,江苏盱眙人,现就职于东南大学软件学院;孟波波(1978- ),男,江苏无锡人,现就职于江苏南大先腾信息产业有限公司。

猜你喜欢
数据整合数据分析
高等院校实验中心共享教学资源库建设研究与设计
新常态下集团公司内部审计工作研究
浅析大数据时代对企业营销模式的影响
基于读者到馆行为数据分析的高校图书馆服务优化建议
基于数据挖掘的网络营销系统研究
无线传感器网络在农业中的应用
无线传感器网络在农业中的应用