《SZSD 0051—2024水运数据治理技术指南.docx》由会员分享，可在线阅读，更多相关《SZSD 0051—2024水运数据治理技术指南.docx（16页珍藏版）》请在三一办公上搜索。
1、ICS35.240CCS1.70SZSD工程标准SZSD00512024水运数据治理技术指南Watertransportdatagovernmenttechnicalguideline2024-06-01实施2024-04-15发布山东省大数据局发布目次前II1范的12规范性引用文件13术语和定义14缩略语15数据采集251米集原则25.2采集内容25.3采集方式46数据处理47数据仓赧17.1 47.2 基础库17.3 主SS库17.4 专区际48数据共享交换48. 1共享交换模型5&2共享交换方式59数据应用59. 1数据分析592数据服芬610数据痂量6W.1数据质量控制原则6102数据
2、质Jft控制内容6H数据安全6附录A（资料性数据转换规则8附录B（资料性）数据分析与服务示例9参考文献10本文件按照GIVT1.1-2020E标准化工作导则第1部分：标准化文件的结构和起草规则2的堤定起草,请注意本文件的某线内容可能涉及专利本文件的发布机构不承担识别专利的贵仔。本文件由山东省大数据协会提出.本文件由山东省大数据局归I并组织实施.本标准起草单位：北明成功软件（i有限公司、中华人民共和国济南海旷局、山东省大数据协会、山东省标准化研究院。本标戕主要起草人：王乐凯、李老、穆珂,袁小平、骼葱、扬公平、邵宪振、付继成、工文静、上甘好敬、卢钦刚、简文鹏、刘蜉、梁声新、公伟、范正翔、赵子林.水
3、运数据治理技术指南1葩围本文件给出了水运数据采集、数掘处埋、数据仓底、数据共享交换、数据应用以及数据质信、数加安全等。本文件适用于水运数据的规划、米集、处理、应用等.注；本文件中水运主要指内河水路运输.2规范性引用文件卜列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该1期对应的版本适用于本文件：不注H期的引用文件，其M新版本（包括所有的修改单）适用于本文件.GB/T8226道路运输术语GB/T18225水路客运术语GB/T19915水上安全赛将常用术谙GB/T22239伯恩安全技术网络安全等级保护基本要求GB/T26816信息资源核心元数据GB/T39
4、786信息安全技术信息系统密码应用批本要求GB/T41179信息安全技术网络数据处理安全要求JT/T613.2交通运输环境保护术i昔第2部分：水路JT/T697.8交通信息基础数据元第8部分：水路运输信总基础数据元JT/T718公路水路交通信息资源业务分类3术语和定义GlVT8226、GB/T18225、GB/T19915,JT/T643.2、JT/T701界定的术语和定义适用于本文件.4缩略语下列缗略语适用于本文件，DD1.：数据定义语盲(DaIaDefinition1.anguage)http：超文本传输协说HyperTextTransferProtocol)JSoMJtiVaSCriPt
5、对象简诣(JavaScriptObjectNOtatiOn)id：身份标识号码(IDentity)UI：用户界面(USerInterface)XM1.r可扩展标记语言(ExtensibleMarkup1.anguage)XS1.t可扩展样式表谱育(extensibleStylesheet1.anguage)5数据采集5- 采集原则水运数据聚集迸循以下基本原则：H）安全性,建立水运数据管理平价数据安全保障机制确保数据安全：规范性，建立现他化的数据累集流程，确保数据其实准确：C）适用性，有利于水运数据价伯发挥，有利于水运行业工作开展，6- 2采集内容水运数据采集内容主要包括水路运输、水运建设、水运
6、管埋、水运交通安全等相关数据，水路运输数据主要是关于水上运输方面的生产业务和管理工作领域数据，包拈但不限产：a）粽合管理数据；b）国内货物运输数据：c）旅客运输数据：d）集袋箱运输数据：e）运输经营业户数据；f）运输工具数据：X）沏流服务数据：h）港口生产数据：i）港口羟昔人数据：j）码头与堆场作业数据：k）联合运输数据：D国内航运数据：）水运生产统计数据：n）水运服务业数据：O）水路出行服务数据。水运建设数据主要是关于水运建设实施利用等方面的业务和管理工作领域数据,包括但不限于:a）踪合管理数据：b）水运规划数据：c）沿海建设数据：（1）内河建设数据；e）支持保障系统数据：f）技术标准数据：
7、g）技术交流数据：h）招投标管理数据：i）设计管理数据：j）工程监理数据：k）造价管理数据：1）安全质录管理数据;）资质管理数据；n）施工安全数据水运管理数据包括但不限于：a）综合管理数据：b）运政执法数据：c）港政执法数据：d）船政执法数据：e）国内运输数据：O旅客运输数捌：g）集装箱运输数据：h）运输系统数据：i）水运统计数据；j）水运与保险数据：k）运输经营业户数据：1）从业人员管理数据；m）运输工具管理数据；n）物流服务管理数据：o）联合运谕管理数据：P）国内航运管理数据：q）外商投资审批数据：r）港口经营管理数据；s）港口统计数据：O港I环境与生态影响数据：u）航运线路管理数据；v）
8、运价管理数据：w）水运限务业管理数据：x）应急管理数据：y）航道管理数据：z）航道统计数据；aa）船的管理数据：bb）船的统计数据：CC）专项诩JS数据.水运交通安全数据主要是关于水路交通安全管理业分领域的数据，包括但不限于:a）综合管理数据：b）船舶管理数据：c）船舶检物数据：d）朋员管理数据：e）船运公司安全管理数据：O事故与应急数据；）通航安全数据：h）航测管埋数据：i）水上航行数据：j）水上搜救数据：k）水上救捞数据；D公安管理数捌：m）港Il保安数据.具体数据项描述参见.117T748.JT/T697.8.53采集方式水运数据采集方式包括但不限于：数据库表方式、接口方式、数据文件方式
9、、流数据采集方式、互联网数据采集方式等.6数据处理对果泉的水运数据进行数据处理.包括但不限于：a）数据汇聚,招采集到的水运数据进行集中汇聚、存储.为后续数据处理提供原始数捌：b）数据过逑.将水运数据中不符合应用规则或无效的数据i三行过造，包括主谊名兔数掘、非空数据、格式错误数据、非法代码数据、非法侑数据等：C）数据转换及修正，将过谑结果数据的值、代码、格式等进行裁换（常用的游换规则见附录A）.并进行修正处理（包括缺失值补全、非法值数据脩正、逻辑错误数据修正、错误关联数据修正等）：d）数据加教，将转换及修正后的结果数据执行入摩操作，并记录入库日志.7数据仓库7. 13水运数据仓库主要包拈基础建、
10、主题库和专题库，其按照GB/T26816,描述数据仓库的元数据主要包括：中文名称、数据类型、数据格式、值域.约束条件等.7 2基础库水运数据塔础库包括但不限于船址圣础库、船舶基础除、电子整件库基础库、从业企业及人员信用信息库。8 .3主题库水运数据主题陈包括但不限于；a）水路运输：扒构人员数据库、行政管理数据库、监督检查数据库、运输企业及人员信用信息数据侔、处罚数据玲、规费佶息数据库、应急资源数据原、运蝌工具数据库：b）水运建设：水运燃划数据库、技术标准数据库、水运工程建设管理数据库、资质数据库：c）水运管理：水路腔济运行数据森、航运管理数据原、港口管理数据库、航道管理数据库：d）水运交通安全
11、：船舶航行数据库、航道运行数据库、应急指挥数据旅、船闸调度数据库、物液运怆数据冷、航运政务数据库、航道网度数据库、码头调度数据库等.7,4专题库水运数据专题库包括但不明F水路运证业务库、航运监管业务库、航标遥感遥测库、船舶位置监控库、卫星通信业务库、船闸基础设施管理库，8. 1共享交换模型水运数据共享交换主要依据水运数据管理平台进行，水运数据管理平台数据共享交换模型如图I所示，共享交换范围包括但不眼于；a）水运数据管理平台与国家水运共享交换平台的数据共享交换：b）水运数据管理平台与省级海事部门相关业务系统间的数据共享交换：c）水运数据管理平台与其他省直部门水运相关业务系统间的数据共享交换：d）
12、水运数据笆理平台与市级内河航运业务系统间的教据共享交换.*M*MtltMMMnAMNUUMtamiA*t*nvtat*11图1数据共享交换模型82共享交换方式水运数据管理平台数据的共享交换方式包括但不限于：接口方式、库表方式、文件方式、信号交换、视频流交摸等.9数据应用9. 1数据分析根据水运业务需求,开展数据分析，为决策提供数据支持.数据分析示例见附录班数据分析包括：a）数据常规情况分析：主要分析水运总体数据资产概况，包括数据总览情况、当日新增的数抵数崎、数据发展的势和占比等在内数据资产视图，支持分为外部数据和内部数据进行数据分析：b）数据流向分析：对数据的流向进行分析,展示数据的分析对比结
13、果,了解数据的来源和流向、不同数据间的对比，使得不需要了解其中内在的数据的结构、血缘等笑杂关系就能清楚的了解数据的基本情况：C）格势分析：对各类数据机型统计,了解并预测预测数据未来的走势，使管理者更好作出决策：d）全量数据分析与辅助决策：融合动态数据和冷态数据，进行全量信息搜索与大数据分析，获取优运、流量、航践、运价等相关信息，赋能决策，优化运输策略：e）多源数据汇聚关联分析：通过对业务数据.第三方数据和互联网数据等水运各业务域数据的汇聚,利用关题字检索查闻，进行全方位多维度、立体化的关联分析，快逑发现数据间的关系和趋势.9-2数据服务基于数据分析结果提供跻行业、涔领域的数据服务.数据服务示例
14、见附录B.数楙嵌芬可通过以下形式提供：a）直接提供数据分析结果，将数据分析结果以报去、报告或文字的形式直接对外发布；b）数据服务调用，依托数据开放平台,通过数据服务调用接1.l将数据封装后,以JSON、XM1.XS1.等格式对外提供：c）数据产品，将一定范用的水运数据开发成数据产1tt,通过数据产品提供数据服务,如通过发布船只二堆玛，提供船只基本信息的费询服务：0数据服务接口，通过数据接口或转发接口对外提供水运数据相关服务：e）船位展示与轨迹回放：展示船舶的实时位置，井提供轨迹回放，实时了解航运情况，监控船的动态，提岛运输的可视化管理效果：f）通肮要素实时展示：港口、航道、水文等通航要素的实时
15、展示，用助了解通航环境，规划航线,确保船的安全通行；g）其他方式，以上未说明的其他水运数据服务形式，10数盘质量Wi数据质量控制原则水运数据质量控制原则包括：a）规他性：数据符合国家和水运行业相关数则标准、数据模型、业务规则、元数据等：b）完整性；数据是完整的，即包含所有必要的信息；C）准确性：数据值与假定正确值的相同程度；1）一致性：存储在不同应用系统中的同一个数据，不存在差异或不相互矛盾：e）时效性：数据在时间变化中的正确程度，数据实时更新以保持实时性：f）安全性：数据受到适当的安全保护，以防止数据泄露或未羟授权的访问：g）可埋解性：数据切于理解和解择.10.2数娓质控制内容对影响水运数据
16、质疑的流程加以识别，制定管理措脩.水运数据顺Jit控制内容如下：a）从水运数据采集源头开始梳理数据流向，识别影响数据质设的数据流程，流程至少包括数据采集、数据审核、数据清洗和转换、数据校验、数据标记、数据更正，对数据采集和数据接口进行旅测：b）明确每个流程的内容，为使关键流程彳!效控制，编制作业指导文件或悚作指两：C）在实施流程控制过程中，建立数据或任制：d）对关键流程进行过程控制，并形成相应的记录，水运数据安全指南包括：a）数据安全策略：结合国家、行业水运监管要求,根据不同水运数据的安全尚求，建立数据安全管理策珞：b）数据安全管理指南包括：1）数据安全分类分侬：对水运数据进行分类及等级划分并
17、膨成相关文档：2）数据访问权限控制：明确水运数据安全管理的利益相关拧及其需求,对其数据访问进行授权；3）用户身份认证和访问行为监控；在数据访问过程中对用户身份进行认证识别，并劝其访问行为进行记录和赛控.c）数据安全技术指南包括：D符合（；B/r22239网络安全等级保护相关要求：2）水运数据处理符合GB/T41479要求；3）水运数据在管理和使用过程中对数据进行必要的加密，密码应用符合GB/T39786要求；4）符合水运行业关于信息技术创新应用要求及兼容国产化产品要求，水运数据存储在中国境内。附录A（资料性）数据转换规则数据转换规则参见表Al.表A1数据转换规则转换规则规好描述统时间日期皎据格
18、式将各类El期统一为8位的日期.1YYYYWlDD将各类时间统一为6位的时间.hl三ss将各类日期时向统一为M位的日期时间.faYmTXDDhheiiss统一分类数据取值代码格人公的性别Si械统一梏换为国标性别代码将人员的民族救据统转换为国标民族代码将人员的户持地址陵转换为行政区划代码将公民身份在号码统转模为18位统一贵金、金s&据格式将资金、金领数据统一转换为总长18位,小数点后6位的浮点数粼附录B（资料性）数据分析与股务示例1、航线规划与运化航运公司可利用数据分析及服务来进行航浅规划和运输优化，通过全诉信息搜索和大数据分析，航运公司可实时拣取货运、流量、肮线和运价等相关信息,并进行深入的数
19、据分析，发现潜在的市场机会和优化空间.此外,借助船位展示和轨迹11放格助公HJ实时赛控船船位置和运输进程.制定更有效的航线规划.减少航程和燃料消耗.优化资源配置.提高运情效率和利润率.2、航运安全管理与风险g航运公司可利用数据分析及服务来进行航运安全管理和风险预警,航运公司通过港口、航道、水文等通航要素的实时展示，来评估通航环境的安全性，并在肮战规划中考虑风险因索，此外，利用船位展示和轨迹回放，M助航运公司实时监控船舶位祝，及时发现异常情况和潜在风险，别于整体数据分析，航运公司可建立风险按警系统，通过监测数据变化和趋势，提前发现潜在的安全风险.采取相应的措施来保障航运安全.3、船员赍项簿选与管
20、理通过关键字检索和多维度关联分析，实现船员资旗筛选与管理.航运公司可快速准确地搜索船员信刖,了解其技能、经验和背景，通过数据血缘关系，帮助评估船员能力和适应性，提高选择和管理准确性，通过多维度分析和数据展示，避免人工筛选偏见，降低风险，提开招聘效率和须吊，增演航行安全和工作效率.参考文献1GBT32630-20162GBT34950-20173GBT3290820164CBT5CBT32909-201636073-201作结构化数据管理系统技术要求非结构化数据管理系统参考模皇非结构化数据访问接11规范非结构化致据友示规范数据管理能力成然度评估模型16GBT42808港口海铁联运电子数据交换技术
21、要求7JTT701水深测量数据采集与处理技术要求8UT/T71水上通信、导肮和信息词汇91JT/T747.1交通运蝌信息资源目录体系第4部分：公路水路信息资源分类10JJT/T1021海野与港航管理业务信息共享交换数据指标11JTT1140.2交通运输安全应急资源数据元笫2部分：水路水路运输市场水运工程建设市12JTT1174.4公路水路建设与运输市场信用信息分类煽码与格式第4部分:13JTT1171.2公路水路建设与运箱市场信用信息分类编码与格式第2部分：MJTT1314国内水路客滚运输服务质量规范15JTZT1396公路水路交通地理信息数据交换内容和格式16JTT1419公路水路安全应急处置交换信息
