GWJ 006-2016 超短波频段监测基础数据存储结构技术规范

国家无线电监测中心技术规范GWJ006-2016______________________________________________超短波频段监测基础数据存储结构技术规范2016-12-02发布国家无线电监测中心发布GWJ006-20162GWJ006-2016I目录前言....................................................................III1范围......................................................................12规范性引用文件.............................................................13符合和缩略语...............................................................14超短波频段监测基础数据存储结构技术规范总体架构设计.........................14.1总体设计思想.........................................................14.2数据存储模型.........................................................24.3数据流转关系.........................................................24.4部署架构.............................................................25数据库设计.................................................................35.1数据索引表...........................................................35.2数据文件.............................................................35.3字典表代码数据......................................................24GWJ006-2016IIGWJ006-2016III前言本规范依据GB/T1.1-2009给出的的规则起草。本规范起草单位：国家无线电监测中心、北京波尔通信技术股份有限公司主要起草人：李川、张小飞、张玉坤、马晓莹GWJ006-20161超短波频段监测基础数据存储结构技术规范1范围为推动超短波监测管理一体化平台建设，规范超短波监测基础数据存储格式，统一管理超短波监测数据成果，并指导监测集成商进行规范的监测数据存储系统设计、开发，特制定本规范。本规范规定了超短波频段监测基础数据存储的格式和方法，适用于我国无线电管理监测系统的开发、建设、运行、维护与数据服务，是超短波监测业务一体化平台和监测数据统一管理的基础。2规范性引用文件《无线电管理一体化平台体系架构及应用规范》《无线电管理应用安全平台体系架构及应用规范》《无线电管理一体化平台服务化工程分析设计规范》《无线电管理一体化平台实施开发规范》《无线电管理一体化平台集成规范》《超短波频段监测管理数据库结构技术规范（试行）》《超短波监测管理服务接口规范》《无线电监测网传输协议(RMTP)》3符合和缩略语XMLeXtensibleMarkupLanguage可扩展标记语言FTPFileTransferProtocol文件传输协议HTTPHyperTextTransferProtocol超文本传输协议HDFSHadoopDistributedFileSystem分布式文件系统ITUInternationalTelecommunicationUnion国际电信联盟4超短波频段监测基础数据存储结构技术规范总体架构设计4.1总体设计思想超短波频段监测基础数据采用文件系统存储主数据，以元数据构建索引，使用分布式数据库技术构建。本地文件系统网络存储系统·Linux·Windows·HTTP·FTP·HDFS分布式数据库SQL关系数据库GWJ006-201624.2数据存储模型设施ID设备ID任务ID任务参数数据类型数据记录开始时间数据记录持续时间文件存储位置xxxxxxxxxxxxxxxxxxxxxxxx索引ID1xxxxxxxxxxxxxxxxxxxxxxxx2xxxxxxxxxxxxxxxxxxxxxxxx33数据索引表数据文件文件存储位置类型xxxxxxxxx4.3数据流转关系超短波监测管理服务接口规范超短波频段监测基础数据存储结构技术规范超短波频段监测管理数据库结构技术规范频谱传感器频谱传感器频谱传感器数据库数据库原始数据成果数据监测网4.4部署架构国家无线电监测控制中心省无线电监测控制中心（省无线电监测数据库）国家超短波区域监测控制中心（区域无线电监测数据库）省移动监测站省固定监测站地市无线电监测控制中心（地市无线电监测数据库）地市移动监测站地市固定监测站国家移动监测站国家固定监测站GWJ006-201635数据库设计5.1数据索引表a）RMBT_STORAGE_DATA_INDEX存储数据索引表数据索引表的名称分为两部分：基础名称+扩展名称。基础名称：RMBT_STORAGE_DATA_INDEX扩展名称：YYYYMM，共计6位数字，由4位年份和2位月份构成。如：RMBT_STORAGE_DATA_INDEX_201506就是2015年6月的数据索引表格。序号字段名称中文说明类型说明1FID主键VARCHAR2(36)全局唯一标识符（GUID，GloballyUniqueIdentifier）2MFID监测设施编号VARCHAR2(14)参见《超短波频段监测管理数据库结构技术规范（试行）》3EQUID监测设备编号VARCHAR2(36)参见《超短波频段监测管理数据库结构技术规范（试行）》4TASKID监测任务编号VARCHAR2(36)参见《超短波监测管理服务接口规范》5TASKPARA监测任务参数VARCHAR2(4000)参见《超短波监测管理服务接口规范》6STARTDT数据记录开始时间NUMBER当前文件记录数据的起始时间，自UTC(1970/1/100：00：00)开始的秒数7SECONDS数据记录持续时间NUMBER当前文件记录数据的持续时间，单位：秒8DATATYPE测量结果类型NUMBER(3)参见《超短波监测管理服务接口规范》9FS文件存储位置类型VARCHAR2(2)参见RMBT_STORAGE_FS_DIC表10PATH文件存储位置VARCHAR2(4000)监测数据存储的文件绝对路径注：网络存储类型，必须支持匿名文件访问方式。b）RMBT_STORAGE_FS_DIC文件存储位置类型表序号字段名称中文说明类型说明1CODE_ID类型编码VARCHAR2(2)主键2CODE_NAME类型名称VARCHAR2(50)5.2数据文件a）文件名称的命名方法字段1_字段2_字段3_字段_字段4_字段5_字段6_字段7.字段8文件名分为八个字段，使用下划线连接，字段说明如下：字段名称说明字段1监测设施编号参见《超短波频段监测管理数据库结构技术规范（试行）》字段2监测设备编号参见《超短波频段监测管理数据库结构技术规范（试行）》GWJ006-20164字段名称说明字段3文件创建时间14个字符，如20160128180130代表2016年1月28日18时01分30秒字段4起始频率xxxxMHz，如：30MHz开始频率与终止频率相同，则表示固定频点监测；测量步长为0，则表示离散频点监测字段5终止频率xxxxMHz，如：3000MHz字段6频率步长xxxxkHz，如：25kHz字段7极化方式参见《超短波监测管理服务接口规范》，使用极化类型首字母，H、V、C，分别代表水平极化、垂直极化、圆极化字段8文件扩展名称频谱数据文件SPM频段扫描数据文件FSC频率表扫描数据文件MSCIQ数据文件IQDITU数据文件ITU音频数据文件音频格式确定视频数据文件视频格式确定图片数据文件图片格式确定字节流数据文件BIN单频测向数据文件SDF宽带测向数据文件WDF频率表测向数据文件MDF定位结果数据文件LOC文本数据文件TXT非标准数据文件NSD天线因子数据文件ANT例：21130001110001_0005_20150601130000_30MHz_3000MHz_25kHz_H.SPM代表辽宁省朝阳市编号为21130001110001的监测设施中，编号为0005的监测设备在2015年6月1日下午1点使用水平极化天线、25kHz步长对30MHz到3000MHz频段宽带频谱扫描测量的数据文件。b）文件存储尺寸单个数据文件尺寸不大于200M字节(1M=1024×1024)或记录时间长度不大于300秒。c)文件内容编码文件文本内容采用UTF-8编码。d)文件帧结构监测数据文件遵循无线电监测数据格式(RadioMornitoringDataFormat)，简称RMDF。文件帧结构：4bytesRMDF4bytes文件长度2bytes数据类型4bytesfmt4bytessizeof(数据信息)xbytes数据信息4bytesdata4bytes数据长度数据GWJ006-20165文件帧元素：序号名称长度类型说明1文件标识4bytesCHAR内容固定为“RMDF”2文件长度4bytesINT32监测数据文件长度，字节3数据类型2bytesINT16参见《超短波监测管理服务接口规范》监测结果类型4块标识4bytesCHAR内容固定为“fmt”，剩余1个字节补‘\0’5数据信息长度4bytesINT32标识后续的“数据信息”块的长度6数据信息数据描述信息，依据前面“数据类型”确定。7块标识4bytesCHAR内容固定为“data”8数据长度4bytesINT32标识后续的“数据”长度9数据监测结果数据，依据前面“数据类型”确定。注1：监测模式为“移动式监测”时，文件数据中的数据的第一帧必须携带位置和时间信息，此后，数据帧如无位置和时间信息，则复用前序数据帧位置和时间信息（使用时读取前序数据帧位置和时间信息，并不会占用存储空间），以此来存储时间戳分辨不足或位置相同时的数据结果。注2：数据帧中出现的电平值为0xEFFF时，标识此值无效。5.2.1频谱数据（spectrum）文件数据信息数据信息帧结构：2bytes36bytes监测设备ID测量模式14bytes监测设施ID8bytes经度8bytes纬度4bytes起始时间2bytes持续时间8bytes起始频率8bytes终止频率4bytes步进4bytesRMDF4bytes文件长度2bytes数据类型4bytesfmt4bytessizeof(数据信息)98bytes数据信息4bytesdata4bytes数据长度数据2bytes天线挂高2bytes极化方式数据信息帧元素：序号名称长度类型说明1监测设施ID14bytesCHAR参见《超短波频段监测管理数据库结构技术规范（试行）》2监测设备ID36bytesCHAR参见《超短波频段监测管理数据库结构技术规范（试行）》3测量模式2bytesCHAR“00”：固定式监测，”01”：移动式监测4经度8bytesINT64测量模式为“00”时，必填，“01”时，无效经纬度单位：0.00000001°5纬度8bytesINT64GWJ006-20166序号名称长度类型说明6天线挂高2bytesINT16天线挂高，天线相对地面悬挂高度，单位：米7起始时间4bytesINT32自UTC(1970/1/100：00：00)开始的秒数8持续时间2bytesINT16测量持续时间，单位：秒9起始频率8bytesFL