数据一致性检查（通用3篇）
数据一致性检查 篇1
1 概述
移动自组织网络-MANET (Mobile Ad-hoc Network) 是一种在不借助中心管理的情况下, 在有限的范围内实现多个移动终端平等互联的组网方式。MANET没有基站等基础设施, 各节点都是移动的, 兼具主机和路由器的功能, 节点间采用多跳数据转发机制来交换信息。在这个网络中, 每个节点都经常移动位置且电量有限, 节点间的链路可能频繁断接, 传统的分布式数据库事务处理模型不能保证MANET中各个节点的数据一致性, 因此不适合在MANET中使用为了解决这一问题, 设计了一种MANET事务处理模型。
2 事务处理模型的基本结构
2.1 移动主机的分类
根据通信能力、计算能力、磁盘储存器容量、内存容量和电量限制, 我们可以把所有的移动主机 (MH) 分为两类:a.SMH:这类MH拥有较小的存储容量和电量, 并且计算能力有限;b LMH:这类MH拥有较大的存储容量和电量, 通信和计算能力远远超过SMH。
不论哪类MH都有一个通信半径。每个MH能与通信半径里的其他MH直接通信, 与通信半径之外的MH就要通过其他若干MH进行多跳间接通信。由于能量和储存容量限制, 我们将整个数据库管理系统只储存在每个LMH上在SMH上只储存数据库管理系统的一些简单模块, SMH向LMH查询自己的数据、提交事务处理请求和接受处理结果。
2.2 移动主机的关键信息
在描述的MANET体系中, 每一个MH都会在本地存储一些关键信息, 这些信息包括:a唯一标识每个MH的ID号;b.每个MH的地理坐标, 这些坐标可以通过GPS系统周期性的更新, 我们根据这些坐标在MH提交事务时进行合理路由;c.MH的无线通信半径;d.MH当前电量, 这个信息用来判别MH的连接有效性;e.数据记录分配表, 每个LMH上都会存储一张数据记录分配表, 这张表综合所有LMH上数据记录得到, 通过它, 我们可以知道任何一个数据记录存储在哪个LMH上。每个LMH周期性的广播它的关键信息, 其他LMH和SMH接收到这些信息以后, 把它存储在自己的LMH LIST列表中。关键信息的广播周期可以根据具体应用来确定, 移动越频繁的LMH, 广播周期应该越短。
为了节省和平衡每个MH的电量, 我们把MH状态分为3类。a.活动状态:MH的处理器和通信组件处于正常工作状态;b.挂起状态:MH的处理器停止工作, 通信组件能接收信息并唤醒处理器;c.休眠状态:处理器和通信组件都停止工作, 相当于断接。
2.3 移动事务的描述
在的MANET系统中, 每个移动事务都有一个可以被执行的最终时间期限, 根据这个最终期限的设置情况不同, 我们把事务分为两类firm事务和soft事务。对于firm事务来说, 当时间超过最终期限时, 这个事务就被终止。对于soft事务, 我们给它设置两个执行时间期限的和一个等待记录, 在不同具体应用中, 我们给这个等待记录赋予不同的含义和不同的初始值。当时间超过第一个时间期限后, 事务不被终止, 但等待记录中的数值开始减少;当时间超过第二个时间期限后, 等待记录中的值为零且事务被终止。
若事务要求处理的数据记录位于不同的MH上, 我们把这个事务称为全局事务;全局事务的一部分要在特定MH上执行的, 我们称之为亚事务。这里我们假定每个MH上只会执行每个全局事务的一个亚事务。
3 事务处理过程
一个SMH创建一个事务T, 并把这个事务T提交给通信半径之内的一个LMH (协调主机LMHC) , LMHC检查自己的数据记录分配表以确定执行事务T所需要的数据记录存储在哪些LMH上, 之后根据检查结果, 在保证每个亚事务所需数据记录只在一个LMH上的情况下LMHC把全局事务分解成亚事务交给其他LMH执行。LMHC在其他LMH协助下, 如果执行事务成功就把结果返回请求SMH;如果执行失败, 也会把失败信息通知请求SMH。
3.1 移动事务的提交
移动事务的成功执行受MH电量和事务执行时间期限的影响, 因此在MH提交事务时要使用一个策略来平衡各个MH的电量消耗, 同时要尽量避免事务执行超时。
对于firm事务, 我们规定MH把它提交给距离最近的LMH以节约时间;对于soft事务MH把它提交给通信半径内电量最高的LMH以平衡电力消耗。因为SMH上都存储着每个LMH的坐标和剩余电量等关键信息, 因此可以通过使用LAR协议来实现上述规定。
如果SMH提交事务后进行了位置移动, 那么它需要把自己的新坐标通知LMH。如果接收事务的LMH处于活动状态, 事务执行;当LMH处于挂起状态, 它可以被firm事务唤醒并执行事务;若LMH处于休眠状态, 事务就不能被执行了。SMH提交事务一段时间后, 如果没有收到处理结果, 就认为LMH处于休眠或断接状态, 这时SMH会按照规则向其他LMH提交该事务。这个等待时间根据下面的算法计算:
等待时间=事务执行时间+SMH与LMH通信时间+亚事务个数*亚事务通信时间
3.2 移动事务的执行和结果返回
每一个LMH的事务处理程序包含三个组件。a.事务调度组件 (TS) :负责管理需要处理事务的队列;b.事务协调组件 (TC) :负责把全局事务分解成亚事务并提交给相应LMH执行, 同时也负责把事务执行结果返回SMH;c.事务执行组件 (TM) :负责亚事务的具体执行。
为了使LMH的电量发挥最大效率, 在TS中通过综合考虑事务执行期限 (D) 、执行时间 (C) 、SMH断接几率 (Pd) 和平均断接时间 (Pt) 因素, 计算出每个事物的权值 (S) , 并根据权值的升序把接收到的事务排成一个事务处理队列, 权值计算公式如下:
S=D- (T+C+Pd*Pt)
其中T为当前时间, Pd和Pt通过事务执行历史记录可以得到。对于两个事物的权值相同的情况, firm事物优先于soft事物;若是两个firm事物或soft事物, 那么先执行电量低的SMH提交的事物 (电量信息随事物一同提交) 。
如果执行事物需要的数据记录在本地, 那么TC将事物交给TM执行;否则, TC会把事务分解为亚事务交给其他参与的LMH执行, 分解生成的亚事务可以使用EQF策略重新确定事务执行期限。事物执行完毕以后, TC会把结果返回给事物请求SMH, 如果SMH处于活动状态则接收结果;如果SMH处于挂起状态, 对于firm事务, SMH转为活动状态并接收结果, 对于soft事务, 要根据电量剩余情况来决定是否转为活动状态并接收结果;如果SHM处于休眠状态不能接收事务执行结果, 对于firm事务, LMH会立即丢弃这个结果, 对于soft事务, LMH在时间没有超过事物的第二执行期限之前, 每隔一段时间向SMH发送一次结果, 若超过了第二执行期限, LMH丢弃这个结果。
摘要：为了保证MANET中各节点的数据一致性, 针对MANET节点经常移动、电量有限和节点间频繁断接等特点, 提出了一个移动事务处理模型。该模型对移动节点和事务进行了分类、定义了节点的关键信息, 并设计了事务提交和处理的策略。
关键词：MANET,事务处理,数据一致性
参考文献
[1]郑静, 卢锡成.面向MANET环境的动态自适应副本放置算法研究[J].通信学报, 2004, 8 (25) :1-8.
[2]Y.B.Ko.Location-aided routing (LAR) inmobile Ad-Hoc networks[J].MOBICOM, 1998 (7) :66-75.
[3]陈立家, 江昊.车用自组织网络传输控制研究[J].软件学报, 2007, 6 (18) :1477-1490.
数据一致性检查 篇2
基于红边位置提取验证成像与非成像高光谱数据的一致性
摘要：定量遥感是当前遥感发展的前沿,作物组分信息解析是农业定量遥感的研究热点,而成像高光谱技术为解决微观尺度的作物组分信息探测研究提供了强有力的手段.利用成像光谱仪( pushbroom imaging spectrometer,PIS)与地物光谱仪(FieldSpec ProFR2500,ASD)同步收集冬小麦、玉米不同生育期叶片的反射光谱,通过不同算法提取PIS与ASD数据的红边位置,验证成像光谱数据的精度.结果表明:(1)PIS与ASD原始光谱数据在红边区间(670～740nm)有很高的吻合度；(2)从室内光谱(玉米叶片)红边位置的提取结果看,两仪器提取的红边位置都集中在700～720nm；(3)从室外光谱(小麦叶片)红边位置的提取结果看,PIS与ASD数据提取结果有差异,PIS数据的红边位置在760nm处,而ASD数据的红边位置在720nm处,这种差异主要是成像光谱数据受氧气吸收的.影响较大所致；(4)PIS与ASD的红边变幅不同,但趋势相同.以上结论为成像光谱数据的深入应用提供了参考. 作者： 王大成[1] 张东彦[1] 赵晋陵[2] 李存军[2] 朱大洲[2] 黄文江[2] 李宇飞[3] 杨小冬[2] Author： WANG Da-cheng[1] ZHANG Dong-yan[1] ZHAO Jin-ling[2] LI Cun-jun[2] ZHU Da-zhou[2] HUANG Wen-jiang[2] LI Yu-fei[3] YANG Xiao-dong[2] 作者单位： 国家农业信息化工程技术研究中心,北京100097; 浙江大学农业遥感与信息技术应用研究所,浙江杭州 310029国家农业信息化工程技术研究中心,北京,100097科学技术部中国农村技术开发中心星火与信息处,北京,100054 期 刊： 光谱学与光谱分析 ISTICEISCIPKU Journal： Spectroscopy and Spectral Analysis 年，卷(期)： , 31(9) 分类号： S127 关键词： 红边位置 成像高光谱 玉米 冬小麦 叶片 机标分类号： TP3 S12 机标关键词： 红边位置 数据提取 验证 成像光谱数据 高光谱 数据的一致性 Data imaging spectrometer PIS ASD 组分信息 结果 定量遥感 玉米叶片 地物光谱仪 成像光谱仪 不同生育期 作物 研究热点 信息解析 基金项目： 公益性行业(农业)科研专项项目，国家自然科学基金，北京市自然科学基金 基于红边位置提取验证成像与非成像高光谱数据的一致性[期刊论文] 光谱学与光谱分析 --2011, 31(9)王大成 张东彦 赵晋陵 李存军 朱大洲 黄文江 李宇飞 杨小冬定量遥感是当前遥感发展的前沿,作物组分信息解析是农业定量遥感的研究热点,而成像高光谱技术为解决微观尺度的作物组分信息探测研究提供了强有力的手段.利用成像光谱仪( pushbroom imaging spectrometer,PIS)与地物光谱...数据一致性检查 篇3
低压成套开关设备是首批被列入“CCC”强制性认证的产品, 它主要包括额定电压交流不超过1 000 V, 频率不超过1 000 Hz的成套开关设备、母线槽、配电板、建筑工地用成套设备、电缆分线箱、低压无功功率补偿装置。如何更好地开展工厂检查, 提升客户增值服务, 提高认证工作有效性, 是认证机构及检查员面临的主要课题之一。
认证产品的一致性检查是“CCC”工厂检查的检查重点, 亦是工厂检查报告的评价重点。2013年7月1日, 新版实施规则和细则正式实施。新规则下, 中国质量认证中心 (CQC) 对低压成套产品的一致性检查要求进行了细化。本文就新要求从工厂检查报告评价角度谈谈如何进行低压成套开关设备的一致性检查。低压成套开关设备一致性检查的要求为CQC-C010-2013《强制性产品认证实施细则低压电器低压成套开关设备》附件3中第8条, 一致性检查的主要依据为型式试验报告及认证标准要求。
1 标识检查
认证产品的铭牌、产品技术文件和包装箱上标明的产品名称、型号规格、技术参数应符合标准要求并与认证批准的结果一致。在报告评价过程中, 往往发现检查员在检查该项内容时, 仅仅是拍一张铭牌照片对照型式试验报告上的铭牌是否一致而已, 实际上这并不全面。根据GB 7251.1-2013《低压成套开关设备和控制设备第1部分:总则》中第6条款要求, 工厂检查时还应检查认证产品相关的技术文件, 例如成套设备反映接口特性的信息及安装、操作与维护的使用说明书等, 判断是否符合产品描述或型式试验报告的要求。
在报告评价时发现, 检查员所拍的铭牌标识存在以下类似问题 (举例) , 给报告评价的过程带来麻烦:
(1) 型式试验报告中的产品名称为低压动力柜, 而铭牌上的名称是低压配电柜, 两者不一致。
(2) 型式试验报告中短时耐受电流为20 k A, 而铭牌上的短时耐受电流为30 kA, 两者不一致。
(3) 型式试验报告中防护等级为IP40, 而铭牌上的防护等级为IP30, 两者不一致。
2 产品结构检查
认证产品涉及安全和 (或) 电磁兼容性能的结构应符合标准要求并与认证批准的结果一致。新要求对产品结构检查进行了细化。产品结构检查不是检查时拍几张照片并简单说明一下“结构符合要求”就可以的, 需要检查以下内容:
(1) 现场一致性检查产品的机械机构和电气结构是否与型式试验报告样品描述一致, 电气结构设计是否合理。
(2) 壳体材料及板材厚度是否满足相应的机械强度要求, 壳体表面防腐蚀措施是否满足要求;成套产品的外形尺寸是否满足型式试验报告要求。
(3) 开关元器件的选择是否满足GB 7251.1-2013第8.5.3条的规定, 如主开关的类型是否与型式试验报告一致, 断路器Ui、Icw、Icu/Ics等参数是否不低于型式试验报告中成套开关设备规定的相应值;电器元器件安装是否正确, 是否符合使用说明书的要求。
(4) 母排的布置及连接方式是否合理, 是否考虑减少涡流损耗的影响, 同时能承受装置的额定短时耐受电流和峰值耐受电流所产生的机械应力和热应力的冲击;在穿过金属隔板之处是否采取绝缘措施;主母排、N排、PE排尺寸是否满足相应的载流量要求等。
(5) 保护接地措施是否满足GB 7251.1-2013的规定, 接地排、接地螺钉、接地过门线是否有效的连接。
(6) 固定及支撑铜排的绝缘件型号规格、最大距离是否满足型式试验报告要求。
(7) 主电路及功能单元的电气间隙、爬电距离、隔离距离等是否满足型式试验报告或产品描述报告要求。
(8) 成套设备防护等级是否满足要求, 现场查看产品是否在结构工艺上采取了必要的措施等。
报告评价时, 评价人员是按照新版实施规则检查记录中8.2条要求仔细审核认证产品结构检查的完整性。建议工厂检查前, 检查员理清检查思路, 对照以上内容有条不紊地进行产品结构检查并按照型式试验报告要求进行指定试验, 以减少出错几率。
3 关键元器件和材料
认证产品所用的关键元器件和材料应符合相关标准要求, 与认证机构批准或生产企业技术负责人批准的一致, 适用时, 采购关键元器件和材料的数量应与最终产品出货数量相匹配。在报告评价过程中, 经常发现大多数检查员在检查该项内容时, 采用对型式试验报告中安全件清单复印件进行打勾, 来核对关键元器件和材料, 这种做法无可厚非, 但在具体的检查过程中仍然会出错。有如下几类:
(1) 所检查的关键元器件和材料不全。按照实施细则中的第11.1条, 关键元器件和材料为主回路的元器件和材料, 包括壳体、低压断路器、低压开关、隔离器、隔离开关与熔断器组合开关、低压接触器、热过载继电器、交流半导体电动机控制器和起动器、转换开关电器、母排、绝缘导线、抽出式的一次接插件、电容器、电抗器、电力电子开关、无功功率补偿控制器、绝缘支撑件、复合开关等。然而由于多种原因, 型式试验报告的安全件清单中未能体现所有的关键件, 检查员需要在检查记录中对现场一致性检查产品的关键件进行补充描述。但在实际的评价过程中发现, 检查员更多的还是只描述“三大件” (主进线开关、母排、绝缘支撑件) 。
(2) 所查的关键元器件和材料供应商名称与型式试验报告中的名称不一致。有些关键元器件和材料供应商名称发生变化, 但工厂未按照要求由技术负责人批准内部变更或向认证机构申请变更。针对此类情况, 检查员应开出不符合项督促工厂变更, 使试验报告中的名称与实际一致。
(3) 型式试验报告中关键元器件和材料供应商名称为简称或表述不是很清晰。遇到这种情形, 可以从工厂采购和进货检验/验证的管理中获得实际信息的供应商信息, 确认供应商是否发生变化。必要时, 检查员应开出不符合报告督促工厂办理变更, 使之符合要求。