资料数据库系统

2024-10-01

资料数据库系统(精选12篇)

资料数据库系统 篇1

一、前言

瑶医药是一所民族医药的珍贵宝库,瑶医药资料的散在性和理论构架的松散性亟待系统化,验效方的散在流失亟待挖掘整理,其防病治病的理论及方法需要进行整理及有效的临床验证。

我院科研工作者正借鉴系统生物学湿干研究方法,结合瑶医药防病、治病的相关经验、方式、方法及相关名方、验方,通过临床科研一体化的技术平台,建立以“以数据为导向,以假设为驱动,借助模型模拟研究”的“从临床中来,到临床中去”的研究方法,构建相关的数据库,以发现瑶医药防病、治病的理论基础及诊疗规律,为建立合理化、标准化的诊疗方案提供依据,并为今后瑶医药的开发提供理论及临床基础。

本系统是为满足对瑶医药研究资料的分类整理、有序存储、高效应用而设计。

二、系统软件配备

服务器操作系统:Microsoft Windows Server 2003;数据库管理系统:Microsoft SQL Server 2000企业版;客户端操作系统:Microsoft Windows XP;前台开发工具:Microsoft Visual Fox Pro9.0。客户端配备的应用软件:根据文献资料的类型而定,应配备可以打开doc、xls、pdf、ppt、caj等文件类型的应用软件,这些应用软件可以在检索文献过程中,根据需要进行补充。

三、系统功能

本系统运行在以医院为单位的局域网范围内,各位用户以不同的身份登录系统,科研人员为系统管理员,医院各位员工为普通用户。系统的功能也根据登录用户身份的不同为分为两种,如图1所示:当以管理员的身份登录时,主要功能有:基本信息维护、个人信息维护、资料管理、资料检索——畅所欲言;如果以普通用户身份登录,主要功能有:个人信息维护、资料管理、资料检索——畅所欲言。以下主要介绍以管理员的身份登录系统所具备的功能,包含了普通用户拥有的所有功能。

3.1基本信息维护。系统使用前首先为一个管理人员赋予初始的用户号及登录口令,这位管理员登录系统后,首先要进行一些基本信息的维护,主要包括:科室分类信息维护、科室信息维护、用户信息维护。

科室信息包括,序号、科室名称、科室归属,其中“科室归属”的待选内容是由科室分类信息维护产生的。用户信息的内容有:“用户编号”,即登录系统时使用的用户号;“用户识别ID号”,是为了识别用户所在的不用科室而设置的;另外还有用户的姓名、性别、所属科室、职务、职称、用户级别以及此号码的使用状态,其中“所属科室”的待选内容是科室信息维护产生的。基本信息的维护,为医院范围内的广大用户提供了使用本系统的权限。

3.2个人信息维护。本功能专门为登录本系统后的用户个人设置,包括:“个人基本信息维护”,针对个人姓名、性别的错误,职务、职称的变更,要用户自己完成,因职务、职称不与用户所具有的权限关联,所以不存在安全方面的问题,这样可以及时纠错又减轻了管理人员的工作量;“取个别名”,因为本系统设计有“畅所欲言”的功能,如果用户不愿意在留言的签名档显示真实姓名,那就可以给自己取个有个性的别名,在畅谈观点时签名档显示的就是别名了;“口令修改”,用户初始口令为管理员所设,从安全方面着想,用户登录后在这里可以随时更改自己的口令。

3.3资料管理。本功能也是系统的主要功能所在,主要包括:资料分类信息维护、主题资料维护、文献资料维护、个人资源分享。

资料分类信息维护,主要包括资料类型的序号及资料分类名称。有了资料的分类对资料的管理比较方便,同时为资料的检索提供快捷方式,让资料应用情况的分析也更加明了。有了资料分类信息,下一步才进行其它资料的维护。

主题资料维护,是提取资料的典型部分,把它们存入数据库中,在用户登录系统后,第一眼就能看到这些资料的标题,也就是要让它们显示在本系统的主题桌面上。主题资料的内容有资料分类、编码、标题、资料文字内容及资料图片组成。资料文字内容在SQL Server数据库中以Text型字段来存储,资料图片内容经过系统内部的转换后也以Text型字段存储在数据库中[1]。考虑到文字内容与图片内容的一对多关系,文字内容和图片内容在数据库分开两个表来存储,两表之间以资料编码建立联系。

文献资料维护,文献资料是本课题拥有资料的主要组成部分,会以不同的文件类型格式呈现,且数据量较大。把文献转换格式后存入数据库中的存储方式因有空间的限制不适合这类资料的存储,因此采用不转换文件格式,直接把资料以文件本身的格式存放在数据库服务器的一个文件目录中,文献的资料分类、名称、文件类型及存放路径等内容存储在数据库中。这种存储方式,只要服务器磁盘空间足够,并无文件大小及文件格式的限制。

个人资源分享,这个功能为所有用户提供了一个分享个人所拥有资源的平台,也为本课题资料的丰富开辟了广阔的途径。用户分享的资源可以是纯文字的描述,也可以附上图片,还可以上传事先编辑好的各类型文件。这类资料在服务器中以数据库的方式存储。

3.4资料检索———畅所欲言。根据资料来源的不同,把资料检索分为文献资料检索、用户资源检索等。文献资料检索的方法是:输入文献的名称或关键字或作者姓名就可以把符合条件的文献资料过滤出来,显示在表格中,用鼠标选中要查看的文献名称,此文献的相关简要信息,如作者、文献摘要等会在系统界面上显示出来,阅读简要信息后,如果此文献为读者所需,那就可以再点击“查看资料原文”把资料的原始文件打开进行详细阅读,也可以把它收藏到自己的电脑里。查看文献原文后,系统提供一个区域供读者发表个人的读后观点,与同行交流。

用户资源检索,检索的内容是各位用户无私奉献到系统中的资源,这里可以输入资源标题或者图片名称或文档名称进行过滤,符合条件的信息会显示在表格中,用鼠标选中要查看的资源的名称,本资源的简要信息,如资源标题、资源描述等会在系统界面上显示。如果此资源附有图片,则图片的名称会显示出来,如果此资源附有文档,则文档的名称会显示出来,点“打开图片”或“打开文档”按钮,就可以把本资源所附的图片或者文档打开来查看。

主题资料是把资料中的典型内容提取出来,以小标题的方式直接在系统的主题桌面上显示,要看什么内容点击标题就能打开来查看,内容包含文字描述及相关图片。看完资料后,也可以发表个人的观点与同行交流。

分享观点———畅所欲言,是把各位用户在查看资料后所发表的观点集中起来,按照资料的名称罗列出来,并可按名称进行过滤,符合条件的资料显示在表格中,鼠标点击资料名称,所有用户针对此资料所发表的观点会以时间先后显示出来,并附后发言者的别名。如果想对自己已发表的观点进行修改,可以在这里进行,如果有新的想法也可以在这里继续发表新的观点。

四、系统操作模式

本系统界面友好,操作简便,采用菜单与快捷工具栏并行的模式。菜单为下拉式,鼠标点击主菜单,子菜单以下拉列表格式显示;鼠标指向快捷工具栏的按钮,会有功能提示条显示出来;另外,主题内容以一个个小标题的方式显示在主题桌面上,让操作人员一目了然。

五、结束语

使用计算机技术建立资料管理数据库,并设计具有资料检索功能及用户之间可相互交流功能的管理系统,为资料的丰富、管理、分析与应用提供了高效的手段。本系统对资料的完善过程是长期的、动态的,无论是系统管理者还是普通用户,在系统使用过程中都可以把不断搜集到的最新资料存储到数据库中予以检索、分析。H

参考文献

[1]付婕,李春燕.利用VB存取SQL Serve中的图像数据的实现方法[J].电脑知识与技术,2008,28(4):44-45.

资料数据库系统 篇2

(一)发表于 2012-12-13 00:47 来源:本站原创

不论是竞争对手分析还是商业情报竞争,都需要收集各种各样的资料,来满足分析的需求。资料的收集随着目标推进而不段迭代的过程,假如某公司要推某国战类型的游戏,抢占媒体档期、第一时间吸引目标用户,而某公司又知道其竞争对手之一也要推同类型风格的游戏,于是判定竞争对手游戏公测时间成了该公司的一个数据需求,于是有了如下图这样一个不断跟进的过程:

前面一篇《如何界定你的竞争对手》中也多次提到一些资料的概念,那么这些资料的分类如何,我们如何去收集?我相信做过数据分析相关工作的人都能随随便便说出好些条,但要系统的说出一些资料来源有些难,今天小编就和大家来理一理一手资料和二手资料的来源途径,当然有时候一手资料和二手资料的来源相同,而判定一手资料和二手资料主要取决于最初收集资料的时间。一手资料来源

1.销售人员与顾客用户 通常企业内认为最没有被充分利用的资料来源是销售人员,他们常年累月与顾客接触,可以非常了解竞争对手最近的一些信息,也可以发挥类似于市场调研人员的作用和顾客用户交流沟通。2.企业员工

企业每个员工都对其负责领域的产品市场有所了解,从不同的角度出发,集思广益之后都能得到一些有价值的竞争信息。3.上游厂商

传统意义上的供应商以及互联网行业相关的带宽提供商,企业都可以通过相关途径找到相关有用信息,比如一些包装纸箱生产厂商都会在其包装上表示生产厂家和地址等装运信息,通过对包装厂商的信息可以进一步推断竞争对手的销售情况;对于相关互联网企业而言,广告站点投放观察、网站流量查询等都可视为此途径。4.第3方调查咨询公司

这里所说的基本上是指第三方咨询公司与企业进行的合作调研项目,比如很多网游公司在游戏推广前就会找调研公司合作招募一些样本做问卷调查或是样本在线跟踪服务。5.投资银行

投行的分析师每年都会对行业内的企业或产品进行大量的研究分析,这些以大量二手资料以及投行分析观点构成的投行研究报告也是一个很好的资料来源。二手资料来源

1、企业内容资料

企业过去的营销计划以及争对竞争对手收集的的历史数据等,都是很好的资料来源,特别是互联网企业,内网空间的资料共享更是为资料的查找提供了便利性。

2、地方报纸

很多地方报纸都会对本地区做的好的企业做相关报道,关注查阅当地报纸或许是个不错的方式,在互联网时代,很到地方报纸都有其网络版,还有梅花网这样的企业会专门采集一些地方报纸数据,供其用户使用。

3、企业财报

企业财报这一来源通常只对上市企业有效,很多投资咨询公司都会对财报进行研究分析,比如邓白氏的《商业资信报告》,i美股的企业研究报告等。

4、招股书

这一途径同样只争对特定的企业,不知大家对唯品会的招股书是否还记忆犹新,正因为他的招股书,让大家了解到了他的用户数、订单数以及超级高的重购率。

5、专利和商标资料 专利和商标资料通常可以帮助我们了解相关产品或技术方面的信息,或许大家有关注或了解最近闹的不可开交的三星与苹果专利官司,还有谷歌为了专利而收购MOTO手机的事例,在我国,专利情况可在国家知识产权局官网上查询。

6、一般商业出版物和行业出版物

很多杂志都会根据自己的调查出一些参考数据,譬如早在2001年美国著名的杂志《产业标准》就出了互联网相关的100个数据,披露了互联网相关的人数、金融、广告、发展规模、电子商务等数据。当然,每个行业都有自己的杂志,比如现在比较热的电商行业相关的杂志就有《互联网周刊》、《财经》、《天下网商》、《卖家刊》等,当然大家也可以关注@数据分析 在微博上整理的非商业性文件《电商视野周刊》。

7、新闻报道

企业公关通常会向媒体披露一些企业信息,或是新品发布,或是高层人事变动等,通过点滴的信息积累或许就能发现很多有价值的资料。互联网相关的新闻报道大家可以看几大门户的科技频道以及Techweb等站点。

8、促销宣传资料

这种途径在传统行业使用较多,通常其促销宣传册上都会对产品特点以及价格等做详细说明,如果你关注过银行或保险行业的一些宣传资料,你还会发现他们的宣传资料做得跟数据分析报告一样。

9、咨询公司数据报告

咨询公司数据报告通常是我们最先想到的。艾瑞、尼尔森、易观国际、DCCI等的咨询公司每年都会出大量的互联网相关的行业或专题报告,通过简版免费完整版收费的方式供大家查阅。

10、员工沟通

企业博客或企业内刊、同事间的交流也能在不经意间获得很多的有用信息,对于外部,天涯爆料、人人发帖、微博、博客爆料等,至今我都不知道有多少企业内幕消息以这样的方式被爆出来。

11、行业协会

很多成熟的行业都会有政府牵头,成立相关行业协会。行业协会某种程度上讲发挥了部分政府职能,协会常常会组织行业内的企业开会探讨,会请业内知名企业宣讲其对行业的发展看法及其企业成功的经验介绍,此外,有的行业协会还会组织一些市场调研活动,对行业摸底。

12、政府来源

说的政府资料来源,或许大家首先想到的是统计局。尽管大家对他提供的数据是各种质疑,但在并不是排除他作为二手资料来源途径的理由,此外,譬如新闻出版总署分管着游戏出版版号的批复,游戏企业常常在那里了解最新的竞争对手动态。此外,还会提供一些行业数据出版数据,譬如:新闻出版总署最近公布的《2011年全国新闻出版行业基本概况》数据显示,截至2011年年底,全国共有出版社580家(包括副牌社33家),其中,中央级出版社220家(包括副牌社13家),地方出版社360家(包括副牌社20家)。

13、电子数据服务

这种网络或电子数据库提供的二手资料有点类似于论文期刊资料检索库,国内的电子数据服务本人最常使用的应该是百度统计数据搜索(tjsj.baidu.com),而国外的一些电子数据服务数据库则要全的多,比如标准普尔公司、DIALOG公司、邓白氏公司等。

14、网络

前面提到的很多来源都与网络有关,当你需要寻找某个公司的产品信息时,你第一时间想到的或许就是利用谷歌或者百度去搜一下,从产品官网或其他人的介绍中去进一步的了解产品信息。

当然,除了上面介绍的这些渠道外,还有很多其他的渠道,比如招聘信息、行业峰会、产品展会、企业参观、核心人员消息刺探等等,简单的说,一切与产品或企业相关的媒介、人都可能成为你的信息资料来源。前面说了这么多的资料来源途径,那么获取资料的手段有那些呢?请听下回分解。

如何收集数据分析资料数据(二)

发表于 2012-12-14 03:02 来源:本站原创

上篇《如何收集数据分析资料数据

(一)》主要讲述了数据分析资料收集的一些来源,知道那里有资料,并不等于资料就是你的,如何通过合理合法的手段去获取自己需要的资料则是本篇的主要内容。

谈到这个话题,很容易让人想到一个职业——“私家侦探”,从某种程度上讲,情报分析师和私家侦探的工作性质相似,传统行业有些手段和很多的电影情节相似,比如空中侦查,早在1984年Keebler公司因为雇佣飞机拍摄保洁厂房生产设备而被保洁起诉,又比如收集公司废弃杂物(办公垃圾、废旧设备等),2000年的时候某著名数据库软件商就因此道而被媒体曝光,还有发布招聘广告、挖角对手核心人员之类的手段等。本帖更多的则是从互联网的角度出发,讲述一些互联网资料获取手段。

1、使用竞争对手产品

通过使用竞争对手产品能发现对方很多产品以及运营上的小秘密,有人说,在互联网上没有秘密可言,的确如此,只要你保持对竞争对手的关注,什么产品特点、推广运营手段等都能了解得一清二楚。当然,比使用竞争对手产品更有效的方法是偷偷的成为对方的小股东,特别是对于上市公司而言,对手的重大策略以及相关资料信息都会主动推送到你手中。

2、社交媒体探密

通过RSS订阅、QQ群、微博、搜索引擎关键词订阅等手段可以实现对竞争对手主动或被动的了解,特别是在一些行业的QQ群中,很多群规定群名片为:公司-地区-昵称(或真名),有时候说者无心,听者有意,只要将信息稍作验证,便可知真伪,而QQ好友推荐、QQ圈子等产品的出现,更是大大提高了此法的便捷性;此外,微博也如此,小编映像中较深的两个案例,一个是@数据分析产品经理 根据刘强东微博的关注关系分析京东商城企业内部架构以及负责人,另一个则是@数据化管理 老师在其博客中提到的关于微博隐私泄漏的系列描述,很多人在毫无知觉的情况下就将企业的销售信息给泄漏了。

3、招聘信息、问卷调查之类的双刃剑

当你希望通过招聘广告吸收竞争对手员工同时,也暴露了你的市场产品目标;网络调查问卷也是如此,很多产品类的调查问卷题目就很明确的表达出了调查者未来可能考虑的市场策略意图,特别是一些满意度调查,调查的问题就是未来调整改进的方向,譬如下图所示的某电商网站的满意度调查,从题目可以推测未来他们的评价系统将做调整修改。

4、邮件试探

企业邮箱作为大家日常工作的重要工具,每逢节假日或出差,有的人总喜欢将邮箱设置为自动回复状态,譬如:”xx正在休假中,有事情找xx部门的xxx,他的电话是138xxx”,这样无意中就泄漏了相关信息,特别是有的企业喜欢将企业邮箱名称设置为ceo@xxx.com,所有成员收件设置为all@xxx.com之类更是容易中招。

5、“特定”公开渠道

这里的特定是指有某些平台厂商,比如淘宝上卖家交易产品、交易价格、用户评价、交易数量等这些都可以在淘宝卖家信息处获取,还有譬如竞争对手网站流量alexa大体查询,站长工具查询网站相关信息、百度指数查询推广做的如何,对于一些外贸类的站点还可以使用comscore、谷歌站点趋势查询、谷歌ad planner等,越是成绩好的产品资料越是容易被收集。此外,对于一些有特定资源的企业,了解其竞争对手某些状况则是易如反掌,比如苹果可以轻易的通过其系统获取其生态系统内的相关产品的所有数据情况,支付宝了解到相关商家的营收情况。当然,还有很多不是那么道德的方法,比如在市场上购买黑客泄漏的竞争对手数据库数据、高价挖墙角、在自家产品中装特定代码偷窥用户手机或电脑上的其他产品程序(目前移动互联网行业的普遍做法)等。总结

资料数据库系统 篇3

关键词:数字岩心 资料管理 网络 数据库

中图分类号:TP31文献标识码:A 文章编号:1674-098X(2014)01(b)-0023-01

当今科技信息技术发展迅速,这为地质资料的网络共享创造了有利条件,建立数字岩心分析资料数据库库对冀东油田的油气勘探工作更是发挥了积极作用。打破了地点局限、专业工作局限,只要工作中需要相关的资料,都可以通过油田公司企业网实现信息资源共享、成果共享,完成自己的查询需求。在油田勘探开发过利用数据库的形式做到资源共享,使油田内部各类人员能够第一时间准确、迅速地获取信息,完成初步的分析处理,满足科研、生产和管理的需要,从根本上提升油田数据的管理水平。

1 岩心分析资料数据库分析与设计

系统采用.NET三层架构、B/S架构、以及在工作流技术指导下设计与实现[1]。该数据库面向所有用户提供免费资源共享,用户只要通过网络就能访问到数据库,并能获得自己需要的数据信息。

岩心分析资料数据库主要位于J2EE层次结构中业务逻辑层以及数据层当中,在所有层中数据库接收从业务逻辑层发送过来的岩心分析资料数据并进行处理。数据库要尽量地做更多的事情,以便业务发生变动的时候只需改动部分原始数据。因此系统是由任务不同的三层组成的:

(1)数据访问层:数据库数据对象保存了应用系统中的各种需要的岩心分析化验信息,并向科研人员提供了统一访问的接口。通过接口科研人员拥有了对数据透明操作的能力,调用岩心资料数据对象层的相关操作之后,数据对象就会在关系型数据库中出现变化。

(2)对象关系映射层:系统采用的是关系型岩心资料数据库,所以要考虑面向对象和关系岩心资料数据库之间的不匹配性,正是基于这一点设计了对象关系映射层。对象关系映射是数据库的核心,将对象映射到关系型数据库中,最终将值对象映射到岩心资料数据库表中,包括对象属性与数据库表、字、段等一些映射。按照这些映射策略实现了三种不同的映射方式解决了复杂的映射关系,第一种是属性映射其中包括一对一,一对多等映射方式,第二种是继承映射是“one table for everyclass”映射方案,第三种是关联关系映射[2]。

(3)存取控制层:根据对象关系映射层提供的映射信息,它主要是完成对象在特定关系数据库中的数据处理,主要针对对象关系映射层的执行SQL语句,所有存取控制的操作信息都是由对象关系映射层提供的。

2 岩心分析资料数据库的主要实现策略

岩心分析资料数据库主要靠两种策略,分别是基于数据库系统数据访问对象模式和基于对象/关系映射的策略。

2.1 岩心分析资料数据库系统数据访问对象策略

该策略主要是分离业务逻辑和系统数据处理逻辑,提出了岩心分析资料数据库系统数据访问对象的方式。它的实现细节对用户来说是完全透明的,它仅仅向上层提供访问接口,当有请求需要访问数据层的时候会被数据库系统对象拦截进行处理,它封装了该数据库实现细节避免业务逻辑中写入SQL语句。同时在保持应用层不变的情况下修改底层的代码来满足需求,从而更容易实现岩心分析资料数据库系统数据库平台的变更,不需要对系统进行大范围的修改,保证了系统的可维护性。系统访问对象在处理数据方面,通过使用连接池以及缓存机制等技术来提高系统的性能[3]。

这种灵活的策略方式比较注重于数据库系统数据的表示和操作,系统数据访问对象类似于业务层和数据库之间的适配器。在保持业务层不变的情况下实现了岩心分析资料数据库系统数据访问底层的分离、数据存储逻辑和数据库资源调度的分离。

2.2 对象关系映射策略

基于对象关系映射策略已經越来越受到关注,在面向对象思想的软件设计中将实体对象通过XML映射文件与关系型岩心分析资料数据库系统数据库建立联系。这不仅完成了对象属性和字段之间的映射关系,还封装JDBC的操作细节,有助于各类数据在业务逻辑的实现。从而大大的减少编写SQL语言的负担,提高了岩心分析资料数据库系统数据库的性能。

3 应用成效

(1)促进研究工作高效率推进。将科研工作者所需的岩心数据资料存入数据库,只要通过web服务器就能在较短时间内提取到岩石的物理资料,研究者不必再花时间耗费在寻找资料的过程中,大大节约了研究进程。

(2)自动过滤传统保存资料方式的弊端。岩心各项参数资料一旦输入数据库中便可以得到永久保存,不会存在过去那种资料丢失后,花费很大人力、物力、财力进行重复工作的被动局面,从而降低了存储岩心数据资料的成本,获取一定的经济效益。

(3)有效服务生产。数据库所提供的各种参数资料可以使岩石中的多维信息通过多的方面进行描述,通过参数数据可对不同岩石建立联系,进行对比研究。同时在生产过程中可以通过解释及具体需要存进迅速提取制定物理量的实现,降低决策时间。

4 结语

当前油田的信息化建设已经涉及多方面领域,尤其是勘探开发这一关键生产领域,计算机技术的不断革新也为其带来了新的活力。计算机数据库将数据资源进行有效管理,使得岩心资料的管理与应用实现信息化,在为研究人员提供服务方面显得更为人性化,突破时间、地点、专业等局限,助理油田生产、管理工作。

参考文献

[1]朱庆忠,杨和义,张彦彬,等.基于C/S和B/S体系结构的数字油田应用系统[J].石油学报,2004,25(4).

[2]刘晓华.J2EE企业级应用开发[M].电子工业出版社,2004.

资料数据库系统 篇4

关键词:firebird数据库,区域站资料,数据整理,数据质量控制

区域站历史资料是我国气象部门进行气候分析和科研服务的宝贵资源, 但由于其数据量巨大而却以离散的文件形式保存, 还没有得到有效的开发和利用。本文结合开源数据库firebird实现了区域站资料整理软件, 该软件可以将全国区域站多种不同数据格式的数据文件进行解析并导入到firebird数据库系统中, 利用数据库的统计功能对区域站资料进行质量控制、日统计值数据计算, 最后按照新一代气象信息共享平台项目要求的格式输出数据资料。

为便于对区域自动气象观测站资料进行统计处理, 提高区域自动气象观测站资料的利用率, 对区域自动气象站实时地面气象数据进行统一处理和存储, 开发区域自动气象站历史资料处理软件十分必要。

1 资料现状

区域自动气象观测站资料大多保存的是各要素整点数据, 每个站每天就有24个文件, 每个省的区域站数量达到了2千个, 每天各省收到的区域站资料文件数就已经达到了2万以上, 如此大的数据量, 还以这种离散的数据文件的形式来保存, 是不利于区域站数据的检索和应用的, 将这种离散的数据文件整理成一个统一格式的数据包是此软件完成的主要任务之一。

2 整理方法

2.1 软件的工作流程

此软件系统的处理流程分为三个阶段:将不同格式的区域站资料自动批量导入到Fire Bird数据库中, 在导入的过程中对数据资料进行格式检查;然后, 将数据库中的数据进行内部处理, 利用数据库的统计功能计算饱和水汽压等统计项, 同时按照预先在数据库中台站信息表中设定的气候极值对个数据要素进行质量控制;最后, 按照用户选择的时间段输出区域站文本资料。

2.2 Firbird数据库

Firbird数据库是一个跨平台的开源数据库系统, 其设计定位是面向企业开放源代码数据库, 是一个全功能的、高效的、轻量级、免维护的数据库。

2.2.1 Firbird数据库开发单机版软件的优势

MSSQL、Oracle、My SQL等传统的大型数据库软件发布和维护成本高, 不易移植, 软件的部署和安装需要先预安装数据库系统, 然后附加数据库实例, 与数据库连接的软件也要做相应的设置, 通常应用于大型的企业软件和网络软件。与传统的数据库相比, Firebird数据库在开发单机版软件方面具有以下优点:发布简易;功能强大且高效稳定;存储量大;支持SQL标准;高度可移植性;编译环境良好。

2.2.2 Firbird数据库的访问方式

Firebird支持多种数据库访问方式, 各种应用都能通过Firebird动态库fbclient.dll访问数据库;对于各种编译器访问Firebird应用, 可通过ODBC/ADO/JDBC接口访问;对于Firebird自身应用, 可通过自身解释器执行语句直接进行访问;如果Firebird要直接访问, 则可通过Firebird的C、C++和JAVA等接口直接访问。

2.3 区域站资料数据库基础表结构

如图1所示, 区域站资料数据库基础表由台站信息表、气候区域阈值表、全要素数据表、分钟雨量数据库组成。其中, 台站信息表保存有台站号、台站经纬度、拔海高度、台站历史沿革信息、观测要素数、所属气候区域键值等字段;气候区域阈值表的数据字段包括气候区域名称、区域键值、以及以要素的气候极值;数据表存放所有台站的观测要素数据。

2.4 区域站资料解析入库和格式检查

区域站的资料解析入库是从区域站历史数据资料中, 提取各数据要素的数值, 并将其保存到数据库表中的过程。在数据解析入库的过程中, 此软件要对数据文件做格式检查。格式检查是逐一检查气象数据文件名称、时间、内容排列是否符合此种数据格式的标准。主要检查文件中的文件结构、台站参数格式、要素顺序及完整性、数据长度及合法性、数据行数与组数的合法性等。

2.5 基于视图的统计量计算及质量控制

视图是数据库中基于SQL语句结果集的虚拟表, 其字段来自一个或多个数据库中的真实字段, 也可以向视图中添加SQL函数, 就像这些数据来自某个单一的表。

2.5.1 质量控制

质量控制的原理是按照台站之间的位置关系和气候极值特征将相邻台站分成若干个区域, 将观台站测值和所属区域的气候极值进行比较, 若观测值超出气候极值则不合格。

如图1所示, 这些区域及气候极值保存在气候区域阈值表中, 其地域ID号与台站信息表中的区域ID相互关联, 通过台站号就能直接找到其气候极值。因此, 将台站信息表、气候区域阈值表、全要素数据表三张表通过台站号、外键字段区域ID相关联并组成视图, 就能直接对数据要素进行质量检查, 输出质控后结果。以下统计量的计算就是基于质量控制之后的视图实现的。

2.5.2 区域站资料统计值计算

区域站资料统计值计算包括十分钟雨量、逐小时统计值、日统计值。其中, 逐小时统计值有海平面气压、水汽压、过去3小时雨量、过去6小时雨量、过去12小时雨量、过去24小时雨量;日统计值包括日平均气压、日最高气压及出现时间、日最低气压及出现时间、日平均气温、日最高气温及出现时间、日最低气温及出现时间、日平均水汽压、日平均相对湿度、12时-12时小时降水、0时-0时小时降水。

3 总结和展望

此软件系统在内蒙、湖北、甘肃等省进行了试点运行, 试点省认为软件的功能和正确性已经达到了预期目标。随着新一代气象信息共享平台 (CMMIS) 逐步向全国部署, 此软件系统也会向全国各省推广使用。本文实现了区域站资料整理软件, 并利用气候极值做了一定的质量控制功能, 但在质量控制方面还可以做进一步的改进, 可将观测序列的数据处理、不同时段选择不同气候极值、空间数据库等方法应用其中, 提高质量控制的效果。

参考文献

数据结构期末复习资料 篇5

第一章:数据结构概述

1、掌握数据结构的定义,即数据结构三要素:数据的逻辑结构、存储结构、操作;

2、数据结构包括:逻辑结构和存储结构;

3、数据之间的关系:表(一对一之间的关系)、树(一对多之间的关系)、图(多对多之间的关系);

4、算法的定义:算法衡量的标准:时间复杂度和空间复杂度;

5、算法时间复杂度的求法:给定一段程序,求其时间复杂度;时间复杂度的比较;

6、为什么学习“数据结构”?“数据结构”课程主要学了哪些知识?

第二章:线性表

1、线性表按照存储结构不同分为顺序表、链式表;顺序表的特点:逻辑上相邻的两个元素在物理上也相邻;链式表的特点:逻辑上相邻的两个元素在物理上未必相邻;(“未必”的含义是可相邻也可以不相邻)

2、比较线性表顺序存储和链式存储的优缺点。

第三章:栈和队列

1、栈和队列的特点:栈:后进先出,队列:先进先出

2、熟悉栈和队列的基本操作:初始化栈、入栈操作、出栈操作、判断栈是否为空、取栈顶元素等。

3、根据实例,能够容易的判断出是栈的应用还是队列的应用?

4、重点掌握栈的应用:进制转换算法的思想或程序。

第四章:数组

1、牢记对称矩阵、三角矩阵、对角矩阵的特点,掌握矩阵中的元素Aij与一维数组SA[K]的对应关系。

2、掌握稀疏矩阵的三元组表示法。

第五章:串

1、掌握上课介绍的9种函数名称及其实现结果;

第六章:树

1、二叉树的5个性质;

2、二叉树前序、中序和后序遍历,根据2种遍历结果求第3种遍历结果。

3、完全二叉树、满二叉树、哈弗曼树的定义;

4、给定一组叶子权值,求带权路径长度最小的多少?

第七章:图

1、掌握图的术语:无向完全图、有向完全图、顶点的度等;

2、图的深度优先遍历和广度优先遍历;

3、图的邻接矩阵存储,给定一个图,求出邻接矩阵;或者给定一个邻接矩阵,构造图;

4、图的最小生成树;

第八章:查找

1、查找的定义:静态查找和动态查找

2、折半查找算法的思想;

第九章:排序

1、掌握排序的分类:插入排序、交换排序、选择排序;

资料数据库系统 篇6

【关键词】分级存储;地震资料处理;并行存储;数据备份

一、建设地震资料处理数据分级存储系统的必要性

随着勘探难度增加和技术的发展,野外三维高精度采集的数据量大规模的增长,加之地震资料处理新技术、新方法的应用,地震资料处理对存储系统的存储容量和存储性能有了更高的需求,目前河南油田地震资料处理的存储系统在性能和容量上还有待提高,但是存储系统的设计要考虑容量、速度和成本三个问题。容量是存储系统的基础,都希望配置尽可能大的存储系统;同时要求存储系统的读写速度能与处理器的速度相匹配;成本也应该在一个合适的范围之内。但这三个目标不可能同时达到最优。一般情况下,存储设备读写速度越快,平均单位容量的价格越高,存储容量越小;反之,存储设备读写速度越慢,平均单位容量的价格越低,存储容量越大。

分析地震资料处理的数据流特点,我们发现:

1、在进行叠前时间偏移、深度偏移、逆时偏移等并行作业处理时,数据流表现为高并发IO和大聚合带宽,需要高性能存储系统的支撑。

2、在常规处理中的数据流相对平稳,IO吞吐量相对小,对带宽和存储的性能要求相对较低。

3、需要备份的原始数据及成果数据,需要一定数量安全级别较高的存储系统进行数据备份。

为了在容量、速度和成本这三者之间取得平衡,需要根据其地震资料处理数据的特点,采用分级存储为不同的应用提供不同性能的服务,建成高效实用的并行存储环境。

二、分级存储方案设计

(一)体系架构

地震资料处理数据分级存储系统采用开放式的存储体系架构,基于分布式的Glusterfs并行文件系统,将多台存储设备的存储容量虚拟成一个具有统一访问接口的存储空间。按照一定的负载均衡策略存储用户的数据,将数据条带化的存储到多台物理存储设备上,从而获得更高的并发数据访问性能,同时可以制定存储策略进行数据分级存储,对所有的存储设备可以实现统一的管理和监控。

分级存储系统包含管理控制器、索引控制器、数据控制器和应用服务客户端四类组件:

管理控制器:安装并行存储管理软件,提供统一的控制管理界面,实现存储系统的集中化部署、管理、监控和维护。

索引控制器:内嵌高性能数据索引引擎,管理存储系统的所有索引数据和命名空间,实现全局统一命名空间,实现数据索引的负载均衡和故障冗余。

数据控制器:提供数据存储空间,并实现数据存取的动作。

应用服务客户端:向上层应用提供数据访问接口。

(二)配置方案

整个存储系统包括2台管理控制器、2台索引控制器、22个数据控制器,总容量1197TB。分为三级存储结构:

一部分为高速存储,高速为主要特点,由容量较小、价格较贵而性能较高的SSD固态硬盘构成,为实时提供高性能的数据IO能力;

一部分为在线存储,采用容量较大、价格较便宜而读写速度较慢的SAS硬盘构成,支持一般性数据读写;

一部分为备份存储,采用容量大,价格低廉,读写速度慢的SATA硬盘,创建高安全备份卷,存储我们的原始、阶段性数据、成果数据和磁带库数据备份。

三、关键技术

(一)虚拟化管理平台Ovirt

oVirt是一个基于x86架构上的KVM虚拟化技术的开源云服务平台。它在架构设计上由ovirt-engine和ovirt-node两部分组成,这种Node/Engine分离的结构,方便功能的划分与管理。

Engine是系统的管理者,并对外提供管理服务,它挂载了自己的数据库,记录系统中虚拟机的配置,各个存储节点的状态信息,网络状态等。通过在Engine中的设置实现系统的管理逻辑,状态及策略控制。本存储系统通过在管理控制器上安装ovirt-engine来实现管理功能。

Node只负责功能上的实现,不进行状态的记录和策略的实现。oVirt里的Node可以由一个普通的Linux上安装VDSM(Virtual Desktop Server Manager)构成,也可以由一个专为oVirt定制的Linux系统构成。本存储系统采用安装VDSM的方法配置数据控制器作为node节点,实现网络、存储器、虚拟机的创建与修改。VDSM的功能包括组织数据,实现存储集群的数据共享与数据保护,故障恢复。

(二)GlusterFS集群文件系统

GlusterFS是一个开源的分布式文件系统,具有强大的横向扩展能力,通过扩展能够支持数PB存储容量和处理数千客户端。GlusterFS通过TCP/IP或者InfiniBand网络将多个物理存储资源汇聚在一起,使用全局统一命名空间来管理数据。GlusterFS可为各种不同的数据负载提供优异的性能。

GlusterFS文件系统支持标准的网络访问协议,用户可以使用NFS/CIFS等标准协议访问数据。GlusterFS使得用户摆脱原有的独立、高成本的封闭存储系统,利用普通廉价的存储设备也可以部署可拥有集中管理、横向扩展、虚拟化的存储系统。

四、生产应用

地震资料分级存储系统采用的Glusterfs文件系统,支持五种逻辑卷,即Distribute卷(分布式卷)、Stripe卷(条带卷)、Replica卷(镜像卷)、Distribute stripe卷(分布式条带卷)和Distribute replica卷(分布式镜像卷)。分级存储系统搭建完成后,根据地震资料处理需要创建逻辑卷,创建分布式条带卷来满足并行处理作业时高并发IO和大聚合带宽数据流对高性能存储的需要。创建分布式镜像卷作为备份存储卷来存储地震资料原始数据和成果数据,满足数据高安全性的需要。投入生产运行后,多个处理项目使用了该套存储系统进行生产,在项目结束后成果数据直接转移至备份存储卷,回收存储空间。

五、结束语

根据河南油田地震资料处理的数据特点,采用分级存储系统满足地震资料处理中不同应用对存储性能的不同需求,在存储容量、存储速度和成本之间取得了平衡,建成了高效实用的分级存储环境。分级存储系统在存储性能、功能上满足了生产项目的需要,取得了良好的应用效果。

参考文献:

[1]杨传辉 大规模分布式存储系统:原理解析与架构实战 机械工业出版社 2013

[2]G.Somasundaram Alok Shrivastava 信息存储与管理 人民邮电出版社 2013

资料数据库系统 篇7

关键词:肾活检患者,病理资料,数据库系统

随着信息时代的到来, 计算机数据处理技术已渗透到医学的各个领域。新疆维吾尔自治区人民医院肾病科自1986年开展肾活检术以来, 已积累了大量临床和病理资料。为有效的提高工作效率、管理水平和质量, 更好的为临床、教学和科研工作服务, 自2005年4月起, 根据工作的实际情况和需要, 结合肾脏疾病的临床病理特点, 通过自主创新, 研制开发了一套肾活检患者病理资料数据库系统。在3年多的使用过程中, 经过反复调试和修改, 目前该系统已能够满足肾病科病理工作的需要。具有性能良好、工作状态稳定、强健、操作简单等特点, 现介绍如下:

1 方法和步骤

1.1 材料

肾活检患者病理片 (包括光镜数码图片、免疫荧光数码和电镜资料以及相应的临床病理文字资料) 。

1.2 硬件

该系统需要X86处理器, 系统时钟频率最低需求为1.0GHz或更高, SVGA (800×600) 或更高解析度的视频适配器, 256MB内存或更高, 1GB以上可用硬盘空间, 500万像素数码相机, 扫描仪, 打印机。

1.3 软件

该操作系统要求Windows XP?, 编程软件Powerbuilder 7.0。

1.4 编程及建库

1.4.1 数据库结构根据肾活检患者病理资料数据库系统肾病科病理资料的特点[1], 分别建立相关数据库结构[2]。

1.4.2 编程:

编制功能模块[3], 编程工具软件为Powerbuilder 7.0。软件具有下列五项功能: (1) 检查资料的录入; (2) 修改; (3) 统计; (4) 检索; (5) 数据库的维护。各项功能均以菜单 (包括弹出菜单) 或按钮形式选择执行。

1.4.3 数据库录入临床信息录入。

在键盘上输入病人的一般资料、病史和入院后重要检验资料, 包括: (1) 临床资料:姓名、性别、年龄、民族、婚姻、居住地、床号、住院号、临床诊断、重要的临床检验项目资料; (2) 病理资料:病理号、临床诊断、免疫荧光所见、光镜所见、电镜所见、病理诊断、参与阅片及报告医师、时间等。实现了一次输入, 多项指标查询、统计; (3) 照片编号及归档。

1.4.4 打印输出在完成录入模块后, 可按要求打印输出符合规范格式的病理检查报告单并附有病理图片;

可按一般资料、病理类型或时间等多项指标进行统计、查询、检索、打印或导出。

1.4.5 数据库的维护随着多年来肾活检病历资料的累积, 信息量不

断的增加, 本数据库可按年自动分库, 将一年的资料导出至一个资料库, 备份保存。系统还提供资料修改、插入、历史资料的补入等功能。

2 结果

自2006年2月本系统成功建立后, 对以往病理资料进行批量录入, 并在每次阅片时进行实时录入。经实际应用, 达到了资料录入简单、快捷, 查询、检索快速, 报告格式规范, 数据导出灵活, 数据备份安全等多项设计要求。符合临床与科研要求。极大的提高了临床与科研的工作效率。

3 讨论

由于肾脏病理在是肾脏病学的一个重要组成部分, 也是病理学中的一个重要分支, 肾活检在肾病科是一项必不可少的检查项目, 在临床、教学、科研及交流中有不可替代的作用[4]。而在日常工作中积累了大量病历资料后, 对于资料的保存、检索、统计、科研, 需要花费大量的时间和精力。建立数字资料管理系统是应用现代化手段进行科学管理的必然趋势。而肾病病理资料由于资料复杂、专业性强, 没有能够完全符合需要的现成商业版本数据库软件。因此我们通过自主研发了这套病理资料管理系统, 该系统采用了目前较为先进的Powerbuilder数据库编程语言编制而成, 数据库规范、强健、稳定、可靠, 可定制性强, 输入简单、易学、易用、易扩展, 适合临床医师在阅片的同时进行实时录入与病理图片的保存。因此在肾脏病理专家阅片的同时, 本系统能够及时记录阅片所见及诊断意见, 并可在阅片中实时保存具有诊断价值的病理图片, 最终可被永久保存并真实的反映在报告单中。通过本系统的多种查询与检索方式, 还可以快捷的充分利用日积月累的病理资料并完成初步的统计工作, 极大地提高了工作效率, 在一定程度上降低了科研成本。经我科2年来的实际使用, 证实本系统可以应用于各医院肾病科病理资料的管理工作, 同时也为其他科室相应的临床资料的保存工作提供了有益的探索。

参考文献

[1]王海燕.肾脏病学[M].第二版.人民卫生出版社, 1998.

[2]程学先.数据库原理与技术[M].水利水电出版社, 2001.

[3]宋晔.PowerBuilder实用教程:数据库应用系统开发[M].北京理工大学出版社, 2004.

资料数据库系统 篇8

1 异常数据的处理

新型站出现异常记录 (如自动气压、气温、湿度、能见度、降水、蒸发、风、地温、草温等异常) 区分白天和夜间, 结合备份站、人工观测数据按有关技术规定及时处理传输;如新型站要素全部缺测 (如采集器与电脑的通信光纤被老鼠咬破, 造成数据不能及时传送到电脑, 但数据仍保存在采集器) , 则临时启用备份站及传输系统上传;新型站恢复正常后尽量把新型站正常数据下载并生成报文上传, 以保证数据完整、统一。

2 各要素的质量控制和查MDOS反馈

在设置合理的地面审核规则库下, 利用MDOS质量控制方法对自动气压、气温、湿度、降水、蒸发、风、地温、草温等自动数据进行人机相互审核;发现错误应及时主动发更正报反馈;MDOS被动反馈:根据反馈提示, 与备份站数据进行对比, 或根据要素变化规律进行判断, 另对人工观测要素审核其是否正确, 从而判断反馈类型。

3 人工项目的校对和审核

检查校对气簿-1每日人工数据如云量/低云量、云高、日天气现象、小型蒸发 (冬季) 、雪深/雪压、电线积冰、冬季人工风向风速、冻土、日照等记录是否符合规定, 与台站地面综合观测业务软件_业务中“常规要素”、正点观测编报、日照数据、常规日数据是否一致;必要时与MDOS系统中数据校对是否一致;不一致或错误时, 及时发更正报, 如果MDOS未更正时, 应在MDOS/数据查询与质疑中更正提交。

3.1 天气现象和能见度的预审

审查逐日天气现象的记录方法是否符合规范规定, 例如:对夜间的天气现象应按自动、人工天气现象顺序记录 (同时出现, 先后次序自定) 把人工观测天气现象符号插入到业务软件_业务/天气现象中, 对白天的天气现象遵照白天的记录输入规定;雨、雪同降时要注意记为雨夹雪符号或阵性雨夹雪符号, 勿分开记载。

分钟雨量≥0.1mm, 或冰冻停用风传感器时, 雾、轻雾、霾等统统综合判别为“无视程障碍现象”, 需在天气报编报前进入SMO→数据查询→详细要素查询→天气现象综合判别每日逐分钟数据表→查看水平能见度<750m及<7500m的数据和相对湿度, 来人工判别是否为雾、轻雾、霾等视程障碍现象, 修正雾等天气现象时间, 即打开“天气现象”, 输入或修正水平能见度<750m雾现象之起-止时间 (起止时间之间输入“-”) 。但因冰冻或雷击使能见度出现65535异常数据时, 能见度及视程障碍现象恢复人工观测。能见度缺测时, 仅在定时观测时次进行人工观测, 其余时次作缺测处理, 并备注。审核人工能见度记录及输入是否符合规定。

3.2 降水量的预审

翻斗雨量传感器按规范规定进行维护, 另外安置防风圈进行调整, 例如取下雨量筒的承水器, 拧下漏斗, 把承水器围住计量、计数翻斗, 量取10.0mm水量缓慢地倒入上漏斗, 可减小风对计量、计数的影响, 这样可以提高降水测量精度。

审核夜间降水类天气现象应与降水量保持一致, 白天降水类天气现象时间应包含分钟雨量时间。审核降水量异常记录处理是否符合有关技术规定。

3.3 蒸发量的预审

小型蒸发量:因冰冻时间长, 停用大型蒸发传感器, 或大型蒸发传感器故障, 启用小型蒸发器后, 逐日复算蒸发量的计算有无错误;日蒸发量前后有突变时, 应结合温度、湿度、风速、降水、日照等天气情况分析是否可能。

自动蒸发量:非冰冻期, 小时蒸发量连续长时间为0或个别时次>0.4时, 结合温度、湿度、风速、日照等分析是否合理, 如果发现异常, 应判断属水位设置不当还是采集系统故障等, 并按有关技术规定对异常蒸发量进行处理和发更正报。对于蒸发传感器, 实际蒸发水位如果明显超出合理设置范围时, 自动计算小时蒸发量可能连续为0, 需要从台站地面综合观测业务采集软件→数据查询→综合查询→当前分钟蒸发水位, 选取开始时间、结束时间→查询→根据某时正点水位与上一正点水位之差重新计算出小时蒸发量, 并编发更正报。

3.4 积雪和雪压的预审

审查有雪深记录, 是否有积雪现象;雪深的记录 (取cm整数) 与编报输入 (扩大10) 是否正确;雪深的补测, 是否符合规范规定, 是否在备注栏注明;根据温度、天气现象、降雪量、湿度、日照等分析逐日雪深是否合理;雪压的观测或补测是否符合规范规定, 审理计算有无错误。

3.5 电线积冰的预审

风传感器有加热融冰功能, 测最大电线积冰之风向风速时, 如果自动风正常, 则台站地面综合观测业务软件_采集→数据查询→综合查询→要素选“气温 (百叶箱) ”、“2min平均风向”、“2min平均风速”, 记录某分钟气温、风向风速 (风向记数值, 风速取一位小数, 如5.6) 。

校对每次电线积冰过程最大值的挑取是否正确:一日有几次积冰过程, 只挑重量值 (或直径mm+厚度mm总值) 最大的一次积冰过程南北、东西2个方向的最大值输入业务软件—业务/常规日数据中。一次积冰过程可能测量多次, 跨日, 当某一方向测量的极值 (优先挑重量) 比上次极值大时, 又要在20:00后输入日数据文件上传, 再删除之前某日常规日数据电线积冰数据并重上传 (比上次小时, 不输入电脑) 。这样, 常规要素和月报表中某日极值, 即按每一次过程及方向在某日几次测量中或各次测量中挑重量值 (或直径+厚度总值) 最大者;某次积冰过程跨月的最大值挑取原则参见《观测规范》。常规日数据电线积冰重量不能输入千位、万位数时, 先输999保存, 传输后第2天再在MDOS/数据查询与质疑中对日数据更正提交, 再在数据维护/常规要素中输入保存。

3.6 风的预审

因冰冻或水雾滴风传感器冻住, 除规定时次定时风速用轻便风向风速表测定外, 其余定时风向风速、所有10min风向风速作“-/-”, 并备注, 分析日最大、极大风向风速缺测也应备注。因雷击导致某一范围的风向以另外范围的风向被记录, 或因大风吹落风向标使风向反向, 或因其它原因如融冰风加热器非冰冻季节加热升温造成风向固定为0, 其风向应用备份站代。

3.7 日照的预审

校对日照纸安装是否正确, 复算逐日逐时有无漏算、错算日照迹线, 非迹线有无误算, 在“日照数据”中是否输错格、是否上、下午颠倒等;如某日日照迹线的开始或终止时间恰为12:00, 要分析洞口是否被堵, 确实未堵住, 应在备注栏交代。

4 发各种更正报

发更正报时间未超过规定时限 (长Z文件12h, 日数据文件和日照数据文件为1d) 时, 可直接编发更正报, 报文名自动加CCA之类更正码。发更正报时间超过规定时限时, 对于小时更正文件, 把中新编Z*AWS_FTM.txt文件剪切到待发文件夹, 把Z*AWS_FTM.txt文件名改为Z*AWS_FTM-CCA.txt或Z*AWS_FTM-CCB.txt等, 其文件内容第一行最后000相应改为CCA或CCB等 (日数据Z*AWS_DAY.txt、日照数据Z*SS_DAY.txt仅更改文件名) , 再把此更正报文复制到D:ISOSMOIAws Net中, 自动上传后, MDOS相应时次或日数据、日照数据会自动更正。

5 元数据的填写和上传

观测员平时注意气薄、业务软件/数据维护/常规要素中纪要 (如人工增雨、冰雹、灾情等) 、备注的填写, 同类型的备注可以综合到一块, 填写时要条理清楚, 简明扼要, 如果每年某个月有固定的备注, 则把“常规要素”中上一年同月该项备注复制到当月保存;预审员注意校对和补充气簿和“常规要素”纪要栏、备注、台站基本信息、站网信息、其他变动等台站变动和气候概况的填写, 并按规定复制这些元数据到MDOS系统/元数据信息处理, 进行上传。

6 A、J文件的制作

每月初利用常规要素制作A文件、J文件, A、J文件初审。月初从MDOS制作下载A、J文件进行审核, 如果审核软件提示A文件某数据错误应发更正报, 或在MOI/常规要素及MDOS/数据查询与质疑中修改并提交, 审核J文件提示分钟数据有误, 需在MDOS/数据查询与质疑中修正, 再提交;省信息中心确认后, 再从MDOS制作下载A、J文件进行审核、校对, 如此反复一直至无误。

7 结语

气象观测员、预审员应严格执行地面气象观测规范和各项技术规定, 熟悉自动仪器的基本检修方法, 熟练掌握使用微机操作技能和维护方法, 熟练业务流程、MDOS系统、应急预案等, 利用MDOS系统对疑误数据及时正确处理;预审员应对数据质量控制和数据上传作总把关。

摘要:目前县级气象站以新型自动气象站为主, 观测和上传资料, 备份站为辅, 气象资料上传后在气象资料业务系统 (MDOS) 下完成资料上传的质量控制等。本文就MDOS系统结合新型自动气象站, 对如何做好气象资料质量控制及资料预审进行阐释, 以便准确完整地上传资料。

关键词:新型自动气象站,MDOS系统,质量控制,资料预审

参考文献

[1]宗曼晔, 王晓辉, 刘小宁, 等.地面气象观测规范[M].北京:气象出版社, 2003.

[2]台站地面综合观测业务软件 (ISOS) 用户操作手册[M].北京:气象出版社, 2014.

[3]地面气象观测业务技术规定实用手册[M].北京:气象出版社, 2016.

资料数据库系统 篇9

我们生活在信息化社会,庞大的信息数据需要有统一的管理。数据库是信息系统的核心和基础技术,是计算机学科领域中发展最为迅速的重要分支。数据库技术被广泛应用于各行各业,如铁路飞机购票业务、银行帐目、财务管理、图书资料、科研项目、学籍档案等。当我们上网浏览网页时,访问的是网站的后台数据库系统,一个真正的、完整的站点是离不开数据库的,因为实际应用中,需要保存的数据很多,而且这些数据之间往往还有关联,利用数据库来管理这些数据,可以很方便的查询和更新。这些大型数据库被计算机专业人员开发出来后,被有效地应用于各部门。而对大多数非计算机专业人员来讲,数据库技术还比较陌生。每位医生手中会有上千名患者资料,其中包括病人的姓名、年龄、病症及患部的x光、CT、MRI等的医用图片。如何将这些资料有效地进行管理,便于进行查询、更新等操作,就需要使用数据库技术了。本文有针对性地设计出便于医生使用的包括医用图片在内的患者资料数据库管理系统,以帮助医生通过有效地使用数据库技术,对患者资料进行科学化的管理。

对于文字部分的资料进行管理的数据库技术业已成熟,但对于患者的图片管理技术,仍然不够完善。目前,商品化的数据库管理系统以关系型数据库为主导产品,技术比较成熟,相对来讲价格昂贵,所占空间大,操作复杂。医生使用的个人数据库可以简单些,利用我们平时操作计算机时使用的应用软件即可完成,而不必购置及安装其他数据库软件占用空间。

一般医生的个人电脑上使用的操作系统都是Windows,大家对office办公套件都比较熟悉,我们就是利用办公套件自带的access数据库管理系统来建立数据库和存放原始数据的二维表。比如我们先建立一个名为患者“patient”的数据库,然后在名为“patient”的数据库中,建立一个二维表。二维表的建立需要两个步骤,一是设计表结构,根据医生们的个人需要建立相应字段,如:患者姓名、年龄、病例、图片地址等。表结构确定后,将对应的各个患者的信息逐条录入。数据库和二维表建立起来后,我们要对表进行查询、插入、修改、删除四项基本操作,这四项操作可以直接在access的查询视图下操作。简单的查询,只要在access查询视图下选择相应的条件,如想看一下姓名叫王喜的患者的记录,只需在姓名字段下的条件处,输入“=”王喜””,即可显示对应的记录。但若要显示患者的医用图像,则需要用web方式访问数据库。access只能显示图片存放的地址,而不能和文字信息一起显示图像。目前在WINDOWS环境下有多种访问WEB数据库的技术,比较常用和简便的是动态服务器页面ASP(Active Server Page)访问方式。ASP是微软公司推出的WEB应用开发技术,着重于处理动态网页和WEB数据库的开发,编程灵活,是目前访问WEB数据库的最佳选择。

由于ASP在服务器端运行,运行结果以HTML主页形式返回用户浏览器,这需要将我们的个人电脑变成对等机,即是客户机,也是服务器。操作很简单,只需选择“添加/删除程序”中的“添加/删除Windows组件”来安装Windows的一个组件IIS即可实现这项功能。通常我们使用的方法是将所要显示的图片存在特定的目录下,在数据库中保存相应的图片的名称,然后在ASP中查询数据库获得文件路径,并在HTML文件中引用。我们需要做的操作是先建立一个文件夹,文件夹的名字由医生设置,比如management,然后在“控制面板”下选择“管理工具”,选择“Internet信息服务”,在“默认网站”处点击鼠标右键,选择“属性”,然后将IIS主目录设为刚刚新建的文件夹management,IIS设置就完成了。将以下程序复制到management目录下,医生可自己设置文件名,比如设为患者信息:PatientInformation.asp

内容如下:

执行结果如右图1。

运行此程序时,医生们只需修改程序第五行的患者姓名即可查询显示出包括医用图像在内的不同的患者记录。此处需注意的问题是,字段名必须和数据库中的字段名一致。

以上我们从实用性的角度出发,介绍了一种非常实用的数据库技术,医生可根据个人需要建立一个简单的患者数据库管理系统,便于科学有效地管理手上的患者资料,希望对各位医生有所帮助。

参考文献

资料数据库系统 篇10

1 以往的敦煌学数字化与数据库建设情况

20世纪初,莫高窟藏经洞出土大批古代佛经与世俗文书,从此,各国学者开始对这些资料的多学科研究,并最终扩展为以文献、石窟艺术、历史地理等为主要研究对象,包括历史、考古、宗教、石窟艺术、文学、建筑、民俗、交通、教育、乐舞等在内的一门国际性显学:敦煌学。经过百年的发展,敦煌学产生了海量研究成果,而这些成果又多以传统的纸质印刷物为载体。敦煌学的数字之路开始于20世纪80年代,到90年代末,随着国内敦煌学术研究的越发繁荣、数字技术的迅速发展,敦煌学数字化工作也迅速展开,并在很短时间内取得了丰硕的成果。

目前,敦煌石窟的彩塑、壁画的数字化主要由敦煌研究院通过“数字敦煌”项目来完成;国内外敦煌学界和图书馆界的学者开发的敦煌学数据库主要有:敦煌研究院的“敦煌学研究文献数据库”、兰州大学的“敦煌学数字图书馆”(“敦煌学Web数据库”)、敦煌研究院文献所和兰州大学图书馆联合开发的“敦煌遗书数据库”、中国国家图书馆的“敦煌数字化计划”等。其中敦煌研究院主导的对莫高窟彩塑、壁画的数字高清拍摄及其应用的“数字敦煌”项目和“敦煌遗书数据库”由于有雄厚的资金与技术支持,进展顺利,运行良好。

2 基于敦煌学研究资料与成果的数据库项目综述

1)项目必要性。国内已知最早提出的与敦煌学相关的数据库是兰州大学1999年提出并开始建设的,旨在为敦煌学研究专家提供信息服务的“敦煌学Web数据库”。随后,一些高校、图书馆、研究机构相继建设了一批规模不等的敦煌学数据库。但是这些数据库普遍设计、立项、建设较早,规模小、技术落后,又受制于版权、资金等问题的制约,现在均不能很好地支撑科研活动。近年来,随着数据库技术、网络应用技术、各种电子阅读设备的快速发展,敦煌学术研究的迅速繁荣,建立一个开放的、功能齐备、内容丰富、实用性强的敦煌学数据库已是敦煌学界的迫切需求。“基于敦煌学研究资料与成果的数据库”(以下简称:“敦煌学数据库”)的建立,可以使分散的敦煌学基础资料、研究成果集中起来,形成资源流,使信息迅速得到共享,同时也方便学者第一时间了解与掌握敦煌学界最新的科研动态,不断推出最新的研究成果与学界交流。

2)项目可行性。在国内,清华同方的知网、万方数据等大型学术数据库,利用传统出版资源进行数字化运行,取得很好经济效益与社会效益,已经是高校、研究机构、各学科专业技术人员不可或缺的资料查询工具了。在国外,由于出版社的数字出版能力普遍较强,所以出版企业建设的专业数据库的成功案例很多,如埃思维尔(Elsevier)的全文数据库Science Direct,斯普林格(Springer)的全文数据库Springer Link等。事实证明,这种模式是成熟的、可持续发展的。

“敦煌学数据库”项目由甘肃教育出版社为建设主体,敦煌研究院、兰州大学敦煌学研究所为共建单位。甘肃教育出版社是国内最权威的敦煌学研究成果出版机构,拥有大批敦煌学研究成果的数字版权;同时也是甘肃省首批数字出版转型示范单位,有丰富的数字出版实战经验与技术储备;甘肃教育出版社的母公司“读者传媒”,又是国内上市的为数不多的文化企业,可以为其提供资金上的大力支持。而敦煌研究院、兰州大学敦煌学研究所是国内最权威的敦煌学研究机构,拥有大量研究成果,并且有“敦煌遗书数据库”“敦煌学研究文献数据库”两个试验性数据库的建设经验与内容做支撑,加上两家机构各有一个敦煌学专业期刊,可为今后“敦煌学数据库”的数据更新提供源源不断的新鲜血液。因此,该项目可操作性很强。

3)项目建设的目标、基本架构。敦煌学数据库建设的最终目标就是就是建立一个最专业的、开放的、功能强大的、对敦煌学研究者黏性极大的、能为敦煌学术研究提供最专业服务的、基于敦煌学研究资料与成果的数据库;并且这不仅仅只是一个提供查询服务的系统,而还应该一个专业的数字出版平台。

敦煌学数据库是个广义的概念,架构应该是:一个数据加工平台,可将出版社、杂志社保存的书稿和论文的排版文件,将原作者提供的WORD文档等直接转换成数据库存储的标准格式;一个数据库及可以连接出版社ERP系统的数据库管理系统;一个开放的、多元的多媒体数据发布平台。

4)项目内容的构成。敦煌石窟群除了莫高窟、西千佛洞,还包括瓜州榆林窟、东千佛洞以及肃北五个庙石窟和一个庙石窟。其中莫高窟有编号的洞窟就有735个,造像2 400余身,壁画5万多平方米,各类艺术品1 000多件,再加上藏经洞出土的5万余卷以佛经及世俗文书为主体的敦煌遗书,这些均是敦煌学研究的基础资料。因此“敦煌学数据库”正是以此以及对这些材料的研究成果作为核心数据并加工、整理、发布、应用的。数据库应当包含以下内容:

敦煌学著作及各相关专题研究成果的目录和全文等资料、论文(含期刊论文、学位论文、会议论文、网络论文等)。

藏经洞出土文献的叙录、图版、录文、译文及题记;敦煌出土简牍和碑刻等的叙录、图版、录文及译文等信息。

敦煌洞窟中的彩塑、壁画、建筑等的目录、图像、视频、3D场景以及辅助介绍资料等。

敦煌所出土各种织物画、纸画、刺绣和其他各类艺术品的目录、文字、图像、视频等辅助介绍资料。

有关敦煌考古和田野调查方面的报告、日记、图片等资料。

敦煌石窟中文物和各类敦煌文献的保护、修复档案资料。

有关敦煌历史的年表、地理、人物、事迹、风俗等资料。

敦煌学研究机构、研究队伍、研究专家的名录和具体情况介绍等。

参考文献,如大藏经、各种正史、资治通鉴、政书、方志等资料。

然而随着敦煌学术研究的不断深入与发展,出现了与其他学科相融合的现象。例如:随着敦煌汉简研究成为敦煌学术的一部分,居延汉简甚至这个简牍学都与敦煌学产生了共鸣;“一带一路”的提出,加上敦煌与丝绸之路的天然的无法割裂的关系,使得对丝绸之路的学术研究也进入敦煌学界的视野。因此,“敦煌学数据库”还要收入简牍学,河西走廊及丝绸之路沿线石窟寺、魏晋墓葬、地方文化,西北史地等的研究资料与成果。

5)数据库的检索方式。“敦煌学数据库”数据库检索方式主要有分类检索与关键词检索两种。

分类检索:是指从主页根目录开始,按照目录信息的提示,点击相关链接,直至查询到所需信息的树形浏览检索方式。

关键词检索:在设置于主页的“关键词检索”框中直接输入相关词语,便能检索到相关的文字、图片、视频、遗书录文、译文及研究成果等信息,并且通过链接相互关联,彼此呼应。比如用“吐蕃统治时期”一词可以检索到所有关于吐蕃统治时期营建洞窟中塑像、壁画的图像;又可以显示敦煌遗书中所有确定或疑似“吐蕃统治时期”的佛经与世俗文书的照片、录文、译文等;还可以考察所有在题目或各级标题及内容中含有“吐蕃统治时期”字样的论著信息。

3 结论

本文所探讨的是一个以出版社为主体建设的专业学术数据库,这在国内出版业内并不多见。敦煌学术之研究已走过百年,敦煌学的数字化的步伐也伴随着学术研究与信息技术的飞速发展而越来越快。“敦煌学数据库”作为敦煌学数字化的重要组成部分,具有划时代的意义;同时作为传统出版企业转型升级的一个数字出版平台,也有重要的实践意义。希望这个平台搭建能够大力促进敦煌学术研究与研究成果出版的发展与繁荣,彻底改变曾经“敦煌在中国,敦煌学在国外”的尴尬局面,让大家都知道,敦煌学是世界的,但敦煌学研究的中心在中国,敦煌学的数据库与出版平台在甘肃。

参考文献

[1]赵书城,庄虹,冯培红,等.关于敦煌学数据库[J].敦煌学辑刊,1999(1):128-131.

[2]韩春平.“敦煌学网”——敦煌学数字化的总目标[J].敦煌研究,2011(5):119-122.

[3]韩春平.敦煌学文献数字化刍议[J].图书与情报,2004(2):38-40.

[4]李润渊,李鸿恩.敦煌学文献数据库建设的探索与实践——以敦煌研究院敦煌学研究文献数据库为例[C]//中国图书馆学会专业图书馆分会2009年学术年会论文集,2009.

资料数据库系统 篇11

1、湖北省黄石市水文水资源勘测局 湖北黄石 435000;

2、武汉市水文水资源勘测局 湖北武汉 430070;

3、荆州市水文水资源勘测局 湖北荆州 434000;

4、咸宁市水文水资源勘测局 湖北咸宁 437000

摘要:水位信息化数据采用5分钟的采样间隔,在数学中属于离散量,用其模拟水位变化过程这一连续量。水位资料整编要将水位数据进行整编,推算出逐日平均水位,但是对目前的主流整编程序来说,单站每年水位信息化超过10万组的数据量仍过于庞大。因此,对水位数据进行处理,使其既能满足资料整编的要求,又能反映该站水情变化的特性。水位信息化数据的处理是为了适应信息化发展对水文资料整编的需要,研究当前已有处理系统情况,分析水位信息化数据的特点,在此基础上研究设计了水位数据处理的三种基本算法,基于此算法开发出具有人机交互功能的处理系统软件,取得了良好的效果。

关键词:水位信息化;数据处理;算法;滑动平均精简;K值递推精简;数据处理系统

1 引言

水文数据是国家基础性公益科学数据资源的重要组成部分,是国民经济建设、防汛抗旱减灾、水资源可持续利用与管理、水环境与水生态保护等领域的科研、规划的基础数据。水文资料是研究江河、河口、海湾水流运动运动规律的基础资料,对某一水域进行综合规划研究、需要系统地整理、分析这些资料,以便对所研究的区域有整体、深入、形象的认识和了解。水文信息是整个水利信息中数字化程度最高的信息。随着信息技术的飞速发展,对水文信息的采集、加工处理、决策与信息服务的方式都产生重要影响和变革。计算机技术渗透到水利行业,为实现从传统水文向现代水文的转变提供了有效途径。

水文资料整编系统是建立在满足GIS设计要求的水文信息数据库基础上,实现水文信息的采集、存储、分析、查询、管理、输出,为水文分析管理提供准确的数据,同时也为其他有关部门决策、生产及研究提供可靠依据。

水位资料是水文资料中最基础最重要的组成部分,水位资料整编成果是《水文年鉴》刊印最基础最重要的资料项目之一。

当前信息化水位资料采样间隔均为5分钟,一个观测断面全年完整的水位数据为105120组,一个市级水文机构多个水位观测站的信息化水位数据量十分庞大,对于省级来说更是天文数字。目前,水文资料整编系统并不能处理如此大量的水位数据。

因此,将大量水位信息化数据缩减并能准确反映水位变化过程,满足推求逐日平均水位的要求,应用于资料整编需要一个接口,探讨水位资料整编中水位信息化数据处理算法及应用问题由此产生。

在信息化发展的初期,针对数据的处理也产生了一部分处理软件,根据对其的研究,发现普遍存在以下几个方面的问题:

(1)算法單一,无法完全适用于各类测站的水位特性,对波浪影响的站点的数据处理结果存在较为严重的锯齿现象。

(2)算法不合理,为了数据量满足整编要求,对水位变化过程的控制较粗糙,导致日平均水位的推算超过规范允许误差。

(3)处理方式封闭,用户无法通过交互功能实现数据处理的可视化,对处理的结果心中没数,需要通过第三方软件进行查验。

(4)不能在信息化数据和整编程序之间进行无缝衔接,需要人工干预的地方过多,不能有效起到衔接功能。

(5)对数据源的要求过于苛刻,在开展数据处理之前,用户需要进行大量的人工处理工作,导致一些可能的人为错误发生。

2 基本算法及原理

2.1波浪处理

《水位观测标准》4.10.2规定,为了消除和控制误差,对波浪的观测应取峰顶峰谷的平均值。可知,水位的瞬时观测值与真值存在波浪影响误差,由水位的连续性可知,某一时刻的水位与上一时段和下一时段有着密切的联系。因此,某一时刻的水位真值可以表示为以下方程:

(1)

——时刻的水位真值,m;

——时刻的瞬时水位,m;

——时刻的瞬时水位的权重

在实际5分钟的采样间隔中,采用n=2,即i时刻的水位与前后各10分钟共20分钟的水位数据相关,i-2、i-1、i、i+1、i+2时刻的水位权重分别设置1、2、4、2、1,则公式可简化为。

(2)

波浪处理在数据处理中十分必要,其目的相当于通过点群中心模拟水位过程线,对波浪进行过滤。通过公式中参数的调整,可以试算出最佳滤波参数,进而应用于受测站特性影响的不同的波浪。波浪处理只是对测站的波浪幅度进行了缩小,将波浪对水位真值的影响降低,为数据精简提供准备,滤波后的数据在原有数据的基础上进行平滑,符合水位变化的连续性原理。

2.2数据精简

波浪处理并不能精简数据,仍不能解决数据量偏大的问题。对数据的精简处理应符合《水位观测标准》4.1.3的规定:“水位的观测应能测到完整的水位变化过程,满足日平均水位的计算,各项特征值的统计、水文资料整编和水情拍报的要求。在峰顶、峰谷、水位过程转折处应布设测次…。”

2.2.1滑动平均精简

滑动平均的基本原理仍是采用水位的连续性原理,假定5分钟采样间隔为定值。如图1:

图1滑动平均精简算法示意图

(3)

(4)

——时刻计算的水位平均值,m;

——-1时刻波浪处理后的水位真值,m

——时刻水位真值与计算的水位平均值误差的绝对值,m

实际应用中,给定的阈值,超过此阈值的将保留,不超过此阈值范围的水位点据将过滤。滑动平均算法虽然能起到过滤多余的水位点据,但当设置的阈值偏大时,会将水位变化过程的峰顶、峰谷也进行了精简,这不符合相关规定;当设置的阈值偏小时,能控制水位变化过程的峰顶和峰谷,但在实际应用中,点据仍然较为密集,控制在整编程序能接受的数据量范围仍十分困难。

图2 K值递推精简算法示意图

2.2.2 K值递推精简

设K为两点之间连线的斜率,其计算表达式:

(5)

将以上公式进行变换得:

(6)

采用K值和下一时间点代入公式(6),推算的水位与真值差值为,则有:

= (7)

根据图2所示,将与点根据(5)公式计算出K值,并作为K值初始值;然后根据(6)公式推算出,给出误差阈值,如0.02m,当推算值与真值在此范围内时,则可舍弃,继续根据n公式计算,当误差超过阈值时,则认为不可舍弃,必须摘录,重新采用与计算K值,推算T5、T6时刻的Z值,依次类推…,摘录点据将必然包含上图中的Z3、Z5和Z7。

通过以上算法,既可解决峰顶和峰顶的漏摘问题,又能完美表现水位的变化过程,同时数据量控制在整编程序能够接受的合理范围内。

为了对以上过程的更深入理解,给出VB计算程序代码:

i = 0 ‘计数器

j = 2 ‘计数器

‘将第一个时间赋值给T0

‘将第一个水位赋值给Z0

k0 =(Z1 –Z0)/(T1-T0)

Do Until i + j >num num为数据总数

Zj(i + j)=(T(i+j)- T0)* k0 + Z0

If Zj(i + j)-Z(i + j)<= 0.02 Then

j = j + 1

Else

k0 =(Z(i + j)– Z(i + j - 1)/(T(i + j)– T(i + j - 1))

T0 = T(i + j - 1)

Z0 = Z(i + j - 1)

‘摘录T(i + j - 1),Z(i+ j - 1)

i = i + j

j = 1

End If

Loop

3、应用实例展示

3.1波浪处理实例

为了验证波浪处理效果,采用樊口(大闸下)站2013年的水位数据进行展示。樊口(大闸下)站水位观测断面设在距离大闸下游130m处,在其下游约1km处与长江相连,水位在大闸开闸期和长江洪水期受波浪影响显著,波峰波谷变幅在0.05~0.40m之间。经过波浪处理后的效果如图3,可以明显看到,处理的水位过程线通过点群中心,波浪幅度在0.05cm以内。

图3 受波浪影响的水位脉动处理后的效果

3.2平滑精简处理实例

為了验证平滑处理效果,采用龙港站水位数据进行展示。图4为龙港站2013年一次洪峰的水位过程线。经过平滑精简处理后,全年数据量已大幅度减少到1879组,查看其它位置后发现数据存在漏摘洪峰和峰谷现象。

图4龙港站水位过程滑动平均精简效果

3.3 K值递推精简实例

仍然采用龙港2013年的资料为例,如龙港站2013年另一次洪峰的水位过程线,通过K值递推精简后的数据效果,如图5。

图5 K值递推精简处理后的效果

4、数据处理系统简介

4.1数据源

水文信息化将大量的原始数据,通过采集、传输后最终存储在数据库服务器中。因此,数据库服务器存储的水文数据便是数据处理系统的数据源。

要实现对数据的处理,首先是获取数据。可以通过两种方式,一是在服务器中采用查询系统,以文件存储的方式获得;二是通过局域网远程连接数据库获得。

4.1.1从文件中导入数据

在某些地区水文数据库未接入局域网或经常断网,要获取数据可通过在数据库中查询后以文件的方式得到。因此,处理系统应具有从文件导入数据功能。

4.1.2从数据库中导入数据

信息化采集的最终数据均存储在数据库中,从数据库中直接获取数据十分便捷和高效,可以避开重复和繁琐的人工数据下载工作。如图6:

图6 从数据库中导入数据

4.2数据处理

数据处理是系统的最主要部分,将原始水位数据点绘为过程线,通过波浪处理、平滑处理和K值递推平滑精简算法,一步步处理成用户满意的数据结果。处理过程都可以数据处理界面直观判断,当出现不满意的效果时,可以通过调整不同的参数,直到达到理想的处理效果。

数据处理效果的好坏是由三种算法相互协调配合完成的,其中波浪处理是基础。图7是数据处理界面。

4.3数据存储和输出

在处理程序窗口中,处理完成的数据即时显示在表格中,当用户处理的数据达到满意的效果后,点击保存按钮,数据将保存在系统中。通过数据输出功能,程序将连接本地的整编数据库,并将数据传入,打开整编程序后,可以直接进行水位整编计算。

5 结论

根据水位观测标准和长江委《南方片资料整编程序》的要求,水位信息化数据必须经过处理后方能开展整编工作。对信息化水位的处理必须遵循两个原则,一是摘录的水位必须控制水位变化的转折点,能够完整反映水位的变化过程,二是必须满足资料整编程序对数据量的上限规定。

图7 数据处理界面

通过探讨水位信息化数据处理的波浪处理、数据平滑精简处理和K值递推精简处理的算法,可以得出如下结论:

(1)波浪处理是进行精简处理的基础,为数据精简提供更为接近真值的水位数据。

(2)数据平滑处理算法在参数阈值设置较小时,能完整地描述水位的变化过程,数据量仍然偏大,参数阈值设置较大时,存在漏摘峰顶和峰谷现象;要实现两者均满意的效果较为困难。

(3)K值递推精简处理算法更为合理,在波浪处理的基础上能够达到精简数据和控制水位变化过程的目的。

(4)以上三种处理同时使用,处理效果更合理,效果更理想,完全能够适应各类水位站水位数据特性,从而达到要求。

(5)通过可视化编程,实现水位信息化数据从获取、处理和输出全过程的自动化,大量提高数据处理的效率

参考文献:

[1]中华人民共和国国家标准《水位观测标准》GBJ 138-90

[2]中华人民共和国水利行业标准《水文资料整编规范》SL247-2012,Code for hydrologic data processing.

上接第304页

斯坦福大学的Ruland教授所证实,他使用的视距为10.98m,在过度调焦25cm后,他也得出了与Woschitz博士相类似的结果。

5 使用数字水准仪的若干建议

(1)机内温度与环境温度平衡。数字水准仪采取了高精度的自动读数方式,与同等级的光学水准仪相比,其光机性度大大降低。

(2)为消除补偿器的剩余误差,应采用正确的观测顺序。

(3)避免使用特殊视距进行水准测量。

(4)保持条码尺清洁。

(5)进行水准测量时,严格照准条码分划线的中心位置。

(6)正确对条码尺调焦,使图像传感器接收到清晰的图像。

(7)避免遮挡望远镜视场内的条码。

(8)避免使用条码尺底部和顶部进行测量。

(9)条码尺应有足够的亮度。

(10)定期更新数据处理软件。

(11)定期检定仪器。

(12)精心保护条码尺。

(13)对测量结果施加必要的改正。数字水准仪的测量结果Hm还需要加上测量系统的尺度改正R和条码尺因瓦带的温度系数α改正后,才能够获得最后结果Hc,其改正公式为:

Hc=Hm·[1+R+α·(T-T0)](2)

式中:Hc——改正后的水准测量结果;

Hm——数字水准仪的测量结果;

R——数字水准仪测量系统的尺度改正系数,应注意与传统因瓦水准尺所定义的米真长改正数相区别;

α——条码尺因瓦带的温度系数;

T——水准测量时因瓦带的温度;

T0——参考温度,T0=20℃

6 结语

综上所述,数字水准仪是利用电子工程学原理自动进行观测,并自动记录每一个观测值,进行一般的平差计算的新一代仪器。为了得到精确的测量值,在使用数字水准仪时需要注意某些细节。

参考文献:

[1]梁振华;尹建涛;谢宏全.数字水准仪i角的误差检校方法与误差分析[J].煤矿安全.2013(07)

[2]龚真春;李伟峰;薛宠.数字水准仪测量精度分析及其在工程中的应用[J].测绘与空间.2012(02)

[3]杨璐璐;;成月佳;;王剑.数字水准仪补偿误差的检定与分析[J].江苏省测绘学会2011年学术年会论文集.2011(11)

上接第305页

变化情况,一旦出现不利变化要及时采取措施,防范风险,主张和维护自己的合法权益。

(三)租赁资产的风险管理与控制

金融租赁是以物为载体的融资行为,租赁物购买价格虚高,出现质量问题,在运输、安装和使用过程中造成的减损甚至灭失风险等都会影响承租人偿还租金的履约能力,对金融租赁合同的正常履行带来不利影响,因此金融租赁公司应当与专业厂商建立合作关系,减少不必要的中间环节,了解市场价格行情及专业设备的选型、工艺匹配的合理性。对租赁资产投保运输、盗抢等险种,在合同条款中,增加对租赁资产造成破坏、灭失风险的处罚条款和保障措施,对租赁资产进行现场管理和定期现场检查,避免资产的转移和藏匿。

五、小结

现代的金融租赁是一种将推销与融资结合起来;将融资与贸易结合起来;将策划与开发结合起来:将投资与管理结合起来;将人才与物资结合起来:将灵活与创新结合起来的一种综合性服务贸易。中国金融租赁业已经实现了较快发展,在社会融资总量中所占比例越来越大。随着全社会更加巨大的投资需求,金融租赁业务遇到了前所未有的机遇期。只要防范好各方面风险,采取有效的控制措施,相信在不远的将来,银行系金融租赁公司的金融租赁之路将会走的更远。

参考文献:

[1](英)T.M.克拉克.租赁.罗真端,李增德,汤修珍译.物资出版社,1983,23-25

[2]李命志等译.国际租赁完全指南.北京大学出版社,2007.

作者简介:

张弨,女,天津财经大学在职研究生在读,现任职于中国农业银行天津和平支行。

上接第306页

扎固定,每道加箍处设绑扎点,纵筋底部应齐平;钢筋笼入沉放过程中不宜反复向下冲撞和扭动;下部注浆导管应沉放到底,严禁悬吊;每次注浆施工前应及时通报监理工程师旁站,在监理工程师允许注浆时方可施工;经常检查巡视待注浆桩导管留口的保护情况;后注浆施工操作应严格按后注浆施工工艺要求实施,遇特殊情况及时上报并如实记录。

质量检验:旋挖钻孔灌注桩施工所用原材料(水泥、砂石、钢筋等)的质量要求必须符合现行国家标准的规定;钢筋笼制作所用的钢筋规格、焊条规格、焊接质量、主筋及箍筋的制作偏差等均应符合设计及有关规范的规定;成孔前应进行桩位复核,桩位的放样允许偏差10mm;成孔深度必須达到设计要求,孔深允许偏差为+30mm;桩身砼强度应符合设计要求,施工过程中按有关要求留取试件,由具有相应资质的检测试验单位出具试验报告。

施工监测、桩位移的检测:地表开裂状态的检测;附近建筑物和重要管线设施的变形测量和裂缝观察。质量验收:成孔后,由建设单位、监理单位和施工单位共同按设计要求进行工程质量验收,认定合格后,予以签字,验收时施工单位应做好相关资料。

9 结论

综上所述,旋挖机在砂土地质条件下可以针对复杂的地质结构进行灵活的成孔工艺,这样就可以保证成孔的速度和安全,在本工程中应用中获得了较好的成果,与其他工艺相互配合保证了基础施工的质量。另外,要保证灌注桩的施工质量,钢筋笼外笼护筒技术是首选的办法,选择先进的设备,合格的施工人员,各部门高度协调全面配合,做到精益求精,才能保证结构工程质量。

参考文献:

[1]王万文.钻孔机旋挖取土成孔法施工工艺研究J].交通标准化.2012(05)

资料数据库系统 篇12

关键词:气象数据,数据库,存储过程

气象资料是地球系统科学数据的重要组成部分,是国家重要的公益性资源,具有重要的应用价值。随着气象现代化的建设,目前各级气象部门的业务及服务平台都已基本建成,实现了气象资料的自动传输。过去大量的气象资料通常以各类文本方式存储于FTP服务器中,不利于气象资料的查询、统计与使用,各用户使用时工作量大,而且容易发生错误。因此,从实际工作出发,针对全省各类气象资料建立一个统一的SQL Server 2005的数据库,利用SQL数据库强大的管理、查询、统计与存储功能,来为气象业务和服务提供先进、及时的气象数据。

1 数据库资料的获取

我省气象探测资料,主要是CAWS600系列的大监项目有人值守自动气象站和以两要素、四要素、六要素组成的无人值守中尺度加密站组成。其中,CAWS600系列的自动气象站,包含的要素最全,其传输是通过FTP方式向省局服务器传输国家局定义好的文本文件。各类中尺度无人值守加密站,则是通过GPRS方式向省局中心站服务器传输UDP数据包,中心站服务器端需要加载UDP包的接收程序进行获取和解析。

1.1 CAWS600型自动气象站资料的获取

CAWS600型自动气象站向中心站传输实时的Z文件,文件名中包含区站号和观测时间以及文件的类型。我们在中心站FTP服务器中开发一个Win32的文件分捡程序,对收到的各类文件进行分类,分别复制到一个我们自定义的一个文件夹内,等待入库程序的处理。

1.2 中尺度加密站资料的获取

中尺度加密站的资料,我们需要在中心站服务器端加载一个开发好的Win32程序来截取UPD数据包,然后根据已经定义好的规则进行解析,生成一个一个的文本文件,复制到另一个文件夹中,等待入库程序的处理。

2 SQL Server 2005数据库的介绍

SQL Server 2005是一个全面的关系型数据库平台,是由Microsoft公司开发的,使用集成的商业智能工具提供了企业级的数据管理。数据库引擎为关系型数据和结构化数据提供了更安全可靠的存储功能,使用户可以构建和管理用于业务的高可用和高性能的数据应用程序。

2.1 SQL Server数据库的特点

2.1.1 高可用性

SQL Server的失败转移集群和数据库镜像技术确保企业向员工、客户和合作伙伴提交高度可靠和可用的应用系统。

2.1.2 管理工具

SQL Server引进了一套集成的管理工具和管理应用编程接口(APIs),以提供易用性、可管理性及对大型SQL Server配置的支持。

2.1.3 安全性增强

SQL Server旨在通过数据库加密、更加安全的默认设置、加强的密码政策和细化许可控制、及加强的安全模型等特性,为企业数据提供最高级别的安全性。

2.1.4 可伸缩性

SQL Server可伸缩性的先进性,包括表格分区、复制能力的增强和64位支持等。

2.2 存储过程的应用

2.2.1 存储过程的概念

存储过程是由SQL语句和流控制语句写成的过程程序,经数据库编译和优化后存储在数据库的服务器中,可被其它程序调用执行,允许多个用户访问相同的代码。它提供了一种集中一致的实现数据完整性逻辑的方法。可用于实现频繁使用的查询、业务规则和被其它过程使用的公共例行程序。

2.2.2 存储过程的用途

存储过程的用途是相当强大的。从返回SELECT语句的结果并用于用户报表到执行复杂的数据有效性校验都可以用存储过程。

2.2.2. 1 模块化的程序设计

在创建了一个存储过程后,它就会存储在数据库中并能通过应用程序多次调用它。这些过程能封装数据库功能,也能被应用程序代码独立地修改,只要应用程序知道被返回的数据将要做什么。该模块可以被很多用户重用,也可以被很多用户共享。因此,存储过程可以增强代码的重用性和共享性,加快应用的开发速度,提供开发的质量和效率。

2.2.2. 2 快速执行

当存储过程被编译并存储在高速缓冲中时,能以相当高的效率执行。因为第一次执行后的存储过程会在缓冲区中创建查询树,使第二次执行时不用进行预编译,从而加快速度。

2.2.2. 3 减少网络通信量

因为存储过程存储在服务器上,并在服务器上运行。只有触发执行存储过程的命令和返回的结果才在网络上传输。客户端无需将数据库中的数据通过网络传输到本地进行计算,再将结果数据通过网络送到服务器。所以,可以减少网络流量。

2.2.2. 4 使用存储过程保证安全性

因为在进行用户授权时,可以不授予用户访问存储过程中涉及的表的权限,而只授予访问存储过程的权限。这样,既保证了用户通过存储过程操纵数据库中的数据,又保证了用户不能直接访问与存储过程相关的表,从而保证表中数据的安全性。

3 在Delphi中使用存储过程的方法

在Delphi中使用存储过程的实现步骤:把TADOStoredProc放到窗体上,设置参数连接到MS SQL Server数据库和ProcedureName参数,指定存储过程名,在代码中设置存储过程的输入参数,执行存储过程并获取返回的数据。

通过调用TADOStoredProc控件的parambyname方法,设置好所有的输入参数,再调用open方法执行存储过程。如果存储过程返回参数,同样用parambyname方法获取参数值。如果返回数据集,则用访问数据集的TFields的方法获取各记录。如以下代码所示:

4 数据库的设计

由于自动气象站的数据量庞大,每分钟一个数据量,对于这样的海量数据如何存储,就成为设计的难点之一。设计的数据库,要求使用方便,利于统计与存储,并且需要有较高的效率。

4.1 台站参数表的建立

列举台站参数表中的部分字段值如下:

其中,将[StationID]字段设为索引字段和主键。索引能大大加快数据的检索速度,主键可以确保执行数据更新、删除的时候不会出现错误。

4.2 资料库的建立

自动气象站的资料,按年份建立不同的数据库,每年一个库,这样的优点是库不会无限制的增大,也利于数据库的存储与转移。在库中,再通过分类建立各数据表。结构如图1所示。

4.3 资料库数据的查询

数据库的查询,通过调用在AhGis库中的返回结果集的存储过程来进行,不同的时间段,通过对时间的解析来查询不同的数据库表。存储过程的调用,通过执行EXECUTE语句来实现,执行后用CLOSE语句来关闭。执行的结果通过ASP方式显示于网页中,或者被其他用户调用。显示结果如图2所示。

5 结束语

本设计项目中,通过合理地设计SQL Server 2005数据库,解决了数据库的存储,并提高了数据查询的效率。利用SQL数据库强大的管理、查询、统计与存储功能,来为气象业务和服务提供先进、及时的气象数据。

参考文献

[1]Mike Gunderloy, Joseph L Jorden, David W Tschanz, 等.SQL Server2005从入门到精通[M].北京:电子工业出版社, 2006.

[2]王能斌.数据库系统原理[M].北京:电子工业出版社, 2000.

[3]中国气象局.地面气象观测数据文件和记录簿表格式[M].北京:气象出版社, 2005.

[4]Charlie Calvert.Delphi4编程技术内幕[M].北京:机械工业出版社, 1999.

上一篇:汽车保险理赔毕业论文下一篇:可复用测试用例库