历史类数据库
㈠ 实时/历史数据库和关系型数据库的区别
实时数据库
实时数据库是数据库系统发展的一个分支,它适用于处理不断更新的快速变化的数据及具有时间限制的事务处理。实时数据库技术是实时系统和数据库技术相结合的产物。实时数据库最起初是基于先进控制和优化控制而出现的,对数据的实时性要求比较高,因而实时、高效、稳定是实时数据库最关键的指标。
早期实时数据库的概念即我们所说的内存数据库,其相当于数据中枢的作用,将厂级相互孤立的DCS数据有效整合起来,在厂级应用中某个DCS的数据可为其他DCS的工艺算法提供数据支持,其有效解决了数据孤岛问题,拓展了DCS的功能,因而,实时数据库在先进控制和优化控制中起到了尤为重要的作用。
但早期的内存数据库并不能有效的解决实时数据的细时间粒度压缩存储,工业模型对象数值属性高度分类抽象,大容量数据的高效实时检索及处理等关键问题。而实时数据库在数据通信、数据组织、数据存储、数据检索、数据访问、数据处理、数据展现等方面的专业化及产品化,为构建基于大容量实时历史数据之上的分析应用提供了便捷稳定的数据支撑,使应用系统可以从更高更深层次充分利用宝贵的生产实时历史数据。
目前,实时数据库已广泛应用于电力、石油石化、交通、冶金、军工、环保等行业,是构建工业生产调度监控系统、指挥系统,生产实时历史数据中心的不可缺少的基础软件。
关系数据库
关系数据库,是指采用了关系模型来组织数据的数据库。关系模型是在1970年由IBM首先提出,在之后的几十年中,关系模型的概念得到了充分的发展并逐渐成为数据库架构的主流模型。简单来说,关系模型指的就是二维表格模型,而一个关系型数据库就是由二维表及其之间的联系组成的一个数据组织。关系型数据库有着以下特点:
容易理解:二维表结构是非常贴近逻辑世界的一个概念,关系模型相对网状、层次等其他模型来说更容易理解。
使用方便:通用的SQL语言使得操作关系型数据库非常方便,程序员甚至于数据管理员可以方便地在逻辑层面操作数据库,而完全不必理解其底层实现。
易于维护:丰富的完整性(实体完整性、参照完整性和用户定义的完整性)大大降低了数据冗余和数据不一致的概率。
目前,关系数据库广泛应用于各个行业,用于构筑管理信息系统,如ERP,MIS,EAM等重要系统,是构建管理信息系统,存储及处理关系数据的不可缺少基础软件。
两种数据库之间的一些差别
? 数据的组织方式
实时数据库可以简单地理解为它是这样的数据库:由测点信息库、实时数据库、历史数据库三个数据库组成。
测点信息库含有一个测点基本信息字段的一张表,这个表以测点标签作为关键字,对应一条测点基本信息的记录包含一条测点的基本配置信息,如压缩偏差,例外偏差,测点描述等。用户可从此数据库中查询测点的基本信息。实时数据库是内存快照数据库,反映了生产实时数据的时间戳、数值、质量等秒级变化。用户可从此数据库中查询生产实时数据的实时数据值(值,时间戳,质量)。
历史数据库是含有一个以测点名称字段和时间字段为关键字的一张表,这张表的另外的一个重要的字段就是数值字段,用来存储测点的采集值,除了这些字段,还可以包含数据的状态,数据质量字段等。随着时间的变化,不断地将实时数据库中的实时数据进行压缩过滤,并更新磁盘历史数据文件中的表里的数据。用户可从此数据库中查询生产实时数据的历史样本值或历史插值数据。
而对于关系数据库则是根据各个实体之间的关系来设计数据表的。
? 系统稳定性
由于实时数据库记录的是和生产相关的数据,并且和时间相关,所以要求其必须能够长时间稳定运行,否则就会导致数据的丢失。目前一些实时数据库已经具有缓存数据的功能,当数据采集机器和实时数据库服务器之间通信出现故障时,可以把采集到的数据缓存到本地,当通信恢复正常后,把缓存的数据写入到实时数据库服务器中,极大地保证了数据的完整性。
而对于关系数据库来说,如果不是应用在关键业务,比如金融证券等,对稳定要求一般来说不是很高。
? 数据来源
针对不同的类型的企业,实时数据库的数据的来源也不尽相同。主要来源有DCS控制系统,数据采集系统(SCADA),手工录入,关系数据库等。这些数据的主要特点就是都和生产直接相关,并且大多数的数据都是数值型数据,比如设备或介质的压力、温度、流量、位置、电压、电流、功率等。
关系数据库的来源更加多样。除了记录数值数据外,也记录描述性的数据,如姓名家庭住址等信息。
一般来说,实时数据库的数据来源一般是设备。而关系数据库的数据来源一般是来自于人。
? 数据压缩
实时数据库因为存储的数据量非常大,比如要采集10000点的数据,每5秒采集一个数据,假设采集的都是32位浮点数,那么一天的数据量(仅数值属性不含时间属性)就是10000*(60/5)*60*24*4/1024=675000K,大约675M的数据。由此可见数据量的庞大,而且占用磁盘的空间大,对数据的访问速度也会降低。因此各个数据库厂家大都开发出自己的数据压缩算法,对数据进行压缩。常用的压缩算法可以分为三类:无损压缩,有损压缩,二级压缩。其中,无损压缩一般以通用压缩理论为基础,采取huffman等经典的压缩算法;而有损压缩则更多地考虑了工业实时数据的特征,而采取的一些特殊舍点算法;二级压缩技术,则是同时利用了这两种数据压缩技术。实时数据库的无损压缩以通用压缩理论为基础。目前比较著名的有损压缩算法,有常用的旋转门压缩算法,以及一些变通压缩算法(如在旋转门算法基础上改用二次均方差作为偏差比较,以提高数据还原精度),这些算法原理都比较简单。
关系型数据库则不会对数据进行压缩。
? 数据的访问方式
实时数据库一般有以下3种方式访问数据
1) 使用自己的API,这种方式效率最高也最简单。
2) 使用ODBC或者OLEDB,这种方式不大常用,主要是给那些刚刚接触实时数据库或者以前对关系型数据库了解的用户使用的。
3) 使用Opc方式访问数据。Opc是一种广泛使用的工业标准,虽然效率不高,但是目前很多的厂家都支持。
关系数据库访问数据的方式是通过结构化查询语言(SQL)来访问的。
? 应用领域
过程控制系统是实时数据库系统最重要的应用领域之一.在生产装置运行过程中,实时数据库实时记录采集装置的运行数据,随时掌握装置的运行状况,并通过对生产过程的关键数据的监控和分析,对出现的问题及时处理,使生产的运行状态保持安全平稳,当生产状况发生变化时可以及时作出反映;通过对影响原材料用量的过程监视以及对水电汽的用量的监测分析,可以及时发现问题,特别对生产调度人员来说,可以及时地平衡物料供应,减少单耗,提高经济效益。
而关系数据库的应用则广泛的多,在各行各业基本都可以见到。大多数应用在管理方面,比如管理信息系统(MIS),客户关系管理(CRM)等。
? 客户端工具
实时数据库由于目前并没有统一的标准,各个实时数据库客户端工具基本上都是由厂商自己提供的,主要是数据展示工具,组态工具,管理工具等。因为主要是面向流程工业,所以实时数据库都带有组态和发布工具。
关系数据库因为应用范围广泛,客户工具相当丰富。除了厂商提供的工具外,第三方软件厂商也可以为关系数据库厂商开发客户端工具。
两种数据库之间的集成趋势
虽然实时数据库和关系数据库有着很多的不同,但是目前实时数据库和关系数据库集成的趋势越来越明显。将生产管理信息系统中使用的关系数据库和实时数据库集成到一起,可以同时满足控制和管理的要求,真正成为管理控制一体化的平台。例如,目前大多行业均利用实时数据库与关系数据库作为基础数据库软件构建监控中心及数据中心的基础数据库。其中实时数据库处理并存储生产实时数据,关系数据库处理并存储业务关系数据。
㈡ 数据库的发展历史分哪几个阶段
数据库(Database)是按照数据结构来组织、存储和管理数据的仓库,它产生于距今六十多年前,随着信息技术和市场的发展,特别是二十世纪九十年代以后,数据管理不再仅仅是存储和管理数据,而转变成用户所需要的各种数据管理的方式。数据库有很多种类型,从最简单的存储有各种数据的表格到能够进行海量数据存储的大型数据库系统都在各个方面得到了广泛的应用。
数据管理技术的发展经历了四个阶段:人工管理阶段、文件系统阶段、数据库阶段和高级数据库技术阶段。——常识计算机篇。
㈢ 怎么查询SQL数据库的历史数据,并调用出来做报表
select * from 表名 这事查找该表的所有数据
select * from 表名 where tdate='日期'查找莫一时间的数据,你的问题描述不清楚呀,如果调出来,可把查出来的数据复制出来即可
㈣ 数据库发展历史是什么
数据库对于普通人来讲
就可以简单理解为有固定格式的数据集合,
专门为解决某专一类数据保存和属计算问题而存在的,
就像单位用的各种各样的报表和单据,
只不过软件会帮你保存管理这些单据和报表在计算机上,
帮你计算求和等等操作 生成你想要的各种数据报告。
利用数据库软件和计算机的高速运算特性,
可以大大提高工作效率和正确性。
减少工作时间成本和人力成本。
没有他们也可以,但是你不得不用手工的办法处理数据,
不管数据量多少都一样。
㈤ 历史学有哪些常用的网站/数据库
1. IBM 的DB2作为关系数据库领域的开拓者和领航人,IBM在1977年完成了System R系统的原型,1980年开始提供集成的数据库服务器—— System/38,随后是SQL/DSforVSE和VM,其初始版本与SystemR研究原型密切相关。
㈥ 历史学科关于中、英文研究著作的数据库主要有哪些
《国富论》。作者亚当·斯密(Adam Smith, 1723-1790)是经济学的主要创立者。他于 1723 年出生在苏格兰的克科底,青年时就读于牛津大学。
《我们赖以生存的隐喻》作者为乔治·莱考夫(George Lakoff),美国加州大学伯克利分校语言学系教授,著名语言学家,认知语言学的创始人。本书作为当代语言学经典著作,是公认的认知语言学隐喻系统研究的开始,在国外隐喻研究中具有很大影响。
《科学革命的结构》托马斯•库恩的《科学革命的结构》(The Structure of Scientific Revolutions)算得上是二十世纪学术史上最有影响的著作之一。
《想象的共同体》一书的横空出世,为民族主义研究提供了新的理论范式。这个范式努力避免了「欧洲中心」或「西方中心」的观点,把常被人忽略的美洲,东南亚甚至非洲囊括入其宏大的理论体系。
《规训与惩罚》作者:米歇尔・福柯,20 世纪极富挑战性和反判性的法国思想家。青年时期就学于巴黎高等师范学校,以后曾担任多所大学的教职。1970 年起任法兰西学院思想系统史教授,直至逝世。
《正义论》一书,洋洋洒洒 40 余万字,实际上是一本论文集。美国哈佛大学教授约翰·罗尔斯的《正义论》一书,自 1971 年问世后(罗尔斯针对该书出版后的批评意见,1999 年重新做了修订),在西方国家引起了广泛重视,被视为第二次世界大战后西方政治哲学、法学和道德哲学中最重要的著作之一,将被列为历史经典名著之林。
㈦ 历史数据库整合
1995年至1997年,由航遥中心牵头,省局参加,对过去由航遥中心和省航测队负责完成的全国航磁资料(模拟记录)进行了数字化,用FoxPro(Windows版)建立了省级航磁数据库。2000年,航遥中心在Windows系统上,采用SQL Server数据库技术建立了航空物探调查工作程度数据库。2000年至2002年,航遥中心完成近万份航磁查证异常登记表和检查卡片的相关信息整理工作,基于MapGIS平台建立了航空物探异常属性数据库。2002年,航遥中心对我国2000年以前的航电校正后的数据进行整理,并在Windows系统上,采用SQL Server数据库技术建立了数据库。这4个数据库的建立为航空物探数据资料信息化管理奠定了基础。
随着信息技术快速发展,当时可能较先进数据库技术和软件开发技术现已过时,每个数据库的管理软件只能管理当时确定的数据,无法扩展。因此,用户使用不同的数据库要分别安装其数据库管理软件,很不方便。各个数据库建设所采用的技术不同,也没采用信息化标准,很难统一集成。
在本项目研究开始之初,就将上述数据库纳入本项目研发工作之列。在信息系统需求调研时,又进一步对其存在问题进行调研和分析,确定了将原省级航磁数据库数据整合到本系统航磁校正后数据数据库、原航空物探调查工作程度数据库整合到本系统项目概况数据库、原航空物探异常属性数据库(仅有航磁异常)整合到本系统航空物探异常数据库、原全国航电数据库整合到本系统航电校正后数据数据库的整合方案。本信息系统的数据库表包含该4个数据库表中的全部信息(但不一定是在同一张库表中,可能原来一张表被拆分到新库的几张表中,这是由本信息系统数据库结构设计确定的)。采用原数据库软件导出其数据,按本信息系统要求进行信息标准化处理,再使用本信息系统采集软件导入到本系统相应数据库表中,实现原数据库整合和统一管理。
㈧ NBA历史数据库
NBA历史上单场比赛得分之最
1983年12月13日,底特律活塞队186: 184战胜了丹佛金块队,创NBA单场比赛得分最。
b.NBA历史上夺冠次数最多球队
NBA50年历史上,夺冠次数最多的球队是波 士顿凯尔特人队,共获16次冠军。其次为湖人队,获11次冠军。
c.NBA球员身材最高和最矮者
NBA历史上身材最高的球员是前华盛顿子弹 队的曼纽特
㈨ 国内五大论文数据库
国内主要有5大期刊数据库
一、中国知网提供的《中国学术期刊(光盘版)》
也称中国期刊全文数据库由清华同方股份有限公司出版。收录1994年以来国内6 600种期刊,包括了学术期刊于非学术期刊,涵盖理工、农业、医药卫生、文史哲、政治军事与法律、教育与社会科学综合、电子技术与信息科学、经济与管理。收录的学术期刊同时作为“中国学术期刊综合评价数据库统计源期刊”。但是收录的期刊不很全面,一些重要期刊未能收录。
二、中国生物医学文献数据库(CBMDISC)
由数据库是中国医学科学院信息研究所开发研制,收录了自1978年以来1 600余种中国生物医学期刊。范围涉及基础医学、临床医学、预防医学、药学、中医学及中药学等生物医学的各个领域。
三、中文生物医学期刊数据库(CMCC)
由中国人民解放军医学图书馆数据库研究部研制开发。收录了1994年以来国内正式出版发行的生物医学期刊和一些自办发行的生物医学刊物1 000余种的文献题录和文摘。涉及的主要学科领域有:基础医学、临床医学、预防医学、药学、医学生物学、中医学、中药学、医院管理及医学信息等生物医学的各个领域。并具有成果查新功能医学全在线
四、万方数据资源系统(China Info)
由中国科技信息研究所,万方数据股份有限公司研制。该数据库收录的期刊学科范围广,包括了学术期刊于非学术期刊,提供约2 000种的电子期刊的全文检索。被收录的学术期刊都获得了“中国核心期刊(遴选)数据库来源期刊”的收录证书。个别期刊甚至将“遴选”改成“精选”,或者干脆去掉。很多作者因此误以为这就是核心期刊。
五、维普数据库
也称中文科技期刊数据库,维普科技期刊数据库,由中国科学技术信息研究所重庆分所出版。收录了1989年以来我国自然科学、工程技术、农业科学、医药卫生、经济管理、教育科学和图书情报等学科9 000余种期刊,包括了学术与非学术期刊。收录期刊数量很大,但不足之处是部分国家新闻出版总署公布的非法期刊也被收录了。
一般的,学术期刊都能进入至少1个国内期刊数据库。期刊据数据库[3]不是期刊的评价体系,对科研处的期刊性质评价也就缺乏足够的意义,故不宜作为期刊性质评价的依据。
1、万方数据
万方数据提供中国大陆科技期刊检索,是万方数据股份有限公司建立的专业学术知识服务网站。隶属于万方数据资源系统,对外服务数据由万方数据资源系统统一部署提供。
2、全国报刊索引
收录全国包括港台地区的期刊8000种左右,月报道量在1.8万条以上,年报道量在44万条左右,书本式用户有3500多家,现又出版光盘数据库。反映了中国政治、经济、军事、科学、文化、文学艺术、历史地理、科技等方面的发展情况,提供了国内外最新学术进展信息。
该索引是我国收录报刊种类最多,内容涉及范围最广,持续出版时间最长,与新文献保持同步发展的权威性检索刊物,也是查找建国以来报刊论文资料最重要的检索工具。
正文采用分类编排,先后采用过《中国人民大学图书分类法》和自编的《报刊资料分类表》,1980年起,仿《中国图书馆图书分类法》分21类编排,1992年全面改用《中国图书资料分类法》(第三版)编排,2000年开始用《中国图书馆分类法》(第四版)标引,计算机编排。
在著录上,《全国报刊索引》从1991年起采用国家标准——《检索期刊条目著录规则》进行著录,包括题名、著译者姓名、报刊名、版本、卷期标识、起止页码、附注等项。同时,“哲社版”采用电脑编排,增加了“著者索引”、“题中人名分析索引”、“引用报刊一览表”,方便了读者的使用。
3、超星数字图书馆
为目前世界最大的中文在线数字图书馆,提供大量的电子图书资源提供阅读,其中包括文学、经济、计算机等五十余大类,数十万册电子图书,300 万篇论文,全文总量 4亿余页,数据总量30000GB,大量免费电子图书,并且每天仍在不断的增加与更新。
覆盖范围:涉及哲学、宗教、社科总论、经典理论、民族学、经济学、自然科学总论、计算机等各个学科门类。本馆已订购67万余册。
收录年限:1977年至今。
4、维普资讯
维普资讯是科学技术部西南信息中心下属的一家大型的专业化数据公司,是中文期刊数据库建设事业的奠基人,公司全称重庆维普资讯有限公司。目前已经成为中国最大的综合文献数据库。从1989年开始,一直致力于对海量的报刊数据进行科学严谨的研究、分析,采集、加工等深层次开发和推广应用。
5、中宏数据库
中宏数据库由国家发改委所属的中国宏观经济学会、中宏基金、中国宏观经济信息网、中宏经济研究中心联合研创。是由18类大库、74类中库组成,涵盖了九十年代以来宏观经济、区域经济、产业经济、金融保险、投资消费、世界经济、政策法规、统计数字、研究报告等方面的详尽内容,是目前国内门类最全,分类最细,容量最大的经济类数据库。
㈩ 数据库的发展简史
可以参考 PingCAP 的 介绍, 同事了解下 国内分布式数据库排行榜一的 TiDB. 有更多问题,可以到 AskTUG 一起讨论,多谢。