用对象数据库引擎探索全球气候变暖问题
[b]大数据：用对象数据库引擎探索全球气候变暖问题[/b]
我们不能把北极塞进关系型数据库里面。这是研究世界各地的冰雪气候的大卫加拉赫在设计一个解答基础性问题的系统时发现的，这个问题就是：“全球变暖是如何影响南极和北极的？”。
加拉赫的研究开始与格陵兰岛的大约66万平方英里的冰层覆盖区域。事实证明，在如今传统的关系型数据库的黄金时代，有一种被人们忽视的技术，利用这种技术能够更好的完成对格陵兰30年的大数据的探测任务。其中包括一天三次的卫星扫描，产生的数据量几乎是PB级规模的任务。这项技术便是将数据作为对象来处理的面向对象的数据库管理系统- 来自于Versant公司的对象数据库引擎。
“这些数据对于Oracle或者传统的关系型数据库来说太过庞大了，很容易在数据装载的时候导致系统崩溃。”位于科罗拉多大学博尔德分校的国家冰雪数据中心（NSIDC）IT服务部经理加拉赫说。为处理那些非常适合表结构的连续性数据的报告和分析而设计的关系型数据库是无法展示陵兰岛上冰的历史变迁过程的。
作为一个经过专业训练的地理学家，加拉赫是这一项目的主要负责人。该项目总投资为60万美元，由国家科学基金会拨款，目的是要建立一个可以处理几十亿比特时序信息（以统一的时间间隔测量的数据序列）的系统，并使这些信息通过互联网可以被世界各地的研究人员获取。加拉赫说，“我们必须转向这样的模式，它能更方便地去分析数据，而不是将数据转成分析所用。”
数据如此庞大，以至于国家冰雪数据中心（及其数据收集合作伙伴，国家航空航天局）只将元数据放在关系数据库中。数据本身存储在目录树下，在研究人员要了解如什么、哪里和何时等关键问题时才会被提取出来——如果研究人员要分析原因的话，那就更费力了。由于文件太大，如果一个研究人员想要知道，例如，冰的反射率，或是反射属性——冰颜色的深浅，反射率的高低或反射变化的快慢，可能要花上好几个星期的时间才能得到想要的数据。（属性是面向对象技术中用来表示持久化数据的专业术语。）
“然后他们还必须写出些什么来整理他们手中的信息。如果他们很幸运，通过运算，才有可能在经费用完之前可以得到一些结果，”加拉赫表示，“我们认为，必须要找到其它的解决办法。”。
[b]被遗忘的面向对象数据库[/b]
IDC负责信息管理及数据集成软件研究的副总裁，Carl Olofson表示，面向对象数据库技术一直被人们误解——甚至在数据库社区中也常常被人们误解——人们认为这种技术已经过时，只局限在一些特殊的领域应用之中。这可能是因为制定收集数据和制作报表的数据库标准的工作重点放在了关系数据库上。
为了充分利用对象数据库，必须建立映射其属性结构的对象模型。“要完成这项工作需要有一定的抽象思维，”Olofson说，“IT公司可能会感到他们并没有时间来进行这样的分析。”。
但是观念是在不断更新的。用对象数据库引擎能够更好地将现在各个企业想通过时间和空间范围追踪的复杂数据和复杂结构的类——例如，社交网络中的人与人之间的关系——进行存入和检索。目前，诸如Versant，GemStone Systems（该公司最近被VMware Inc.收购了）以及Objectivity Inc.这样的供应商正在赢得更多企业和程序员关注的目光。
Olofson表示，“最基本的一点，对象数据库在对大数据领域中建立秩序，同时不丢失任何信息上是十分有用的。”
新的NoSQL技术与此有一定的相关性，也提供了许多便利，但是这些技术缺少用户基础和行业标准。Olofson举了个例子，例如Hadoop擅长数据的初始输入，但是创建某种结构化输出却是它的短板。
[b]能够时间旅行的“数据棒”[/b]
加拉赫表示，对象数据库应用成功的关键在于知道你想要解决的问题。此外，说服已经习惯关系数据库的数据库管理员停止从表的角度来思考也是一大挑战。Gallaher以及小组成员——两个研究生和一位教授（兼职）——想出了一个被他们称作为数据棒的结构。这里面包含了几十亿个像素，作为一个固定区域的整体时间记录观察。
他解释说，“把数据棒看作是由片组成的一个堆，每一片都代表了几个小时，这个堆现在有30英尺高。”以反射率为例，您可以要求系统“告诉你哪些‘片’的颜色比其它片的颜色深，颜色深的片发生了什么情况。如果有了有趣的发现，你也可以要求系统告诉你临近的对象的情况。”
加拉赫表示，“这其中的亮点就是，我们不要把它看作是一个图像，相反，你应该把它看作是一个跨越时间的棒。我们把它看作是一个巨大的3维矩阵。”
出于效率（以及可恢复性）的原因，格陵兰所有的数据棒以五年为一个时间段，包含了多个数据库。加拉赫说：“你可以查询所有的数据库。如果你愿意的话，你可以把这些数据库当作一个“棒”来用”。通过使用VQL, 即Versant查询语言（他认为这一语言对于外部用户类似SQL），了解一段时间的变化就变得相当直接明了。
加拉赫说：“对于我来说，向人们解释最佳的方法就是把数据棒看作是对一个无限时间长度的记录，在这个时间维度上你可以随时随地了解你想知道的情况。”
加拉赫之前在对Hadoop以及类似的技术做了大量的调查之后，他认为Versant数据库能够完成他想要的工作。Versant数据库可以处理他们所需要的任何大小的数据。“我们问的问题包括巨大的区域，繁多的时间点，大量的变量，以及要求在几秒中内得到响应或者被缓存等等，”他又补充道，“现在我们几个小时内所做的事情，以前要花上六个月，这绝不是玩笑。”
用对象数据库引擎探索全球气候变暖问题相关推荐
- 金蝶标准版迷你版 数据库引擎找不到对象MSysDb。请确定对象是否存在,并正确的写出他的名称和路径 帐套损坏。
金蝶打开帐套提示 : 数据库引擎找不到对象MSysDb.请确定对象是否存在,并正确的写出他的名称和路径 帐套损坏. 首先判断就是数据库损坏. 我尝试用ACCESS打开.同样的报错. WINHEX 切入 ...
- 达摩院重要科技突破！空天数据库引擎Ganos解读
简介:Ganos空天数据库引擎是李飞飞带领的达摩院数据库与存储实验室研发的新一代位置智能引擎,采用了平台即服务.多模融合.计算下推和云原生全新处理架构,为政府.企事业单位.泛互联网客户提供移动对象.空 ...
- 连接sql sever2008数据库出现了无法连接到数据库引擎问题解决
出现的问题: 在与 SQL Server 建立连接时出现与网络相关的或特定于实例的错误.未找到或无法访问服务器.请验证实例名称是否正确并且 SQL Server 已配置为允许远程连接. (provid ...
- 第一次接触 SharpHsql(纯C#开源数据库引擎)
在 开源中的灵感之源 的blog上看到这篇文章 开源纯C#轻量级数据库引擎:SharpHSQL 1.0.3.0版本 这篇文章,着实幸福了一阵. 类似的数据库引擎我用过不少,比如 sqlit ...
- mysql 数据库引擎
一.数据库引擎 数据库引擎是用于存储.处理和保护数据的核心服务.利用数据库引擎可控制访问权限并快速处理事务,从而满足企业内大多数需要处理大量数据的应用程序的要求. 使用数据库引擎创建用于联机事务处理或 ...
- BDE(一款数据库引擎，通过它可以连接不同数据库)
BDE(Borland Database Engine)是Inprise公司的数据库引擎, 它结合了SQL Links允许程序员通过它能够连接到各种不同的数据库. BDE是BORLAND 数据库引擎的 ...
- Err.number错误号和可捕获的 Microsoft access 数据库引擎和 DAO错误说明
错误码 信息 2420 数字语法错误 2421 日期语法错误 2422 字符串语法错误 2423 '.'.'!'.或 '()'的使 ...
- mysql之数据库引擎
一:引擎概述 1,为什么要合理选择数据库存储引擎? MySQL中的数据用各种不同的技术存储在文件(或者内存)中.这些技术中的每一种技术都使用不同的存储机制.索引技巧.锁定水平并且最终提供广泛的不同的功 ...
- db4o_8.0对象数据库官方文档翻译_学习笔记三
紧接上篇:db4o_8.0对象数据库官方文档翻译_学习笔记二 3. Object Manager Enterprise Overview(OME视图)即OME插件的使用 If you did not ...
最新文章
- 慕课网基于ElasticSearch的找房网实战开发企业级房屋搜索网项目学习心得(一)
- mongoDB-3.x启用认证
- 汽车雷达 -- 车载ADAS常用中英文对照
- 【Python】9个必知的Python操作文件/文件夹方法
- 支持向量机的基本思想_支持向量机的分类思想
- ASP.NET MVC 5 ABP DataTables （二）
- java day04【 Idea、方法】
- 《Android程序设计》一3.8 Android应用打包：.apk文件
- MATLAB 生成随机数
- win7 Pro 英文版添加中文语言包
- 百度地图API基本使用（二）
- C# 判断电脑是否装Arcgis软件
- 智能聊天机器人的技术综述
- win10关机慢！windows10关机慢
- pytorch：线性回归实战
- unity3d 模型从上到下出现（shader）
- 为什么电脑运行越来越慢？解决方法又是什么呢？
- excel阅读器Android,Excel阅读器
- 高质量文章导航-持续更新中
- 华为云618年中钜惠，服务器免费领三个月