数据网格极大简化了中国石化石油勘探开发研究日常管理维护工作，同时提高了故障排除能力，提高系统的可用性和稳定性。
石油行业目前遇到的主要问题还是提高数据处理能力和跨地域、跨组织的协同工作。 石油是一种不可再生的资源，随着资源的长期开发，可用的资源勘探难度越来越大，这几年应该可以看出在国际上一些战争、国家之间的纠纷大多数都跟石油有关，最大的海湾战争基本上是因为石油的原因而打起来的。
这是我们研究院当前遇到的IT问题，我们研究院目前大约有2000多台微机和300多台工作站，维护人员只有大约30多人，而且这些机器分布在中国很大的广域网范围，并且它的IT规模现在还在不断地扩大，管理成本和管理难度急剧的增加，这就要求我们极大的降低和简化对IT的认识，日常维护和管理工作更需要加强，合理利用IT资源，提升现有IT资源的使用价值，降低IT资源上的投资也提出了一些要求。对于IT资源的使用者来说，如何方便的使用数据和在短期内搜索花费较短的时间也是一个问题，随着中石化对海外市场的开发和对远程数据共享的使用，在安全上提出了更高的要求。
基于以上的观点我们现在在2003年中旬开始进行了网格探索性的研究工作。经过半年左右的时间确定了一些方案，网格基本上是以建立数据网格为实施的先期目标。这是我们当时探讨的建立目的，首先建立数据网格，实现存储资源的共享，达到存储资源的虚拟化，通过数据网格的建立、统一的文件视图，实现存储资源的统一管理，提高现有资源的利用率，提高工作人员的工作效率和降低业务人员访问数据的复杂度。降低IT人员日常维护的工作量，提高对故障判断能力，建立统一的文件访问权限机制和制度，增加数据的授权访问，提高数据安全性，通过实践检验数据网格的技术在石油应用环境下就是其问题所在，为网格技术在中石化集团的应用建立一个能够适应企业应用的模板，为将来的网格在中石化的扩展提供理论和现实的基础。
我们纳入数据网格总容量大约在4个TB左右。我们要建立统一的数据视图，联合了数据访问，联合了访问控制，远程的数据缓存，建立一套符合国际上通用的标准、可扩展的架构、基于Web UI的控制管理、网格间的连接。对使用者来说并不知道这些机器是什么，是在哪个操作系统下，是在哪个位置上。
网格内部的用户管理，我们可以通过统一的外围界面设置到每个用户的权限，用以增加系统的安全性。网格用户可以通过透明的方式访问网格，它可以通过以下三种方式访问网格内部的数据，就是传统的在石油行业广泛应用的NFS网络系统，还有大家通用的Windows CF文件系统。还有一种方式就是通过浏览器的方式，GOI的方式访问到同样的数据资源。
针对大规模的IT架构实现统一资源的管理，目前我们中石化研究院遇到的问题并不是成本降低的问题，实际上在成本降低的前提下要能使用，目前这么大规模的架构如何合理的利用现有的资源，而降低维护的复杂程度，降低日常管理，提高系统的可用性。我们现在经过半年左右时间，探讨网格技术跟传统的Cluster认证结合到一起，通过两种技术的结合将现有的网络管理方式过渡到网格方式管理。
通过实现透明的访问，异构数据资源，就是异构的平台分布的数据资源，我们通过网格建立统一的视图可以降低冗余数据，使用户更容易的访问到原来的数据，并且与原有的业务操作完全兼容，使用户并不知道采用了网格的技术或者其他的计算机技术，对于使用者来说应该没有感觉到在利用新的技术。
我们知道石油行业的地震数据的数据量是比较大的，目前来说一个工区现在基本上数据能达到一个TB左右。原始数据一般是在远程采集到，比较常规的方法就是通过空运或者是直接把磁带从远程数据中心、采集中心寄到要处理的计算中心，这种方式存在缺点，首先远程的数据中心、采集中心寄磁带，一般来说常用的就是3590带和3490带，寄完了之后通过空运或者人工的方式带到计算中心进行数据处理，到数据处理中心的时候还需要把原始的带进行解编，放到机器里，然后要进行几个月的数据运算，这是现在比较常用的方式，因为现在网络带宽的情况无法满足大数据量的要求。
随着网络建设，现在也有些人采用广域网上的传输，采用传统的像FTP命令之类的方式传输远程的数据，基本上可能是应用在解释数据，它的数据体相对较小一些，但也有一些问题，他首先要通过传统FTP方式传输，首先它要把数据传到本地之后才能再运行预算，而且目前网络带宽能达到实时比较快速传输数据。
网格方式的传输首先对于用户来说是透明的，从访问来说是随机的，它可以随机的访问远程数据，比如只想访问数据后半部分的时候，传统方式是必须整个传输过来，然后才能进行访问，通过网格方式有点儿类似现在流媒体的技术，你想要的那块拿来就行，而且通过网格服务器可以利用结点功能，提高数据的二次访问能力，加大了速度，而且降低了使用人员和管理人员的使用难度，因为传统的业务人员对网络命令的使用不是很熟悉，而且多机器异构的平台，甚至他们有可能是不太会使用。
通过数据我们研究院所有的数据通过一个统一的数据服务器进行访问，而不需要监管数据的位置和文件系统。它可以通过三种方式访问，这三种方式用户习惯于哪种方式就用哪种方式，原始数据继续保留在原始地，数据原始拥有者还有原始的控制权限。在用户方面增加了用户间的协作，提高了用户的工作效率，极大的减轻了管理员系统管理的工作负荷。
数据网格对我们研究院IT管理带来一些优势，对于研究院大规模的IT架构，其维护成本和复杂程度随着管理结点数目增加而成倍增加，通过数据网格的实现，对IT架构中的数据资源统一管理，建立了对数据资源管理统一授权机制，极大的简化了日常管理维护工作，同时提高了故障排除能力，提高系统的可用性和稳定性。
文章原载于《信息系统工程》
网友评论