·
搜索结果:找到“元数据服务”相关结果63109条
排序: 按相关 按相关 按时间降序
  • 【专利】 一种元数据服务系统

    作者:闫沙沙 ; 李彦路 ; 杨伯庆 年份:2018
    摘要:本申请提供了一种元数据服务系统,包括:元数据服务层,元数据业务层,以及用户层;所述元数据服务层,用于为不同业务数据分别对应的XSD文件,以及以各XSD文件为标准的XML文件提供存储服务和查询服务;所述元数据业务层,用于基于所述元数据服务层提供的服务生成对应的业务接口,并向用户层提供所述业务接口。
  • 【期刊】 美联社元数据服务简介

    刊名:中国传媒科技 作者:武国卫 机构:新华社技术局 ; 新华社技术局 年份:2014
    摘要:新媒体环境中,新闻信息量膨胀增长。在这种形势下,美联社等世界知名通讯社和报社都非常重视数据资产的管理,将多媒体数据及内容资产上升到战略地位,与货币资产及固定资产并列重视的做法和经验值得借鉴。他们将元数据新闻服务作为重点研究领域,建立实验室、搭建开放平台,面向数字出版业,推出了元数据新闻服务产品。新闻信息通过元数据服务被解析和标引后,将带来丰富的应用,市场前景广阔。
  • 【期刊】 基于OAI的企业多元数据服务平台构建

    刊名:情报理论与实践 作者:胡洋 ; 赵又霖 ; 谢友宁 ; 高培培 关键词:开放档案倡议 ; 多元数据融合 ; 服务平台 ; 企业 ; 图书馆 机构:河海大学商学院 ; 河海大学商学院 ; 河海大学图书馆 年份:2018
    摘要:[目的/意义]针对当前企业数据资源服务过程中数据多元异构的问题,建设一个统一高效的多元数据服务平台,以促进企业多元数据资源的动态共享和协同运作能力。[方法/过程]在对S设计院数据资源建设过程调查与访谈的基础上,把握企业实施多元数据服务可行性,借鉴OAI协议和多元数据融合技术来研究企业多元数据资源的共享服务过程。[结果/结论]构建了一个用于实现多元化数据有效融合与协同的企业多元数据服务平台,形成企业多元异构数据资源的高效运转模式。平台的建设有利于进一步推动OAI和多元数据融合技术的发展,以及其他各行业数据资源业务模式的应用。
  • 【期刊】 国外高校图书馆科学数据的元数据服务研究

    刊名:图书与情报 作者:黄鑫 ; 邓仲华 关键词:元数据服务 ; 科学数据 ; 科学数据服务 ; 元数据 机构:武汉大学信息管理学院 ; 武汉大学信息管理学院 年份:2017
    摘要:文章使用文献调研法,介绍了元数据服务研究现状,总结了元数据在科学数据管理中的多方面应用.同时以部分欧美高校图书馆为例,从元数据的介绍服务、创建服务、咨询服务和培训服务四个角度探讨了国外高校图书馆科学数据的元数据服务内容.
  • 【期刊】 支持EB级存储的元数据服务器集群系统

    刊名:中国科学:信息科学 作者:刘健 ; 张军伟 ; 邵冰清 ; 董欢庆 ; 刘振军 ; 许鲁 关键词:EB级 ; 存储 ; 元数据服务器集群 ; 全局命名空间 ; 一致性 ; 负载迁移 机构:中国科学院计算技术研究所 ; 中国科学院计算技术研究所 ; 中国科学院大学 年份:2015
    摘要:随着全球数据总量的快速增长,PB级存储系统已无法满足未来应用对其数据容量的需求,通用、高扩展且易于部署的EB级存储系统的研发势在必行,其核心技术为元数据服务器集群技术.本文介绍了在p NFS和蓝鲸块设备文件系统EXFS基础上研发的支持EB级存储的蓝鲸元数据服务器集群技术.首先分析了支持EB级与PB级存储的元数据服务器集群系统的区别;然后介绍了蓝鲸元数据服务器集群原型系统的整体架构及其全局命名空间的分布策略;之后介绍了基于分布式日志的一致性元数据原子操作协议,和细粒度、低延时的元数据负载迁移两项关键技术;最后进行了测试.结果显示,集群系统中每台元数据服务器均可为EB级存储系统提供超过10000 OPS的元数据操作支持.
  • 【期刊】 应急处置信息资源元数据服务系统研究

    刊名:中国标准化 作者:程芳 ; 曾熠 ; 毕于慧 ; 董玮 关键词:应急处置 ; 信息资源 ; 目录服务 年份:2015
    摘要:针对应急处置信息资源特点,结合信息资源发现定位、查询检索、交换共享功能需求,提出了应急处置信息资源基础和扩展元数据描述规范。基于元数据描述模型,分析了元数据服务系统主要功能,设计了元数据服务系统总体架构,对系统实现的服务架构、规范协议等关键技术进行说明,为实现信息资源的共享交换、抽取分发、集成应用提供支持。
  • 【期刊】 Lustre文件系统元数据服务恢复机制的改进

    刊名:计算机科学 作者:钱迎进 ; 李永刚 ; 汪毅 ; 周琳琦 关键词:Lustre ; 高性能计算 ; 可恢复性 ; 可用性 机构:中国卫星海上测控部技术部 ; 中国卫星海上测控部技术部 年份:2015
    摘要:Lustre的重启恢复算法需要集群中所有客户端在指定的恢复时间窗口内与服务器重新建立连接,客户端重传未提交的事务请求,服务器严格按照事务序列号重放所有未提交的事务,要求过于严格。针对Lustre可恢复性不强的缺点,提出了基于版本的恢复和共享时提交算法,它们分别对Lustre现有的元数据更新和恢复机制进行了改进和扩展,根据事务之间的依赖关系,允许客户端在更为宽松的条件下进行恢复并加入到集群而不被驱逐,提高了Lustre文件系统的可用性和可恢复性。最后通过一系列实验对改进后的算法的性能进行了评估。
  • 【期刊】 分布式文件系统元数据服务的负载均衡框架

    刊名:软件学报 作者:孙耀 ; 刘杰 ; 叶丹 ; 钟华 关键词:元数据服务器 ; 分布式文件系统 ; 负载均衡 ; 预取 ; 缓存 机构:中国科学院软件研究所 ; 中国科学院软件研究所 ; 中国科学院大学 ; 中国科学院软件研究所 年份:2016
    摘要:请求负载均衡,是分布式文件系统元数据管理需要面对的核心问题.以最大化元数据服务器集群吞吐量为目标,在已有元数据管理层之上设计实现了一种分布式缓存框架,专门管理热点元数据,均衡不断变化的负载.与已有的元数据负载均衡架构相比,这种两层的负载均衡架构灵活度更高,对负载的感知能力更强,并且避免了热点元数据重新分布、迁移引起的元数据命名空间结构被破坏的情况.经观察分析,元数据尺寸小、数量大,预取错误元数据带来的代价远远小于预取错误数据带来的代价.针对元数据的以上鲜明特点,提出一种元数据预取策略和基于预取机制的元数据缓存替换算法,加强了上述分布式缓存层的性能,这种两层的元数据负载均衡框架同时考虑了缓存一致性的问题.最后,在一个真实的分布式文件系统中验证了框架及方法的有效性.
  • 【期刊】 一种自适应文件系统元数据服务负载均衡策略

    刊名:软件学报 作者:佘楚玉 ; 温武少 ; 肖扬 ; 刘育擘 ; 贾殷 关键词:分布式文件系统 ; 元数据管理 ; 自适应 ; 负载均衡 ; 性能评价模型 机构:中山大学数据科学与计算机学院 ; 中山大学数据科学与计算机学院 ; 中山大学-卡内基梅隆大学国际联合研究院 ; 广东财经大学数学与统计学院 ; 中山大学数据科学与计算机学院 ; 中山大学-卡内基梅隆大学国际联合研究院 ; 中山大学数据科学与计算机学院 年份:2017
    摘要:随着大数据时代的到来,全球信息存储量呈现爆发式的增长,传统的存储系统在存储性能、存储容量、数据可靠性和成本等方面存在诸多不足.近年来,以云计算平台为依托的存储技术得到了飞速发展,成为处理海量数据的重要工具.针对分布式文件系统元数据管理的问题,提出了一种自适应元数据服务负载均衡策略.该策略主要包括以下3点内容:介绍了一种实时的元数据服务器的性能评价模型;提出了一种基于服务器负载变化的检测周期自适应调整机制;提出了一种基于元数据服务器性能指标的自适应负载均衡算法.实验结果证明了该方法的可行性、有效性和稳定性.
  • 【期刊】 Lustre文件系统元数据服务恢复机制研究

    刊名:高性能计算技术 作者:钱迎进[1] 伊瑞海[1] 肖侬[2] 金士尧[2] 关键词:Lustre 高性能计算 分布式文件系统 事务 元数据更新 恢复 高可用性 机构:中国卫星海上测控部 ; 中国卫星海上测控部 年份:2013
    摘要:摘要在分布式文件系统中,性能和可恢复性是两个相互冲突的需求。为了能够向用户提供高可用的连续数据服务,它要求系统在检测各种错误和失效时能够自动进行恢复。Lustre是HPC业界中领先的一个开源并行文件系统。它在设计上着重考虑了性能,采用了较为复杂的基于事务的有状态分布式恢复协议,可支持多种失效情况的透明恢复,并提供透明的故障接管(failover)功能。本文着重对Lustre元数据服务的恢复机制进行了研究,为分布式文件系统恢复机制的设计提供了一个范例。
  • 【期刊】 Lustre文件系统元数据服务恢复机制研究

    刊名:高性能计算技术 作者:钱迎进[1] 伊瑞海[1] 肖侬[2] 金士尧[2] 关键词:Lustre 高性能计算 分布式文件系统 事务 元数据更新 恢复 高可用性 机构:中国卫星海上测控部 ; 中国卫星海上测控部 年份:2013
    摘要:摘要在分布式文件系统中,性能和可恢复性是两个相互冲突的需求。为了能够向用户提供高可用的连续数据服务,它要求系统在检测各种错误和失效时能够自动进行恢复。Lustre是HPC业界中领先的一个开源并行文件系统。它在设计上着重考虑了性能,采用了较为复杂的基于事务的有状态分布式恢复协议,可支持多种失效情况的透明恢复,并提供透明的故障接管(failover)功能。本文着重对Lustre元数据服务的恢复机制进行了研究,为分布式文件系统恢复机制的设计提供了一个范例。
  • 【期刊】 蓝鲸元数据服务器集群的细粒度负载迁移

    刊名:计算机研究与发展 作者:刘健 ; 张军伟 ; 张浩 ; 邵冰清 ; 杨洪章 ; 刘振军 关键词:元数据服务器 ; MDS集群 ; 负载均衡 ; 负载迁移 ; 细粒度 机构:中国科学院计算技术研究所 ; 中国科学院计算技术研究所 ; 中国科学院大学 年份:2014
    摘要:大数据应用对信息系统的底层存储提出了极大挑战,其首选方案为元数据服务器(metadata server,MDS)集群架构.MDS集群系统为了实现负载均衡,采用的基本机制为元数据服务的负载迁移.当前主流方案存在迁移时间长,迁移中写相关元数据访问需要阻塞的问题.提出细粒度的元数据服务负载迁移方案,由迁出端恢复迁移机制和细粒度控制迁移机制2部分组成.在迁移过程中,以文件为粒度在迁入端重建迁出端的元数据相关状态结构,并根据被访问状态的类型选择在迁出端或迁入端进行立即响应,而非阻塞操作直到迁移完成.在蓝鲸MDS集群系统上实现了此方案,测试和分析表明,在10 000规模的迁移场景中,迁移时间控制在800ms以下,元数据或状态写入延迟最高为215ms.与系统原方案中90s的固有延时相比,此方案有效解决了MDS集群中负载迁移时间过长的问题,并且极大地降低了迁移过程对正常元数据访问的影响.
上一页 1 2 3 4 5 6 7 8 9 10 下一页 跳转