金松昌
- 作品数:56 被引量:47H指数:4
- 供职机构:国防科学技术大学更多>>
- 发文基金:国家高技术研究发展计划国家242信息安全计划国家自然科学基金更多>>
- 相关领域:自动化与计算机技术电子电信更多>>
- 基于HDFS的多用户并行文件IO的设计与实现
- 随着计算机网络及其应用的快速发展,特别是Google提出基于Internet的海量数据存储和Map-reduce并行计算思想以来,网络化的数据存储管理和并行分析处理成为学术界和产业界研究的焦点,其中Hadoop作为该思想...
- 金松昌
- 关键词:海量数据管理分布式文件系统HADOOP
- 一种分布式文件系统的数据读写方法及系统
- 本申请公开了一种分布式文件系统的数据读写方法,包括:获取客户端所要读写文件的数据块元信息及所述客户端的IP地址;解析所述数据块元信息中包含的数据块IP地址;将所述数据块IP地址与所述客户端的IP地址进行比较,当所述数据块...
- 舒琦杨树强王怀民吴泉源贾焰周斌韩伟红滕猛赵辉陈志坤金松昌罗荣凌王凯
- 面向大型关键业务的Hadoop云计算平台数据安全策略研究被引量:3
- 2012年
- 文章研究了Hadoop云计算平台在大型关键业务系统中面临的数据安全方面的问题。通过分析Kerberos认证机制及FaceBook的AvatarNode,结合认证令牌算法,提出了一种保证数据安全系统设计方案。设计方案主要包括两方面:数据安全部分和数据灾备部分。数据安全部分,用于保证系统数据层面的安全,主要包括数据访问控制、数据共享安全、错误检测和自动恢复等;数据灾备部分,用于应对突发的有破坏作用的自然灾害,保证系统的可靠运行,主要包括AvatarNode、元数据远程备份、灾难检测和系统切换。该设计方案可以保证数据所在环境、数据的使用过程和数据的存储的安全。
- 金松昌杨树强樊华刘斐
- 关键词:HADOOPKERBEROS访问控制
- 一种调整数据块存储位置的方法及系统
- 本发明公开一种调整数据块存储位置的方法及系统。所述方法包括:获取分布式网络中的n个数据块;利用超图确定n个数据块中任意m个数据块之间的相关度,m<n;将m个数据块划分至多个数据块集合,属于同一个数据块集合的数据块之间的相...
- 杨树强陈志坤金松昌尹洪贾焰韩伟红周斌李爱平
- 文献传递
- 一种分布式存储系统数据可靠性评价的方法及系统
- 本申请提供了一种分布式存储系统数据可靠性评价的方法,该方法包括:确定数据块副本的数目和各个所述副本对应的目标节点;根据所述目标节点工作状态,分别计算所述数据块的读取成功概率和写入成功概率;根据预设的数据分布策略和所述数据...
- 杨树强黄鸿杰陈志坤尹洪蒋千越束阳雪薛竹君贾焰韩伟红李爱平周斌金松昌
- 一种基于云存储的数据备份方法及系统
- 本发明公开一种基于云存储的数据备份方法及系统。所述方法包括:获取数据备份任务信息;所述数据备份任务信息包括源数据服务器地址信息;根据所述源数据服务器地址信息,查找数据备份客户端;所述数据备份客户端的地址信息与所述源数据服...
- 舒琦杨树强金松昌赵辉尹洪陈志坤贾焰周斌韩伟红李爱平韩毅李莎莎
- 文献传递
- 大规模在线社交网络中社区结构发现相关技术研究
- 随着网络社交的普及,人类社会快速步入在线社交网络时代。在线社交网络普遍具有“社区结构”特性,社区结构的挖掘和分析已成为在线社交网络领域的一个研究热点和重点。 社区发现技术的研究已经开展了很多年,并取得了丰硕的成果。然而...
- 金松昌
- 关键词:MAPREDUCE图划分并行处理
- 基于MapReduce并行架构的大数据社会网络社团挖掘方法被引量:10
- 2013年
- 随着社会网络数据规模的急剧上升,传统的社会网络社团挖掘方法无法有效应对大数据社会网络场景.基于MapReduce并行计算框架,提出了一种针对大数据社会网络的社团挖掘方法.借助于信息压缩理论模型,该方法首先对给定的社会网络进行二进制信息编码,然后按照信息描述长度理论并行计算社会网络中给定编码方案的信息描述长度,从而将社会网络社团并行挖掘问题转化为并行搜索社会网络中最小信息描述长度所对应的编码方案问题.通过采用并行随机迭代方式搜索大数据社会网络编码状态空间中的最佳编码方案,提出的大数据社会网络社团挖据方法具有自动发现最佳社团数量、算法复杂度低、计算精度高和高可扩展性等特点.与同类方法进行实验对比,从算法的计算精度和计算性能两方面验证了所提方法的有效性.
- 邓波张玉超金松昌林旺群
- 关键词:MAPREDUCE社团信息压缩随机游走
- 一种数据分布存储方法和装置
- 本发明提供了一种数据分布存储方法和装置,该方法应用于分布式存储系统,该分布式存储系统包括核心服务器组和至少一个外围服务器组,其中核心服务器组和外围服务器组中均包括用于存储数据和处理数据的多个数据节点,该方法在获取到待存储...
- 杨树强赵辉贾焰金松昌周斌韩伟红尹洪陈志坤韩毅舒琦
- 文献传递
- 一种数据处理方法及系统
- 本发明公开了一种数据处理方法及系统。一种数据处理方法,包括:发送文件操作请求,获取文件的当前操作状态,所述文件包括至少一个数据块;当所述文件操作请求为读取数据请求,且所述当前操作状态为写入状态时,将数据写入文件的尾数据块...
- 杨树强金松昌王怀民吴泉源贾焰周斌韩伟红滕猛陈志坤赵辉舒琦罗荣凌王凯