绑定机构
扫描成功 请在APP上操作
打开万方数据APP,点击右上角"扫一扫",扫描二维码即可将您登录的个人账号与机构账号绑定,绑定后您可在APP上享有机构权限,如需更换机构账号,可到个人中心解绑。
欢迎的朋友
万方知识发现服务平台
找到 1 位学者
山东科技大学
获取范围
  • 1 / 1
  (已选择0条) 清除 结果分析
找到 6 条结果
摘要:随着社会经济和科学技术的快速发展,资源环境的重要性日益凸显.水资源作为人类不可缺少的资源,在一些水资源匮乏的地区,水资源已经成为制约经济发展的瓶颈因素.因此,水资源承载力的研究受到越来越多的人的关注....
摘要:手机的位置服务已渐渐融入我们的日常生活,成为当今智能手机不可缺少的功能.本文介绍了手机GPS/A-GPS定位的原理和定位步骤,通过在已知控制点上采集的手机GPS数据,对数据处理,分析了手机GPS、A-GPS定位精度,指出了手机GPS定位现存的问题,为以后的研究奠定了基础....
摘要:在土地确权调查的过程中,理清宗地间的空间关系尤为重要.在以往的工作中,宗地间的空间关系往往需要人工进行判读,在数据量大的情况下,这样的工作模式不但效率低下,而且准确率较低.在计算机软硬件技术的不断创新发展下,实现空间关系的自适应匹配已是一种成熟的技术....
[硕士论文] 杨应召
测绘工程 山东科技大学 2018(学位年度)
摘要:近年来,大数据、云计算等新兴技术快速发展,在电子商务、教育、医疗、交通等领域已经得到广泛的应用。云计算能够给用户提供可靠的、自定义的、最大化资源利用的服务,具有安全的数据存储、方便快捷的互联网服务和强大的计算能力等特点。目前,中国正在大力发展海洋事业,随着海洋探测技术的不断完善和优化,海洋数据表现出了海量化、复杂性、多样化等特征,给数据管理、利用和海洋知识挖掘等带来巨大的挑战。本论文研究了基于Hadoop和Spark的云计算技术,设计了一种针对物理海洋数据的云存储和处理方案,并将这一方案应用在数据的统计分析中。
  相比传统的文件服务器处理模式在配置成本高、处理效率较低、编程模型复杂等方面的不足,基于Hadoop和Spark的云计算技术在分布式数据存储和并行计算方面有明显的优势。针对海洋大数据的分布式存储,本论文采用HDFS作为底层存储框架,并对HDFS的整体架构以及数据如何写入、分块、备份和恢复进行了深入研究,并与本地文件系统做了对比;针对海洋大数据的分析处理,本论文采用Spark和Yarn相结合的方式进行并行框架设计,并基于RDD构建NetCDF分布式数据集,通过重写数据读取接口对大范围的物理海洋数据进行并行处理。本论文研究设计了Yarn集群模式下的系统性能调优方案,对HDFS数据块大小、Spark应用程序提交参数和Yarn资源分配参数进行了调优设置。最后,本论文总结了Hadoop集群和Spark集群的环境搭建步骤,并对渤黄东海区域40年的海浪数据做了查询统计效率对比试验,试验证明相较于单机模式,云计算模式在大量数据处理方面具有较高的效率。
  本论文将基于Hadoop和Spark的云计算技术应用于有效波高-跨零周期散布图统计分析中。散布图统计利用传统定义实现了有效波高-跨零周期联合分布统计,并分析了有效波高在季节和地理位置方面的变化规律;其次分别利用极值I型分布函数(参数方法是耿贝尔法)和Ochi提出的波高周期联合分布函数相关理论进行了不同重现期下有效波高极值和周期期望值的推算。
摘要:交通道路是经济发展的基础.本文针对道路选线问题,介绍了变分变率栅格数据的构建方法,以及变分辨率的优缺点,其次,分析了常用的道路选线的算法dijkstra算法和A*算法.这对于道路的选线具有重要的参考价值,同时对于通信线路的选址以及输电线路的选址等线状选址具有一定的借鉴意义....
[期刊论文] 夏伟 艾波 杨应召 尚恒帅
-
CSTPCD 北大核心
-
摘要:物理海洋数据具有多维、时空和海量等特征,主要以NetCDF结构化文件格式进行存储.然而,在分布式环境中,结构化文件存在数据块寻址困难、边界不易判定等问题,制约着大数据场景下的存储及应用.论文设计基于HDFS+Spark的NetCDF物理海洋数据云存储方案,首先采用HDFS分布式存储技术存储和管理物理海洋数据;并设计基于Spark并行计算框架的数据分片方案,复写读取接口获取分布式环境下的NetCDF文件数据块地址,实现了物理海洋数据的高效率存储与查询分析.选取中国海域100 a时长的物理海洋数据进行波高-周期散布图统计实验.结果 表明:在数亿级记录数条件下,文中方法可将查询分析耗时由集中式文件存储方式的2 300 s缩短至50 s内,效率较集中式文件存储方式提升95%以上,验证了该方法的正确性和有效性....
  (已选择0条) 清除
公   告

北京万方数据股份有限公司在天猫、京东开具唯一官方授权的直营店铺:

1、天猫--万方数据教育专营店

2、京东--万方数据官方旗舰店

敬请广大用户关注、支持!查看详情

手机版

万方数据知识服务平台 扫码关注微信公众号

万方选题

学术圈
实名学术社交
订阅
收藏
快速查看收藏过的文献
客服
服务
回到
顶部