当前位置:首页 > 论文纲要 > 正文内容

论文纲要:鉴于Hadoop的洪量交通数据检索体例的安排与实行

免费论文3年前 (2022-03-08)论文纲要53

跟着北京社会财经的赶快兴盛,上海市连接减少常住和震动人丁,都会范围连接巨大,大众出外需要迅猛延长,大众对都会交通效劳品质的需要在赶快普及。惟有连接革新都会大众交通处置观念,连接变革处置形式,连接加强处置本领,本领满意大众交通效劳的诉求。在这种景象下,高效的处置、保存、索引、监察和控制及处置洪量交通数据对正文是一个宏大挑拨。 对准于这个挑拨,国表里仍旧做了洪量的关系接洽处事,并博得了特出的功效,那些处事重要依靠在保守联系型数据库建立的洪量空间数据检索体例。自从2005年Hadoop的出生,云计划在互联网络界成了无人不晓的高新技术本领,交通界也不不同,适合期间的兴盛,沿用大数据平台处置现有题目。所以,正文在高效的数据处置、保存、索引、监察和控制及处置的诉求下,从交通运用需要的观点动身,提出了鉴于Hadoop的洪量交通数据检索体例,重要接洽处事如次: 1)建立洪量交通数据保存构造。搭建Hadoop集群情况,建立散布式的洪量交通数据保存平台,安排数据文献保存与收缩办法等。 2)安排与实行洪量交通数据处置算法。以MapReduce散布式计划框架为普通,建立散布式的洪量交通数据处置算法,重要囊括经纬度校正与路链配合算法。 3)安排与实行洪量交通数据索引构造。按照数据处置的截止,以路链号为索引键创造头等索引,制止全部数据扫描;为路途搜集创造二级索引搜集图,明显的表白前途链之间的联系,对准GPS数据的时间和空间个性供给可舒卷的鉴于路链的数据检索功效。 4)安排与实行监察和控制与处置平台。该模块的功效主假如集群监察和控制、数据处置、工作监察和控制等子模块。 正文安排百般考证试验,表白本舆论安排的数据保存、处置、索引构造的高效性;运用Hadoop自带的尝试本领,尝试并表明此平台的可行性与可用性;安排典范运用考证该检索体例的宁静性。

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。