大数据结业操持hadoop+hive共享单车猜测分析 公共自行车数据分析 共享单车猜测 共享单车大数据 共享单车可视化 共享单车爬虫 数据堆栈 呆板学习 盘算机结业操持
沧州师范学院本科结业论文（操持）文献综述专业： 届别： 姓名： 学号：
结业论文（操持）标题：
基于hadoop的公共自行车数据分析体系
文献综述必要填写的内容
一、媒介
都会公共自行车网络是由管理中央、站点、调理中央、通讯网络和互联网业务平台共同构建构成的服务体系。研究公共自行车的借还车规律,为公共自行车体系规分别析决定提供支持,充实发挥公共自行车的综合上风,对改善住民的出行状态、缓解都会交通拥挤、促进都会交通可连续发展具有非常告急意义。本文针对都会公共自行车管理中央提供的数据,起首对所给数据举行预处置惩罚,构建了干系统计模子,运用hadoop、spark等大数据技能举行统计分析求解盘算,末了提出改进发起。
二、项目国表里近况
从公共自行车体系的劈头来看，它最早来自于欧洲。第一代公共自行车体系出现于1965年的荷兰阿姆斯特丹，然后在1995年的丹麦都城哥本哈根推出了第二代的公共自行车体系。到了20世纪90年代末，借助于快速发展的盘算机、互联网和无线通讯技能，欧洲的公共自行车行业实现了数字化的运营和管理，形成了第三代公共自行车体系。该体系在2007年开始进入了中国，先后在北京、杭州、武汉等大都会开展试点，继而徐徐向其他省会都会、部门中小都会拓展，制止2017年我国已经有高出400个都会开展了公共自行车体系的建立。
作为都会交通的告急构成部门，公共自行车体系重要有以下三方面的上风。第一是方便出行，公共自行车能满意住民多条理的短隔断出行以及其他差别情况的出行需求，站点一样平常结构在住民生存区、商业区、公交地铁车站附近，办理公交出行“末了1公里”这个困难。其次是低碳环保，公共自行车不会造成尾气和噪音等情况污染，可以为住民和旅游者提供绿色便捷的出行方式；同时也是一种更康健的生存方式，自行车的使用有助于强身健体，淘汰都会疾病的发生。第三是缓解门路题目，公共自行车体系能便捷高效地集散客流，缓解门路交通拥堵题目，进步门路资源的使用服从。
高效的公共自行车体系既要只管淘汰运营资源，又要包管提供富足好的服务，这就必要我们对数据化的体系有充实的把控。通常来说，公共自行车体系以都会为单位举行建立摆设，重要由自行车、车架、站点和信息体系等构成。通过信息体系的记载可以得到实时海量的数据，在这个大数据期间中数据就是代价，使用数据分析可以发掘公共自行车体系的运行规律，获取公共自行车体系的群体出行规律。
详细来说，我们重要可以得到站点和行程两个层面的数据。站点数据包罗各个站点实时的自行车数量、空车架数量、站点容量等，使用站点数据可以盘算出各个时间段各个站点的泊松到达率，从而举行站点车辆猜测和站点车辆分配优化，改善无车可借、无地可还的题目。行程数据是指各个用户的行程OD（Origin-Destination）数据，包罗起
始站点、起始时间、用户信息等，使用行程数据可以盘算出各个时间段各个站点之间的出行分布矩阵，举行用户的转移概率猜测，从而举行用户精准保举等。通过公共自行车体系的数据分析，可以到达进步体系运行服从和服务水平的效果。
三、干系开发技能与理论
1、Hadoop简介
Hadoop是一个开源的分布式盘算框架，由HDFS和MapReduce两部门构成。HDFS（Hadoop Distributed FileSystem）提供了一个高度容错的机制，可以大概存储海量的数据；MapReduce则是一个编程模子，用于处置惩罚和天生大数据集。Hadoop的出现使得处置惩罚大规模数据成为大概，而且在许多范畴得到了广泛应用。
2、公共自行车数据概述
公共自行车数据重要包罗使用情况、站点分布、用户活动等方面的信息。通过对这些数据的分析，可以相识公共自行车的运行状态、用户需求、出行风俗等题目，为都会规划和交通管理提供决定支持。公共自行车数据的特点是数据量大、实时性强，因此必要一个高效的数据处置惩罚体系来举行处置惩罚和分析。
3、基于Hadoop的公共自行车数据分析体系研究近况
现在，基于Hadoop的公共自行车数据分析体系已经成为研究的热门。文献提出了一种基于Hadoop的公共自行车使用情况分析体系，通过对大规模数据的处置惩罚和分析，得到了公共自行车的实时使用情况和猜测模子。文献则操持了一个基于Hadoop的公共自行车站点优化体系，通过对站点分布和用户活动数据的分析，优化了站点结构和调理战略。别的，另有研究将基于Hadoop的公共自行车数据分析体系应用于用户出行风俗分析、环保出行推广等方面。
四、总结
本文对基于Hadoop的公共自行车数据分析体系的干系文献举行了综述。从Hadoop的简介、公共自行车数据概述、基于Hadoop的公共自行车数据分析体系研究近况等方面举行了论述。效果表明，基于Hadoop的公共自行车数据分析体系在处置惩罚大规模数据、提供决定支持等方面具有明显的上风。将来研究可以进一步优化体系性能、拓展应用范畴，比方将基于Hadoop的公共自行车数据分析体系应用于智能交通、都会规划等范畴。
参考文献：
基于大数据处置惩罚的公共自行车服务体系研究. 宣子岳;朱家明;张素洁;张庆茹.赤峰学院学报(天然科学版),2022(16)
“公共自行车服务体系”研究与大数据处置惩罚. 吕丹.数学建模及其应用,2021(Z2)
都会公共自行车租赁站远期发展规模分析. 李正浩.交通节能与环保,2023(02)
杭州公共自行车办法近况观察与思索. 钱俭;郑志锋;冯雨峰.规划师,2022(01)
广州市公共自行车交通体系实行战略研究. 朱强;郭晟.黑龙江交通科技,2021(08)
杭州市公共自行车体系规划. 姚遥;周扬军.都会交通,2022(04)
武汉市公共自行车租赁点结构规划. 李黎辉;陈华;孙小丽.都会交通,2021(04)
基于大数据处置惩罚的公共自行车服务体系研究. 宣子岳;朱家明;张素洁;张庆茹.赤峰学院学报(天然科学版),2023
我国都会公共自行车服务体系的改进发起. 高蓉.山西修建,2022
浙江省聪明服务区管理服务体系建立探究. 崔优凯;吴蓉;毛思捷.中国交通讯息化,2021
城区公共自行车服务体系的分析研究. 宋晓婷;王春年.唐山师范学院学报,2020
高速公路动态计重装备云服务体系. 段水师.交通天下,2021
基于智能传感器的公共自行车微敬佩务体系研究. 王洋.中国交通讯息化,2022
聪明公路管理服务体系研究. 马娟;师维超.交通节能与环保,2020
基于多元统计法公共自行车服务体系的研究. 滕磊;洪铃;潘婷婷;朱家明.山西师范大学学报(天然科学版),2023
Spatio-temporal patterns of a Public Bicycle Sharing Program: the effect of weather and calendar events. Jonathan Corcoran;;Tiebei Li;;David Rohde;;Elin Charles-Edwards;;Derlie Mateo-Babiano.Journal of Transport Geography,2022
Mining bicycle sharing data for generating insights into sustainable transport systems. Oliver O’Brien;;James Cheshire;;Michael Batty.Journal of Transport Geography,2022
引导西席检察意见
该生通过大量搜集和查阅文献资料，对于基于hadoop的公共自行车数据分析体系干系的国表里前人工作较好地举行了综合分析和归纳整理，并针对详细的研究工作举行了比力专门的、全面的、深入的和体系的形貌与评价，语言轻便，条理清楚。到达了学校“文献综述要求”。
引导西席署名：
https://dis.qidao123.com/imgproxy/aHR0cHM6Ly9pLWJsb2cuY3NkbmltZy5jbi9ibG9nX21pZ3JhdGUvM2JhNzZmNDE1ZmE5ODQzYzc5MDRhZTU0NTBjZmExODkucG5nhttps://dis.qidao123.com/imgproxy/aHR0cHM6Ly9pLWJsb2cuY3NkbmltZy5jbi9ibG9nX21pZ3JhdGUvZGE1MzAyMjA1Y2UxZGRiMDVlZDE0MDViMWIyOWJiZmEucG5n
https://dis.qidao123.com/imgproxy/aHR0cHM6Ly9pLWJsb2cuY3NkbmltZy5jbi9ibG9nX21pZ3JhdGUvYjVjMTMwOGI1NDNmNmJiMWI1NDVjNWFmNDhiMjlmMzkucG5n
核默算法代码分享如下：
---#启动metastore服务
---hive --service metastore
--#beeline客户端
---hive --service hiveserver2 (等一会 默认启动10000端口)
--- beeline-->> ! connect jdbc:hive2://localhost:10000
---- 创建分层数据库----
drop database if exists ods_gxdc cascade;
drop database if existsdwd_gxdc cascade;
drop database if existsdws_gxdc cascade;
drop database if existsapp_gxdc cascade;
--- ods层-原始日志数据层
create database ods_gxdc;
--- dwd层 -预处理后的数据层
create database dwd_gxdc;
---dws 主题层
create database dws_gxdc;
--- app（ads）层---分析结果层
create database app_gxdc;
---查看分层数据库
show databases;
--- 创建原始数据表结构
use ods_gxdc;
drop table if exists ods_gxdc.t_gxdc_ods;
---区域表
truncate table ods_gxdc.t_area;
--------------------------------------------------------ODS------------------------------------------------
create table ods_gxdc.t_area
(
id int,
name string,
create_time string
) row format delimited fields terminated by '\t';
load data local inpath '/data/gxdc_data/area.txt' into table ods_gxdc.t_area;
页:
[1]