这是当年做毕业设计开发写的日志,清理电脑的时候突然看到了,看的我一乐,发出来给大家看看,不得不说真实感满满,怀恋。
开发日志
3.27及以前 生产环境搭建基于Windows 学习hbase,scala等要素
- hadoop 环境安装
- hbase 安装
- spark安装
- Scala安装
3.28 java连接Hbase数据库
问题: java连接Hbase数据库,抛出异常显示关于zookeeper的读写异常
解决方案:导入zookeeper开发包,因为使用的hbase自带的zookeeper,所以没有相关jar包这就很懵逼,当时导入包是全部导入进去的,以为不会有问题,随便找了个版本的包导入进去。
后记:spark好像有zookeeper包
3.29 咸鱼一天
3.30 python生成模拟数据写入数据库
问题:数据生成杂乱,没有任何规律。期待好的解决方案
3.31 数据模拟问题解决 菜种类数据收集- 正态分布模拟评分数据产生,评分超过5去除 尝试数据写入数据库,但是菜品还是随机生成的
复制代码 4.1 解决若干scala语法问题,读懂相关源码
4.2 数据库表结构大致确定
解决了数据问题,将餐饮表按照id::name::dir写入txt
4.2 断网,咸鱼一天,思考用户表结构
4.3 断网,咸鱼一天
4.4 若干bug解决
4.5 出去嗨了一天,屁事没干
4.6 所有后台准备完成,数据写入测试,发现并解决若干bug
数据写入成功,遇到jar包冲突,分开加入解决。困扰了几天的问题
暂停后端开发,前端交互开始设计。时间不等人了
4.7 前端开写
4.8 前端登录界面完成,以及hbase的连接完成,测试通过
4.9 推荐界面初步完成,思考其他界面的选择,food表的中文乱码解决,java api初步封装完成
要保证数据的流通,所以必然开发评分界面,思考评分界面怎么做,可以弄个收藏界面,需要搜索界面?
4.10 若干问题解决,做评分界面 ,放弃搜索界面,用户采用邮箱登录同时也作为rowkey,hbase索引搜索速度会很快,收藏界面是否需要,需要的话怎么做?
4.10-4.16若干问题解决以及布局优化
Hbase问题很严重,windows下不知道logs在哪,这就很伤。
4.17继续优化
通知交论文时间推后,咸鱼点
4.18-4.25 论文优化,推荐部分对每个用户进行推荐,注册后台完成,没有推荐数据显示界面完成,还有点前端js小问题,真的不想改,最终版本,毕竟明天答辩
4.28 发现界面老师给出建议按照点击排序,而不是按照顺序从数据库中读取,行吧我不改了你爱咋地咋地把
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作! |