专业实训日志13

学习总结:

学习过程:今天老师具体讲解了一下一个项目从需求分析到完结的过程,其次讲解了一下用户日志分析的具体操作过程,先将用户日志进行数据清洗,其次选择出自己需要的数据存入hive数据库再通过sooop导入mysql数据库,通过echar插件以表格形式显示出来。

总结:了解了项目的概要设计流程。了解了用户日志分析项目初步的操作方法。

遇到的问题:

项目初期数据清洗的时候就出现了MapReduce方法内部代码出现错误,导致清洗数据出错。

明天的目标:

接着做项目

思维导图:

原文地址:https://www.cnblogs.com/bai123/p/9352847.html

时间: 2024-10-03 17:10:25

专业实训日志13的相关文章

专业实训日志02

学习过程与总结: 学习过程:今天上午开始学的是JDK环境变量的配置和解压缩,再是在linux系统中安装mysql以及与外部Window系统的数据库管理工具的连接,其次是tomcat的安装以及环境变量的配置最后是ssh协议的讲解配置.下午讲解了ssh协议的具体配置过程与其本身原理,hdfs的配置以及代码中AJAX的原理,最后讲解了字节流与字符流. 总结:今天学会如何在linux系统中安装mysql.tomcat.JDK以及其他软件的及其本身的环境变量的配置,最主要的是了解到了安装和配置过程中的一些

专业实训8.29

1.本日任务 确定专业实训题目,并查相关学习资料进行学习. 2.题目确定 通过在中国大学生软件设计大赛网站:http://www.cnsoftbei.com/所给出的相关题目中选出自己所看重的题目——基于web的3D模型浏览与交互系统. 3.选题图片 4.选题心路历程 根据所给题目中大多数含有和涉及到硬件操作,鉴于本人分组只是一人一组,操作硬件起来会更加苦难,所以选择一个多为软件操作目:选题结果跟姜中希组相同,但保证只会在大体思路上回有所相同但不会出现代码上的冲突和相似. 5.8月29日任务完成

2016年秋季软件工程专业实训分组及选题情况

实训意义 综合实训旨在为学生提供参与完整软件开发过程的实践经历,并对所涉及的应用领域进行初步了解,培养面向领域的工程能力.项目来源主要是学校或相关合作企业在校内设立专门的学生研究开发项目,可以聘请企业专家组织和指导学生模拟企业环境进行项目开发,给学生带来真实的企业研发的环境和流程.     实训目标 (1)训练学生软件开发流程和规范:体会企业开发流程:熟悉常用开发工具.模板和表格的使用: (2)体会企业中的团队合作规范:培养团队开发和协同工作的能力:熟悉团队成员在软件开发项目中的角色分工及沟通协

专业实训9.5

1.实训时间:2016.9.5上午8:00-11:30 2.实训内容:项目在完成.x文件的固定导入后,尝试文件旋转,缩小,放大功能的开发. 3.具体实现:通过网上百度的源代码,进行阅读和修改. 具体为摄像头的处理. 阅读代码如下: using System; using System.Collections.Generic; using System.ComponentModel; using System.Data; using System.Drawing; using System.Lin

专业实训9.10

首先在开头,先祝愿天下的所有老师教师节快乐! WPF本身并没有为我们提供文件浏览的控件, 也不能直接使用Forms中的控件,而文件浏览对话框又是我们最常用的控件之一. 下面是我实现的方式 接下来呢!进入正题 要在项目文件中添加一个打开的对话框操作. 具体实现方式有四个(一一列举,就当给自己科普啦!): 方式1: 使用win32控件OpenFileDialog ? 1 2 3 4 5 6 7 Microsoft.Win32.OpenFileDialog ofd = new Microsoft.Wi

专业实训9.6

使用C#加载obj格式的3d模型,并实现缩放.旋转等变换 先上效果图吧. 我导入了两个模型,一个汽车和一个美女,都是在网上下载的obj格式的文件.导入之后调整了2个模型之间的位置关系,又添加了鼠标滚轮缩放,旋转的功能,这样我们就可以方便查看模型的各个细节了. C#动态读取obj文件,加载的基本思路就是打开文件,解析obj格式,生成ModelVisual3D.我这里使用的是一个网上别人写的WavefrontObjLoader.cs.代码比较复杂,我们没必要全部看懂,只要会用就够了! 将Wavefr

专业实训题目需求分析

现在云办公是十分流行的办公方式,并且已经得到了一定程度上的应用,有针对性并且相对成熟的云办公软件是很多机关所需要的,实现云办公,这便是该软件的业务需求.该软件的用户类型主要是“团队型”客户,即有一定数量,并且不同用户司职可能相同也可能不同,但本质上是有领导和被领导的关系的,领导可以发布开会时间,地点,会议内容等等,而员工(被领导者)可以根据不同的职位发表最近的工作总结,建议等等相关内容,会议记录也可以存档.用户的需求在于,应用网络实现在线会议,签到等等需求(当然相关功能,该软件已经初步实现),软

专业实训项目需求分析

                     Magic 业务需求:给使用者提供朋友聚会间的一个小魔术,来活跃气氛或增进关系等功能.面向用户的类型:解决了在聚会上大家都沉默不语,各自玩手机的现象.通过这个小软件来表现魔术,吸引大家的注意力,从而使聚会变得更有趣,也更具有增进关系的作用.用户需求:只要你有手机和硬币,可以随时随地的表演魔术.软件需求:界面背景是一个透明的界面,可以直接显示手机原本界面,通过振动感应器来显示一个硬币图案,再次震动就会消失.通过此原理产生硬币进入手机的假象.

专业实训题目需求分析(3D推箱子)

业务需求:    游戏提供主菜单让玩家进行游戏设置.帮助说明,推箱子的小人可以前后左右转动,箱子可以被上下左右的推动,要有关卡设置,障碍物设置,游戏提供背景音乐的功能,要实现3D效果. 面向的用户类型:会使用手机软件的人 用户需求:可以对游戏进行设置,可以上下左右的推箱子,移动小人,要有关卡的转换,有个美好的体验. 软件需求:用户可以对游戏进行设置,用户通过移动小人来改变箱子的位置,游戏每关的关卡都要不一样,有独特的地图,给用户一个美好的体验.