大三寒假03

感觉今天也没整出什么大的进展,在学习eclipse编写spark程序过程中,虚拟机中因为eclipse版本号的问题安装不上spark和scala插件,鼓捣了半天也没有进展,在虚拟机中下载对应的版本因为网速过于慢最终也放弃了.最终从windows中下载了对应的eclipse版本,通过ftp传到了虚拟机中.在下载的过程中,打算通过windows中的eclipse远程连接虚拟机,但在安装插件的过程中报出了错误,搜了半天也没解决,明天继续解决. 在上述过程下载等过程中,学习了scala语言的一些知识.尽

今天完成了spark实验二,花费的时间太多,没由大到预期的计划.另外打包过程中下载时候遇到链接打不开404是不影响下载的,完成打包的学习. 下边是今天的实验. 2, 模拟图形绘制 对于一个图形绘制程序,用下面的层次对各种实体进行抽象.定义一个 Drawable 的特质,其包括一个 draw 方法,默认实现为输出对象的字符串表示.定义一个 Point 类表示点,其混入了 Drawable 特质,并包含一个 shift 方法,用于移动点.所有图形实体的抽象类为Shape,其构造函数包括一个 Poin

今天继续学习了scala的相关知识. 经过一下午的时间,把windows中eclipse的maven和scala插件成功安装上了,但是Linux中的eclipse却安装不上,经过查询,初步判断是eclipse的版本太低,导致maven插件安装失败.于是对Linux中的eclipse进行了更新,但一下午过去了还没有更新完,明天继续搞. eclipse如果不是scala ide for eclipse需要安装maven插件和scala插件 跟着林子雨老师的教程做的,却发现maven插件安装不上,经过

今天完成了实验五第三问,实验六也进行了一点.明天继续进行实验六. 编程实现利用 DataFrame 读写 MySQL 的数据 (1) 在 MySQL 数据库中新建数据库 sparktest,再建表 employee,包含下列两行数据: 表 1 employee 表原有数据 (2) 配置Spark通过JDBC连接数据库MySQL,编程实现利用DataFrame插入下列数据到MySQL, 最后打印出 age 的最大值和 age 的总和. 表 2 employee 表新增数据 import java.

1.FTP在主机和虚拟机之间传文件. 这里需要注意的是,Linux系统对文件访问权限有着严格的规定,如果目录和文件的访问权限没有授权给某个用户,那么,该用户是无法访问这些目录和文件的.所以,当使用FileZilla连接Linux虚拟机时,如果采用用户名hadoop连接,那么,就只能把文件上传到Ubuntu系统中hadoop用户的主目录,也就是“/home/hadoop”目录,是无法对其他目录进行操作的,企图把文件传输到其他目录下就会失败.如果要顺利传输到其他目录,就必须登录Ubuntu系统,使用

今天你完成实验四前两个实验.但是!!!在跟eclipse的scala插件做斗争的时候,把hadoop的插件给搞没了,按着林子雨老师的教程走了一遍还是不行,不知不觉又搞了一下午,还是没解决.明天把实验四完成,做一些实验五,希望明天可以把eclipse的问题解决. 1．spark-shell 交互式编程 请到本教程官网的“下载专区”的“数据集”中下载 chapter5-data1.txt,该数据集包含 了某大学计算机系的成绩,数据格式如下所示: Tom,DataBase,80 Tom,Algorit

今天完成了信访的可视化.安装上了pycharm.也遇到了很多的问题. 1.在ubuntu下开放3306端口,并对外开放,实现从本地连接ubuntu中的mysql. 原文地址:https://blog.csdn.net/freezingxu/article/details/77088506 2.pycharm的破解方法 原文地址:https://blog.csdn.net/gpf1320253667/article/details/95871234 原文地址:https://www.cnblogs

大三下学期的我,一直在实习,趁着期末考试,请了3个星期的假回来复习.顺便整理下我大学三年的经历. 明天就是部落新上任的日子,也是部落这学期交流会的最后一次,看了那么多大三的反思,还有求职经验,想想,我也应该来反思下我的大三. 大一: 大一那时候刚进来什么都不懂,暑假选专业的时候,是进了一个同乡会咨询,在里面遇到了一个同乡会的师兄,然后问了好多关于如何去选专业,选学校的问题. 当时也可以报广工,广商,只不过是文科专业,不喜欢也就罢了,.现在想想,大学其实就是经过一场高考,在青春的时刻,遇到一群人,

大一自告奋勇当了学委,后来发现当个学霸真没什么意思,和高中没什么区别,并且社会也并不需要学霸.妹子又不想找,理工科大学的妹子只能呵呵了.最后万幸的是,加入了无线电爱好者协会这个大家庭,真的好棒,一群2B青年为了各自的梦想在一个实验室里奋斗着,待在实验室就不想走了,这才是我向往的大学生活.大二选择了飞思卡尔,付出了很多,放弃了寒假,暑假,无数次修车,无数次挑灯夜战,学到了很多东西,虽然最后比赛出意外车坏了,拿了个安慰奖,但最起码,大二这年是过得最充实最垮了的,感谢我的队友,感谢大无协.   比完赛