介绍
Waffles 英文原意是蜂蜜甜饼,在这里却指代一个很强大的机器学习的开源工具包。
Waffles里包括的算法特别多。涉及机器学习的方方面面,推荐系统位于当中的Waffles_recommend tool,大概仅仅占整个Waffles的1/10的内容,其他还有分类、聚类、採样、降维、数据可视化、音频处理等许很多多工具包,预计能与之媲美的也就数Weka了。
你能够在waffles看到关于这个工具的具体内容。
你还能够訪问waffles的github网站。
waffles与其它的机器学习工具的差别:
- 仅仅给你提供实用的工具,让你能够任意使用。
- waffles是在CC0(公共领域)证书下公布的,所以它没有不论什么法律限制。
- waffles apps是薄封装的C++类库。
- waffles对脚本非常友好。而且被设计成能够和自己主动化流程使用。
- waffles工具非常高速。由于它们是以本地应用程序被开发的。
- waffles的主要库没有外部依赖(除了标准C++库)。
- waffles不依赖不论什么平台或虚拟机,所以它不会限制你的分配方案。
- waffles的算法能够自己主动调整自己的參数。
- 全部的学习者都支持多维标签。
- waffles的工具自己主动过滤数据类型,所以你能够使用不论什么有监督的学习进行分类或回归,而且不须要操心输入模式的数据类型。
Waffles的命令应用程序
waffles提供下面命令行应用程序,每一个都包括运行机器学习操作的几个工具:
- waffles_audio包括处理音频文件的工具。
- waffles_cluster包括工具的聚类。
- waffles_dimred包括用于降维。属性选择等等的工具
- waffles_generate包括样本分布、样本管,并产生某些类型数据的工具。
- waffles_learn包括监督学习工具。
- waffles_plot包括数据可视化工具。
- waffles_recommend包括协同过滤。推荐系统,归一化等工具。
- waffles_sparse包括从稀疏数据。文档分类等学习的工具。
- waffles_transform包括操纵数据。乱排,交换柱、矩阵运算等工具。
Building on Linux
尽管项目主页也提供了在windows上使用的办法。可是我在尝试后并没有成功。
假设你能在windows上执行出几个demo,那就恭喜你啦!
所以这里还是在linux上做測试,和曾经一样,我用的是Ubuntu14.04。
想要编译代码,你的linux必须安装有g++,而且尽量版本号高一些,4.6及以上。
假设你没有g++,能够按照以下安装。
假设你使用的是Debian或Ubuntu。使用这个命令:
sudo apt-get install g++ make
假设你使用redhat或者fedora,使用这个命令:
sudo yum install g++ make
把waffles上传至linux(或者你能够从git上直接clone。
使用这个命令:git clonehttps://github.com/mikegashler/waffles.git),进入目录:
cd waffles/src
然后输入:
sudo make install
假设出现一大堆编译的语句,那么恭喜你编译成功了。
按道理来说编译过程就是这么简单,可是我在初期尝试的过程出错了。错误例如以下:
make -j 5 -C GClasses install
make[1]: Entering directory /home/ckf/waffles-master/src/GClasses‘make: Entering directory
/home/ckf/waffles-maste/src/GClasses‘
rm -f ../../lib/libGClassesDbg.a
make: *** No rule to make target ../../obj/GClasses/dbg/G3D.o‘, needed by
../../lib/libGClassesDbg.a‘. Stop.
make: *** Waiting for unfinished jobs....
make: Leaving directory /home/ckf/waffles-master/src/GClasses‘make[1]: *** [install] Error 2make[1]: Leaving directory
/home/ckf/waffles-master/src/GClasses‘
make: *** [INSTALL_GClasses] Error 2
我在github上询问了开发者。结果人家说在他的Ubuntu14.04上尝试了一遍并没有出错,于是我依照他的步骤又试了一次:
$ git clone https://github.com/mikegashler/waffles.git
$ cd waffles/src
waffles/src$ sudo make install
非常尴尬。还是出错。然后又一个人回答我说在他的Ubuntu14.04上尝试也没有出错。这里不得不多说一句,这些老外真的非常热心。非常感谢他们。
最后还是第一位开发者提供了可行的解决的方法(事实上在项目主页的Building on Linux上也有,就是另外一种办法):
$ cmake
这个命令会生成全新的和之前不同的makefiles。然后再输入:
$ make
来编译。
这样操作之后,没有错误,编译正常。
cmake步骤例如以下:
make编译步骤例如以下:
demo执行
接下来给大家执行几个demo。
hello_console
进入src文件夹,输入‘make’进行编译。然后会生成一个bin文件夹,进入bin文件夹执行生成的那个文件:
其它几个demo都差点儿相同,这里不赘述了。
recommender system
假设你在之前就试图尝试这个demo。会有编译错误,可是如今尝试没有错误了。原因是我在github上询问开发者是否还有recommender system的样例时。他们回答说有。可是有编译错误(这个错误不知怎么通过了他们的測试)。可是已经立刻修复了(他们显然是尝试了一遍才发现了bug。然后在第一时间改动了)。
所以假设你如今訪问项目的github主页。你会发现demos的文件夹在不久前被改动过。而其它几个文件夹却是半年甚至两年没改动过了。改动的就是那个编译错误(刚刚看了下,他们又在demos里添加了一些功能)。
如今測试一下recommender system的样例。
recommender system在demo文件夹的名字是community。相同进入src文件夹进行编译,然后在生成的bin文件夹中执行:
过一会之后会在浏览器中出现例如以下界面:
在以下会有创建账号的超链接,点击进入:
第一个账号请取名为root,这样才干够添加新的商品:
这个推荐系统假设想要全然显示出效果,你须要加入足够多的topic而且邀请一些朋友来注冊账号。然后不停的评分。
官方给出的效果图例如以下:
总结
前文一共提到过9个开源的推荐系统。可是我并没有所有尝试。几个尝试的也没有深入研究它们内部的算法和代码。一方面是由于自身水平不够,还有一方面也是由于毕设没有非常多时间。
希望有研究的人能给我一些意见和建议,让我能继续学习下去。
关于我没有尝试的几个推荐系统,当中Mahout是基于hadoop的推荐系统,可是因为近年来人们研究的方向開始转向spark(好火呀这个,貌似stack overflow上评出来的程序猿薪资前三中就有spark),故放弃尝试。
而Myrrix是基于Mahout的推荐系统,该项目组已经被Cloudera公司收购,停止了对Myrrix的开发,故放弃尝试。
Easyrec能够免费给站点提供推荐功能,仅仅须要你自己的站点向easyrec发送行为,它就能给你产生推荐,可是easyrec的项目组貌似也已停止了开发。
关于开源推荐系统的暂且先告一段落,这几天在看一本叫集体智慧编程的书。英文名是“Programming Collective Intelligence”,尽管是比較老的书了。但还是能学到不少知识,到时候给大家分享一二。
多谷歌,多问,多尝试。才干不断进步,与诸君共勉。