目标：对比Weka，Rapidminer，Ymodel的自动建模效果

数据情况：共5份数据，3份分类，2份回归

2份Kaggle经典案例，3份真实业务数据

由于Rapidminer免费版数据量限制1万条，因此对3份真实业务数据进行了抽样，样本量都控制在几千的级别。无法进行大数据量的测试。

产品情况：Weka为开源的，自动建模功能属于Weka的一个扩展模块，免费使用。Rapidminer属商业软件，虽有免费版本，但自动建模功能要收费。

整体使用体验：Ymodel建模速度最快。Rapidminer也还可以，当变量较多时，建模时间大幅增加。Weka建模要自己设定建模时间，建模速度也比较慢，并且在Weka中有时还需要手动处理一些变量类型，才能被自动建模识别。就自动建模功能来说，Weka的体验要相对差一些。

测试方法：所有的数据分为训练集和预测集，将预测结果导出后统一打分

测试结果：

1.泰坦尼克生存预测-分类

训练数据802条，12个变量

阳性样本和阴性样本比例大约3：5

在Weka中无法输出概率值（也有可能是没找到怎么输出），因此无法计算AUC

2.房价预测-回归

3.信贷公司用户逾期预测-分类

训练数据8938条，56个变量

阳性样本和阴性样本比例大约1：8

在该数据上，Weka模型是失败的，没有抓到任何阳性样本

4.保险公司保单是否发生理赔预测-分类

训练数据3470条，29个变量

阳性样本和阴性样本比例大约1：7

5.二手车交易价格预测

综合评价：在本次测试的5份数据中，不同的数据上排名各不相同，但指标差距都不大，Ymodel整体表现都还不错。三者比较而言，Weka回归模型效果好，Ymodel分类模型好，Rapidminer居中。