如何從K最近鄰回歸中獲得結果

Question

我想知道確定回歸數字類別的5個屬性的最佳優化。 K最近鄰回歸是最好的回歸方法，但是如何基於此回歸方法獲得可靠的結果（如數值結果中屬性的最佳值）？

Answer 1

有幾種方法可以執行此操作，具體取決於您使用的軟件類型。 您可能想首先確定K-NN回歸是否真的是滿足您需求的最佳算法，並假設您沒有過擬合等。為了首先給出某種意義，可能需要某種類型的主成分分析（PCA）或其他分析屬性優先級。

在Weka中，您可以通過將LinearNNSearch方法嵌入（包裝）到IBk學習器中來做到這一點。 實際上，您允許算法通過重復的，保留一出的交叉驗證過程來優化鄰居數。 有關如何執行此操作的說明，位於：

http://infochim.u-strasbg.fr/CS3/program/Tutorials/Tutorial2a.pdf