使用MatplotLib可视化来自SKlearn Kmeans的稀疏输入

Question

from sklearn.feature_extraction.text import TfidfVectorizer
from sklearn.cluster import KMeans

cc_tfid = TfidfVectorizer().fit_transform(cc_corpus)
cc_km = KMeans(n_clusters = 3, init = 'k-means++', max_iter = 99, n_init = 4, verbose = False )
cc_km.fit(cc_tfid)

plt.scatter(cc_tfid[:, 0], cc_tfid[:, 1])
centroids = cc_km.cluster_centers_
plt.scatter(centroids[:, 0], centroids[:, 1], c='red', s=200, alpha=0.5)
plt.show()

我可以显示质心，但不能显示点，因为它们来自稀疏矩阵。 我该如何绘制？

Answer 1

您可以使用.toarray()将稀疏矩阵转换为密集数组：

plt.scatter(cc_tfid[:, 0].toarray(), cc_tfid[:, 1].toarray())

请注意，将所有点投影在TF-IDF向量空间的前两个维度上可能会导致非常无用的绘图。 您最好通过PCA或t-SNE传递数据，以将维数减少到2。