scala – 在Spark中连接稀疏向量？

如果你更加注意你正在总结或组合两个具有相同维度的向量,因此实际结果会有所不同,第一个参数告诉我们向量只有2个维度,所以[1,0] [0,1] => [1,1]并且正确的表示将是Vectors.sparse(2,[0,1],[1,1]),而不是四维.

另一方面,如果每个向量具有两个不同的维度,并且您尝试将它们组合在一起并在更高维度的空间中表示它们,那么假设您的操作可能有效,但是SparseVector类不提供此功能,并且你必须编写一个函数来做到这一点,有点像(有点必要,但我接受建议)：

def combine(v1:SparseVector,v2:SparseVector):SparseVector = {
    val size = v1.size + v2.size
    val maxIndex = v1.size
    val indices = v1.indices ++ v2.indices.map(e => e + maxIndex)
    val values = v1.values ++ v2.values
    new SparseVector(size,indices,values)
}