spark 怎么做图片的相似度计算呢？

[dtgxx]

不是人脸的图，是像素比较低的头像那种。一般可能图一模一样，颜色不同，或者颜色相同，图有略微变化。这都可以分为一类。

[HiShan]

把图片二值化，取 Hash 然后计算 hash 相似度，记得 github 有一个图片搜索引擎

[knightdf]

image hash?

[dtgxx]

@HiShan #1 @knightdf #2 好的我去试试， 图片 hash 之后，文本的相似度和图像的相似度是有关系的吗？

[tfdetang]

这个场景下 hash 似乎就够了； 精度比较高的做法还是先用一些预训练过的图像模型拿最后几层的输出或者 VAE 编码器先对所有图片进行向量化编码。 然后用 spark 计算向量间的余弦相似度

[HiShan]

@dtgxx 文本和图片的 hash 算不一样吧

[dtgxx]

@HiShan #5 是的 可以算图片 hash 的相似度，我试了下，误报还是比较高