banner
hughie

hughie

热爱技术的小菜鸟, 记录一下所学所感

Queryable-在iphone上使用CLIP进行照片搜索

工具分享#

Queryable可以在手机上使用自然语言离线模糊搜索照片。

22-Queryable-logo

特点#

Queryable 是一个开源的 iOS 应用程序,利用 OpenAI 的 CLIP 模型在相册中进行离线搜索。Queryable 使用自然语言语句搜索照片。离线运行,隐私友好。

原理#

22-Queryable-arch

这个工具基于CLIP模型,CLIP 的原理是将所有相册照片使用 CLIP Encoder 进行编码,计算图像向量并保存它们。对于每个新的文本查询,使用 Text Encoder 计算相应的文本向量。比较此文本向量与每个图像向量之间的相似性。排名并返回前 K 个最相似的结果。

项目使用的是 CLIP ViT-B/32 模型微调,使用中文效果会差点。

平台#

AppleStore


声明#

本文仅作为工具分享记录。
本文与Hblog保持同步。

加载中...
此文章数据所有权由区块链加密技术和智能合约保障仅归创作者所有。