多模态图像分析

TruthLens是一个基于AI的深度伪造（DeepFake）检测项目，通过视觉问答（VQA）任务重新定义检测流程。它不仅能够分类图像为真实或伪造，还能提供可解释的说明，增强检测结果的可信度。该项目采用多模态模型（如LLaVA和BLIP-2）分析图像，结合预定义问题生成和自然语言处理技术，检测合成图像中的视觉异常（如光照、纹理、对称性和反射等）。TruthLens无需训练，直接利用预训练模型，适用于复杂合成图像的检测，并在LDM和ProGAN数据集上表现出色（AUC分别达95%和97.5%）。