AI交流(进群备注:Whisper Web)

Whisper Web 是一个开源项目,允许用户在浏览器中运行基于机器学习的语音识别,无需后端服务器。它利用 WebGPU 技术实现加速,用户可以轻松进行语音转文本,并支持将识别结果导出为 TXT 和 JSON 文件格式,完全开箱即用。
Whisper Web的特点:
1. 基于 ML 的语音识别
2. 通过 WebGPU 加速运行
3. 无需后端服务器
4. 支持导出 TXT 和 JSON 文件格式
Whisper Web的功能:
1. 在浏览器中直接运行 Whisper 进行语音转文本
2. 导出识别到的文本为 TXT 格式
3. 导出识别到的文本为 JSON 格式
相关导航

LLaMA-VID开源项目 – 处理长时间视频的多模态大模型
LLaMA-VID 是一种开源的多模态大模型,专门设计用于处理长时间的视频内容,如电影。它通过使用视觉语言模型(Vision Language Models, VLMs)来结合计算机视觉和自然语言处理,从而理解和生成与视频内容相关的文本。LLaMA-VID 通过使用两个标记(Token)来表示每一帧图像或视频:一个上下文标记(Context Token)用于编码整个图像或视频中最相关或最重要的部分,另一个内容标记(Content Token)用于捕捉每一帧图像中具体存在或发生过的事物。这种方法有效地减少了长时间视频中过多无关紧要的信息,并保留了最核心的有意义信息。LLaMA-VID 能够处理单图片、短视频和长视频,并在多个视频榜单上实现了 SOTA(State of the Art)表现。
暂无评论...