ai开源项目 本周生成式AI开源项目最新进展

❶项目名称：

★开源实现代码

★发布文生图应用开源版本，并更名为

★可在线进行AI图像生成、编辑和修复等操作，并提供简易的用户界面，开发者也可将其部署到本地，以实现图像生成

❷项目名称：SAM Track

★开源实现代码

★浙江大学等提出SAM-Track，基于SAM的通用视频分割范式

★允许用户在视频中精确有效地分割和追踪任何物体，同时利用了SAM、DeAOT、-DINO等视觉基础模型，能够泛化到不同领域的任务中

❸项目名称：

★开源实现代码

★港科大提出的基于SAM分割渲染深度图像的工具箱

★将RGBD图像渲染为RGB图像并送入SAM进行分割，在多个数据集上表现出色，项目内提供源码和多个演示示例

❹项目名称：-SAM-

★开源实现代码

★南科大提出基于SAM技术的医学图像分割应用，可同时支持2D和3D分割范式

★相比直接将SAM应用于医学图像，该项目做了多方面的适配以提高分割精度

❺项目名称： To Image

★开源实现代码

★+ 相结合，能从任意内容生成图像的工具

★可与集成，并提供在线演示和 的演示，支持模态包含文本、图像、音频、热成像等，项目内提供本地部署指导和多种示例

❻项目名称：

★开源实现代码

★新国立、清华等提出，以轻量级的方式加速、定制多模态大模型

★以十分之一的时间将已有多模态对话模型的视觉模块迁移到新语言模型，达到类似或更优效果并极大减小算力开销

❼项目名称：PKU

★开源实现代码

★北京大学PKU-团队开发的高度模块化的开源RLHF框架，通过安全的RLHF方法进行约束对齐LLM研究

★提供训练数据和可重复的代码流程 支持流行的预训练模型（LLaMA、OPT等）的SFT、RLHF和安全RLHF训练

最新资讯欢迎加入