扩散模型更懂复杂提示词！Pika北大斯坦福开源新框架，利用LLM提升理解力
扩散模型更懂复杂提示词！Pika北大斯坦福开源新框架，利用LLM提升理解力Pika北大斯坦福联手，开源最新文本-图像生成/编辑框架！
来自主题: AI资讯
7589 点击 2024-01-24 14:20
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
Pika北大斯坦福联手，开源最新文本-图像生成/编辑框架！
主题驱动的文本到图像生成，通常需要在多张包含该主题（如人物、风格）的数据集上进行训练，这类方法中的代表工作包括 DreamBooth、Textual Inversion、LoRAs 等，但这类方案因为需要更新整个网络或较长时间的定制化训练，往往无法很有效地兼容社区已有的模型，并无法在真实场景中快速且低成本应用。
将2D扩散模型的强大图像生成能力与再绘策略的纹理对齐能力结合起来，Repaint123能够在2分钟内从零开始生成具有多视角一致性和精细纹理的高质量3D内容。
谷歌新设计的一种图像生成模型已经能做到这一点了！通过引入指令微调技术，多模态大模型可以根据文本指令描述的目标和多张参考图像准确生成新图像，效果堪比 PS 大神抓着你的手助你 P 图。
扩散模型在图像生成方面取得了显著的成功，但由于对输出保真度和时间一致性的高要求，将这些模型应用于视频超分辨率仍然具有挑战性，特别是其固有的随机性使这变得复杂。
在 Microsoft Ignite 开发者大会上，英特尔和微软宣布将合作对英特尔 Arc 图形解决方案的 DirectML 进行优化。结果表明，英特尔更新 Arc Alchemist 驱动程序后，在 AI 图像生成器 Stable Diffusion 中实现了 2.7 倍的性能提升。
AI图像生成，已经进入了秒速级别，只要4步推理就能完成绘制，最快更是能在1秒之内完成。现在，清华大学联合HuggingFace的研究人员，推出了全新的绘图模型加速模块。
Stability AI是一家人工智能 (AI) 初创公司，因其 Stable Diffusion 图像生成软件而闻名，据报道已筹集约 5000 万美元融资。
开源图像生成大模型 Stable Diffusion（SD） 的开发商 Stability AI 今天宣布了其 Stable Diffusion 平台的多项新增强功能。 这些更新不仅提供了令人兴奋的文本转图像新功能，而且还涉足 3D 内容创建领域。
「木目AI」（又称Artisse AI）是一款AI照片生成app，同时拥有App和小程序两端。从使用方式上，木目AI和现在大多数图像生成应用类似，采取“用户上传照片-生成图像”的模式。