search

unit-mesh / auto-dev

🧙‍AutoDev: The AI-powered coding wizard（AI 驱动编程助手） with multilingual support 🌐, auto code generation 🏗️, and a helpful bug-slaying assistant 🐞! Customizable prompts 🎨 and a magic Auto Dev/Testing/Document/Agent feature 🧪 included! 🚀
https://ide.unitmesh.cc/
Mozilla Public License 2.0
2.76k stars 317 forks source link

聊天支持发送图片 #205

Open lecion opened 3 months ago

lecion commented 3 months ago

Feature Proposal: [聊天支持发送图片]

Description

聊天支持发送图片

Motivation

希望能够用到多模态 LLM，比如 GPT-4o，用于完成对于图片的理解，进一步能够实现 Design2Code 的相关功能

Proposed Solution

目前想了两个交互：

  1. 聊天窗口增加图片上传
  2. 图片放到工程目录下，在 IDE 中选择图片右键能触发对应的 action 等
phodal commented 3 months ago

暂时没有可以测试的模型，欢迎来 PR 🤣🤣