香氛设计AI
1. 目的
利用AI闭环整个产品设计研发环节,根据用户问题提供不同的产品设计。
产品设计包括:
成分建议,香调建议,总得原理,包装设计。
2. 项目流程
数据获取,数据处理,嵌入数据库,微调过的LLM,图片理解,comfyUI SDXL LCM模型, 前后端,vue+d3js+echarts
3. 数据获取
获取xxx网站的基本数据和获取bing中对应香调和成分的图片,特点:使用playwidgth获取香水基本信息,使用目标检测结合插件,保存网页元数据,可以一次爬取,避免重复爬取。
设计表的结构如下:
1 |
|
一条具体数据
1 |
|
4. 数据预处理
需要对数据中的评论数据使用LLM进行分析,分析香味场景,香味画面,香味情绪,香味感受。使用ChatGPT进行快速处理。
设计的Prompt如下:
1 |
|
5. 数据嵌入
上传Json数据,设定要进行向量话的字段,这里设定的字段是n个特点的拼接,当检索问答时,能够返回需要的meta数据,即原始数据对应的json字段
对Qanything进行二次开发,支持json格式,和多种prompt,以及Chatgpt的支持,向量数据库的表结构设计,能够根据保留原始数据的json信息,保存到meta中。
1 |
|
6. LLM问答
针对不同的需求,使用不同的prompt,下面1个是初始设计的prompt,1个是后续设计的prompt
1 |
|
7. 效果
初始页面:

设置页面,不同prompt和不同LLM,可以选中不同的模型,DocChat是微调过的Qwen7B模型。

点击yes后开始设计:

支持手动输入答案和预设答案,点击确定后开始设计。

流式回答,调用后端的LLM,异步绘图

前中后调的d3js绘图,前中后调结合LLM的回答和相似商品的前中后调获取。

成分图类似前中后调的逻辑

相似商品展示:

香水设计:
LLM根据香调和成分设计的prompt:
1 |
|
生成的Prompt调用ComfyUI 绘图

制造这款香水的原材料展示:

生成对应的广告宣称
Prompt:
1 |
|

香氛设计AI
https://johnson7788.github.io/2024/03/05/%E9%A6%99%E6%B0%9B%E8%AE%BE%E8%AE%A1AI/