北航杭州创新研究院科研外协项目公示

北航杭州创新研究院科研外协项目公示

北航杭州创新研究院科研外协项目公示

经项目负责人申请,根据北航杭州创新研究院科研外协项目审查相关规定,关于大数据与工业智联网平台的《图像语义可控变换:时间、天气与场景的智能优化项目》

外协项目现公示如下:

项目名称:图像语义可控变换:时间、天气与场景的智能优化服务合同

项目负责人:王胜华

项目起止时间:2024年10月08日—2025年8月31日

预算金额:******

拟合作外协单位:北京航空航天大学

外协技术内容:

本次课题的研究目标包括开发图像语义变换系统和图像语义增强系统,实现实现图片的时间、季节和天气语义信息动态调整和实现高精度的可控图像内容增强功能。

1. 开发图像语义变换系统,实现图片的时间、季节和天气语义信息动态调整

(1)目标描述:设计并实现一个智能化图像增强系统,能够通过输入简单的文本或关键词(prompt),将图片中的时间、季节和天气语义信息进行指定性变换。具体变化包括但不限于图片整体季节(如春天变为秋天或冬天)、时段(如早晨变为傍晚或夜晚)和天气(如晴天变为雨天或雪天)的调整。确保在变换过程中,图像的空间场景保持不变。(有可能有复合场景)

(2)细节:

①颜色和光照:调整季节对应的色调和光照。例如,春天的鲜花和绿叶,秋天的丰收景象和金黄田野,冬天的雪景和冰封河流。光照强度和方向的变化,例如夏天的强烈阳光和冬天的柔和光线。天空的颜色变化,从清晨的淡黄到黄昏的红橙,再到夜晚的深蓝,色彩渐变需要精确控制。

②季节特征:通过植被、天气现象和水体变化表现季节特征,例如冬天的积雪覆盖,春天的融冰和流水。(冬天植被和春天差异很大)

③外部因素:添加反映季节特征的人物和装饰物,例如冬天的厚重衣物和圣诞装饰,春天的蜜蜂和蝴蝶。

(3)预期成效:满足直播带货、商家宣传和用户种草等实际业务需求,提供了高度定制化和个性化的图像内容生成方案,有助于提升用户体验和内容质量。

2.开发图像语义增强系统,实现高精度的可控图像内容增强功能,支持在原图背景上添加定制化人物

(1)目标描述:开发一套算法和模型,能够在保持原图背景不变的情况下,按照用户输入的具体要求(如人物形态、位置等),在图像中精准地加入人物元素。生成的图像背景与原图像的相似度需达到90%以上,以确保场景一致性。(人物的数量是否需要精准,人种等细节,如亲子场景、聚会场景)

(2)细节:

①人物形态:确保添加的人物姿势、动作和服装与场景活动相匹配,例如运动服装的跑步者、正式场合的穿着者。

②人物位置:根据场景选择人物的位置,确保与背景的互动自然,调整人物的大小和位置以符合背景的透视和比例。

③光照和阴影:匹配人物与背景的光照方向和强度,为人物添加符合背景光照条件的阴影,以增强现实感。

④融合和调整:调整人物的颜色和对比度,使其与背景颜色和整体风格一致,使用边缘平滑技术减少人物与背景的分界线,使融合更自然。

(3)预期成效:该目标明确提出了图像增强的可控性和精确性,满足了商家宣传和内容生态建设中的实际需求,且具有较高的技术挑战性和创新性,能够显著提升应用场景的多样性和可操作性。

交付物

交付物

描述、指标、参数

技术报告

框架选型、技术选型、核心算法的整体设计与实现

训练好的图像语义可控变换模型、增强融合图像处理算法、阴影和光照效果优化算法等

在美团商家图像数据集上(业务场景包括但不限于住宿、?票、旅游等),针对季节、时间、天气语意场景的图像变换后,数据可用率达到60%以上。性能上,基于A100生成分辨率为1024x1024的图像在30秒以内。

在美团商家图像数据集上(业务场景包括但不限于住宿、?票、旅游等),能够在保持原图背景不变的情况下,按照用户输入的具体要求(如人物形态、位置等),在图像中精准地加入人物元素。生成的图像可用率达到50%以上。性能上,基于A100生成分辨率为1024x1024的图像在30秒以内。

原型系统

包括了基于语义理解的图像变换生成模型及可交换的使用系统和说明。

图像语义可控变换模型的训练数据集

训练使用的全部数据集,包含季节变化图像、时间段图像、天气图像、各种增强类型图像如室内室外等场景覆盖、室内室外场景人物插入的图像。

专利

基于本课题完成一个发明专利申请,专利所有权由甲方制定。

公示期:2024年9月25日—2024年9月30日(5个工作日)。

公示期间对公示内容有异议的,请以书面形式署名向研究院规划与科研部反映,反映情况要实事求是,以便调查核实。联系方式如下:

联系人:刘金媛

联系地址:北航杭州研究生院3号楼

联系电话:180*****432

电子邮箱:lynnvivia*****@163.com

北航杭州创新研究院规划与科研部

2024年9月25日



联系人:郝工
电话:010-68960698
邮箱:1049263697@qq.com

标签: 科研外协

0人觉得有用

招标
业主

-

关注我们可获得更多采购需求

关注
相关推荐
 
查看详情 免费咨询

最近搜索

热门搜索