比如说我最近要重构世界会客厅，那么它周围的景观如何解决？即使我到现场去拍照，由于角度问题存在诸多遮挡和不连续，许多细节要落实是没法无脑硬干的。那么试试看用ai借助现有照片的整体氛围景观设计去融合我的目标建筑，甚至是仅仅提取现有照片中的建筑布局融合另一套景观设计方案以及我的目标建筑。
blend模式不兼容–ar调整尺寸，只支持square,portrait和landscape三种尺寸模式，对于我的建筑景观而言毫无疑问只有landscape可选。landscape会将图片输出设为ar 3:2.
通过describe反推的关键词加参考图得到的结果并不满意。
通过describe反推的关键词，结果不满意。
这两组关键词结合图片参考效果基本达标。等于是在继承整体氛围的情况下给了建筑布局微调以及多个角度的参考，以及一些细节上的创意。我发现它们用关键词反推直接去生成新的图结果都不满意。
和第二组用同样的参考图但关键词不同，感觉差不多，可以获取一些建筑变种。
比起前面一组沿岸的整体氛围要好一些，参考图相同关键词做了调整。
又一组江边跳空平台加红砖建筑的整体氛围，至今输出并没有给出跳空平台的设计
blend古建筑群和红砖长廊型建筑河滨走廊景观，得到古建筑群替代红砖长廊型建筑的河滨走廊景观。
独栋古建筑与北外滩滨江红砖长廊型建筑blend，得到结果也是独栋古建筑，并没有把古建筑散布成长廊型。
对成排盒子房blend独栋古建筑，古建筑依旧独栋。
独栋heatherwicker风格建筑blend成排红漆盒子房，两种建筑风格有些融合，没能达到期望的用heatherwicker风格建筑替换。
似乎当两种建筑有共同点时blend会使得目标建筑被整体氛围景观设计的参考中的建筑所污染。我一会儿试试看ps把整体氛围参考中的建筑替换为白模会不会规避污染，完美继承目标建筑的风格样式。
想要融合两种景观，效果不理想。
这组效果看上去不错，但是目标建筑依旧还是被污染了，很难在下面这4个效果图中去想象用目标建筑生成回廊式建筑。
这组相对于上一组把目标建筑改成古建筑群，效果看上去很好依旧是目标建筑被污染，原先风格大变样了。
我尝试了下在blend一次建筑风格被污染后再blend一次目标建筑，味道更靠近目标了。
将blend后被污染的古建筑群景观再次blend古建筑群，但这下把景观给抹除了。
回廊式布局给小高层加绿化。几个zoom效果不理想，并没有扩充的感觉
pan left扩图效果可以
实验中存在一些情况最终只有景观没有建筑了，可能是给的景观图片多建筑只有一个，权重影响关系。
回廊式布局给中间加浅下沉阶梯，水池。
加错综下沉阶梯转角式布局。
这个貌似可以产生河道转角景观
景观上并不好，但是建筑方面产生了奇妙的创造。
这个屋顶装饰漂亮
经过一天的测试，midjourney没有sd的control net无法精确的布局，而sd在渲染的细节上要差midjourney很多。midjourney可以通过blend多个图相似布局来强化固定布局，配套一个景观即可得到如下的这种效果。
2024-6-4更新：
midjourney自己新建一个服务器不要在bot私信里弄这样避免和别人的图混淆，但缺点是job id是记录在私信里的，还是很难翻阅定位。另外job id是有权限的，一旦换了账号就无法用job id获取之前的东西。
今天又现代风格房屋测试并不理想，没法像昨天那样复现景观施加到建筑白模上。
如果把局部地块（小区、综合商场、工业园）视为两类，一种是规则排布比如老公房小区，一种是不规则比如商品房，前者用几套定式的参考图去blend景观生成较为固定的景观方案，基本可以忽略道路连接和布局的问题。后者则是局部微分楼栋再做局部景观blend，问题是几个局部微分如何连接？
我试试看能否把景观网站上的实拍用describe反推关键词再sref之后去拟合同类而不同布局的整体氛围景观设计并将它们用于我自己的建筑布局景观结合。
目前来看17块包月的出图时速不稳定，慢的情况下平均要10分钟出一个图。再观察几天看看有没有必要升级人少的共用版。
最新的总结：
用canny应边缘配合laowang建筑大模型在sd中对自己建模的建筑做初步渲染处理，关键词empty background,flat terrain,realistic photo.4k,unreal engine rendering之类的尽量规避除了建筑外的景观元素，画布大小要和canny的画布大小相配合，开启ip和t2i adapter 强度约0.8有时候好像0.4也可以或许0.4-0.8吧，ip、t2i的垫图在pinterest找质量高一些的相似风格建筑的实拍即可。sd中得到的渲染图质量关乎midjourney 混合景观设计最终出图的质量，这是之前一直难以解决的。midjourney混合时选取两个sd的建筑渲染图强化建筑样式布局权重，使其固定，再选取一个景观，以下为用此方法实现的文艺复兴式盒子房和现代玻璃立面高楼盒子房。
2024-6-5更新：
今天又搞了一天，可能又要推翻昨天的结论，景观的添加效果与目标建筑的图片质量、布局有关系，sd在布局上可以做的很好但是图片质量不行导致最终出图不是很理想，我今天试了sdxl，它在氛围上比sd的各种模型要强一些但是色调诡异，最终我想了下用sd出位置分布再用midjourney describe反推关键词生图。其实sd中建筑本身的样式不是太重要，用midjourney覆写一遍，在大量生成的情况下总能覆盖到我想要的范围，到时候再用variation即可，在这个状态下叠加景观效果肯定更上一层楼。
在midjourney共享版使用自己开个服务器有被人删除的风险，这样看来还是在midjourney bot私信里直接搞。midjourney一轮搞出来之后对某个图做variation得到的结果在整体布局上是高度相似的，这给景观混合提供了完美的框架平台。然而即使有了效果较好的目标建筑作为原型，与景观的结合效果仍是不可预见的，因此还是得具体问题具体碰运气了。
评论