台风吧 关注:288,769贴子:6,646,083

回复:【资料存档】Pix2Pix深度学习模型生成夜间可见光图像(AI-VIS)

取消只看楼主收藏回复

再来放几张











IP属地:美国358楼2024-04-20 12:40
收起回复

    回顾一下去年年底做的展望,这些方向中:
    1. 已经解决,不过当时对噪斑来源的判断不正确,噪斑实际上是dropout layer数量不够导致的。
    2. 已完成,目前模型在陆地,高纬区域,南半球,和其他卫星上的表现均有改善。
    3. 未完成。
    4. 未完成。进行过一些尝试,发现可能无法达到Diffusion的算力要求
    5. 未完成。
    6. 加入卫星天顶角后,能一定程度上模拟海面高光。高反射率的部分暂时模拟不了,不过也没什么模拟的必要。
    等会列一下新阶段的展望,先睡了(


    IP属地:美国359楼2024-05-04 13:52
    回复
      新阶段的展望,大致按照时间顺序排一下:
      1. 现有的CGAN AI-VIS主模型还没有过拟合,仍有一定改善空间,打算先炼到出现过拟合或验证集表现提升极其缓慢再停。
      2. 尝试改进超分辨率模型,一方面是扩充训练集以包含圆盘数据,另一方面也会尝试不同框架的模型。王总这边目前正在考虑ESRGAN和lokr两类模型。
      3. 有空可以试试原展望未完成的第三条。多帧云图可以化为时间差分,用几个波段10min前的图像来和现在的图像相减,不过训练集生成的逻辑得改,机动观测也得保证10分钟内定位不在飘否则用不了。
      4. VIIRS的训练打算暂时搁置一下,主要有两个问题,一个是dnb受的干扰还是相比vis多一些,第二就是练完了用途比较少,只能给VIIRS无月光的半个月提供额外的AI-VIS,直接迁移到其他卫星上技术难度很大,GAN尤其是这样


      IP属地:美国360楼2024-05-05 15:42
      回复

        600epoch版本AI-VIS模型上线dapiya,不过现在暂时没什么好看的系统
        有啥想看的TC欢迎订购,我们考完试就去画


        IP属地:美国361楼2024-05-09 23:02
        收起回复
          200epoch(前)与600epoch(后)对比,个人觉得比较明显的改善在于模型对眼内低云和眼墙阴影的理解
          先前200epoch的时候中大眼的眼内低云有一种马赛克乱糊上去的感觉,这很可能是GAN训练不充分的噪声残留,此时模型主要关注着画面整体的验证指标,顾不上风眼这一点点面积。随着训练epoch数的增多,模型开始关注到风眼这样“细枝末节”的区域。600epoch时眼内低云有一种降噪了的感觉,结构变得更加清晰了,眼墙阴影也更为立体。







          IP属地:美国363楼2024-05-10 14:55
          回复
            17Lan
            10.20 1800z


            IP属地:美国364楼2024-05-10 23:13
            回复

              600epoch为止的验证集表现
              SSIM 0.923
              PSNR 31.4
              RMSE 0.0299
              CC 0.991
              Bias 0.0003
              各指标相比上一版均有明显提升,其中最显著的是Bias从-0.0017(AI-VIS相比VIS高反射率区略暗)提升到了0.0003(基本上没有亮度的偏差)


              IP属地:美国366楼2024-05-11 09:05
              回复
                机场等转机好无聊,有没有人来点云图订单
                顺便贴一张天鹅18z


                IP属地:美国367楼2024-05-12 08:39
                收起回复

                  楼上要的强对流


                  IP属地:美国369楼2024-05-12 09:44
                  收起回复


                    海马重制,分别是12z和1630z


                    IP属地:美国370楼2024-05-12 09:45
                    回复
                      18康妮 10.01 18z 时角-40°,+60°



                      IP属地:美国373楼2024-05-14 14:05
                      收起回复
                        18玉兔 10.24 12z




                        IP属地:美国374楼2024-05-14 20:20
                        收起回复
                          15苏迪罗 08.03 12z




                          IP属地:美国375楼2024-05-14 20:23
                          回复
                            19夏浪 11.05 12z




                            IP属地:美国376楼2024-05-14 20:39
                            收起回复
                              19浣熊 10.19 1555z 1810z







                              IP属地:美国377楼2024-05-15 09:01
                              收起回复