Dataset explanation.

[1shifeng]

你好，我想问数据中格式数据集'sharp_images'的形状： (99, 7, 360, 640, 3)，这个7代表着模糊图像曝光时间内的七帧图像，对应着七帧图像进行学习是吗，那么输出的是一张图像，输出的是和99张清晰图像中对应的那张进行评价的是吗

[1shifeng]

又或者是模糊图像对应99张清晰图像中对应的一张进行学习，然后和这七帧图像进行指标衡量，是哪一种

[chenkang455]

哈喽，这里的数据格式是这样的，每一张模糊图（有一段曝光时间）对应一段事件流以及七帧清晰图形。在计算指标的时候，论文里既对比了单帧清晰图（0，1，2，3，4，5，6中的第三张），也对比了整个图像序列。理论上模糊图对应的是第3张图，但由于模糊图的形成需要一段曝光，我们也可以利用事件从中恢复出曝光时段内0到6张清晰图。 这里的99是一个h5文件中整个数据集中模糊图，清晰图和事件成对数据的个数。可以参考一下论文的框架图，模型输入是模糊图和事件流，输出是一个残差图像序列，接着根据去模糊模型可以得到一个清晰图像序列，也就是这里对应的7帧图像。

[1shifeng]

单张对比，也就是模糊图像对应这七帧进行学习，之后输出一张去模糊图像和第三张即第四帧对比计算指标是吗，但是我打印模型输出格式为Output shape: torch.Size([1, 6, 360, 640])这里是什么意思

[chenkang455]

单张对比，也就是模糊图像对应这七帧进行学习，之后输出一张去模糊图像和第三张即第四帧对比计算指标是吗，但是我打印模型输出格式为Output shape: torch.Size([1, 6, 360, 640])这里是什么意思

是的，单帧图像对比是您理解的这个意思，模型输出之所以是这个是因为模型不是直接输出清晰图形，而是输出一个残差序列（共6帧），在这个后部分还存在一个利用残差序列和模糊图来进行去模糊的一个过程（可以得到中间帧，也可以得到整个图像序列），您可以参考更新的event_deblur.py 文件来理清整个计算过程。

[1shifeng]

这个意思，明白了，感谢！！！

[1shifeng]

还有损失的话也是只计算和第四帧的损失吗？以第四帧损失为基准，不计算其余六帧

[chenkang455]

还有损失的话也是只计算和第四帧的损失吗？以第四帧损失为基准，不计算其余六帧

您可以参考一下论文里的实现，损失函数包含两部分，一部分是残差损失，这个是针对整体序列的，另外一部分是去模糊损失，针对中间帧的。

[1shifeng]

你好，我想再问一下REBlur数据格式和GoPro完全不一样，1-1-50以及1-1-50-xiaohui是什么意思，如果我想用这个数据集可视化，是怎么解决这个数据格式问题

…

------------------ Original ------------------ From: chenk ***@***.***> Date: Mon,Jan 6,2025 11:21 AM To: chenkang455/TRMD ***@***.***> Cc: 1shifeng ***@***.***>, Author ***@***.***> Subject: Re: [chenkang455/TRMD] Dataset explanation. (Issue #8) 还有损失的话也是只计算和第四帧的损失吗？以第四帧损失为基准，不计算其余六帧 您可以参考一下论文里的实现，损失函数包含两部分，一部分是残差损失，这个是针对整体序列的，另外一部分是去模糊损失，针对中间帧的。 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: ***@***.***>

[chenkang455]

你好，我想再问一下REBlur数据格式和GoPro完全不一样，1-1-50以及1-1-50-xiaohui是什么意思，如果我想用这个数据集可视化，是怎么解决这个数据格式问题
…
------------------ Original ------------------ From: chenk @.> Date: Mon,Jan 6,2025 11:21 AM To: chenkang455/TRMD @.> Cc: 1shifeng @.>, Author @.> Subject: Re: [chenkang455/TRMD] Dataset explanation. (Issue #8) 还有损失的话也是只计算和第四帧的损失吗？以第四帧损失为基准，不计算其余六帧 您可以参考一下论文里的实现，损失函数包含两部分，一部分是残差损失，这个是针对整体序列的，另外一部分是去模糊损失，针对中间帧的。 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

可以参考 event_deblur.py 这个文件，里面使用了REBlur数据集。