Skip to content

计算网络结构梯度更新时,权重不是用的w,而是更新后的权重 #6

@lb1106

Description

@lb1106

Hi
我看到CNN/train_search代码里的compute_unrolled_step这个函数,在unrolled_optimizer(即更新网络权重参数)后,并未对梯度进行回滚,
在Darts论文中的公式7,上面的w+, w-中的w应该是网络权重更新前的参数,而不是更新后的参数,不知道这个问题对不对

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions