Layers > Undo Assign

最後に行った Assign Objects 操作を元に戻します。