Acredito que você já tenha resolvido seu problema.
Mas o que você queria era só limpar o filtro, não retirar. Não é?
Você pode usar AutoFilter.ShowAllData, que mostra todos dados do filtro novamente.
Estou respondendo caso alguém mais questione e encontre esse tópico.