Czy wybierając ponownie zwolnienie, należy sporządzić remanent

Czy korzystając z ponownego zwolnienia z VAT na podstawie art. 113 ust. 11 ustawy o VAT, trzeba z chwilą ponownego wyboru zwolnienia rozliczyć i odprowadzić VAT od środków trwałych, które są i będą w dalszym ciągu używane w dalszej działalności? Urząd skarbowy każe mi odprowadzić VAT od środków trwałych na takich zasadach, jakbym likwidował działalność. Prowadzę działalność jako osoba fizyczna. Czy urząd skarbowy ma rację? Jeżeli tak, to z jakich przepisów to wynika?