Fredrik Asp, Avgå!