Non si può evitare un errore 404 per pagine o articoli cancellati. Mai cancellare post o pagine a meno che non sia strettamente necessario, e questo non è il caso.
Il consiglio quindi è di non creare un post o una pagina, ma trovare un altro sistema, che può andare dall’uso di un widget ad un pop-up, ad una qualsiasi altra cosa che non implichi un permalink.