Reinversión parcial venta de vivienda

Hola,
En 2007 vendí un piso de mi propiedad del cual tuve unos beneficios. Estos han ido integramente a amortizar parcialmente una hipoteca de una casa nueva que tengo al 50% en propiedad con mi pareja.
He estado revisando este tema en hacienda y me reclama el pago de 23000€ alegando que esa reinversión, al ser en una vivienda de la que poseo sólo el 50%, considera que del beneficio sólo he reinvertido la mitad ya que la cantidad aportada corresponde al 50% a cada uno de los copropietarios.
También me siguieren que vaya al banco a modificar las escrituras de la hipoteca para que conste como si ese dinero reinvertido sólo fuese mio y por lo tanto sacarme a mi del prestamo por habar saldado mi parte, pero no la de mi pareja.
Es esto factible.
Alguna otra alternativa?
Desde luego no comprendo la situación ya que una reinversión está exempta de impuestos y eso es exactamente lo que he hecho, meter hasta el último euro en la adquisición de nueva vivienda.
Muchas gracias!