Pagar hacienda por venta de vivienda habitual

He vendido mi vivenda habitual ( 2006 ) por 140000 euros y la compre hara 8 años por unos 68000 euros. Me quedaba una hipoteca de unos 40000 euros.
Me he comprado otra vivenda ( 2006 ), logicamente habitual , por 240000 euros y he pedido un prestamo hipotecario por 200000 euros.
Resulta que voy a hacer la declaracion en hacienda del 2006 y me dicen que tengo que pagar 3000 euros yo y 3000 mi mujer por que no he invertido todo el dinero en la compra de la vivienda nueva, cuando a la vista esta que si lo e echo.
Por favor me podeis aclarar el tema y si lo que me dicen en hacienda es correcto.

Muhas gracias

Saludos