tributacion de vivienda no habitual.¿se puede añadir al valor de adquisición los pagos anuales de la hipoteca?

Buenas a todos.
Compré un piso en 1999, por 7,5 millones ptas.
Lo vendí en 1995 por 19 millones. En la declaración de la renta de 2006, declaré la venta de ese piso, que no era mi vivienda habitual.En el valor de adquisición, incluí el Iva correspondiente de la compra inicial, los gastos de notario de la compra y también incluí los pagos de la hipoteca desde que lo compré, hasta que lo vendí, incluyendo la cancelación final de la hipoteca, pues todo ello es lo que realmente me gasté en el piso.
Hacienda me dice que no, que la ganancia que yo he tenido es exclusivamente la diferencia entre la venta(19 millones) y lo que valió el piso en el momento de su compra (7,5 millones más el IVA y más los gastos de notario), sin tener en cuenta los pagos posteriores de hipoteca y claro según hacienda he ganado más de lo que yo declaro y por ende debo pagar más.
Tiene razón hacienda?
Gracias