impuesto incremento patrimonial y cuestiones de venta/compra.

Buenas
Mi caso es el siguiente, recién he vendido mi piso en Madrid por 16 millones y el comprador me escrituro por esos 16 millones pues decia que el piso lo revendia y no le convenia bajar el precio en las escrituras, el piso lo escriture yo en el año 1991 por una compra de dos millones seiscientas mil pesetas, reinvierto en comprarme lo que sera mi única vivienda habitual y se escritura en 14 millones, la diferencia de los 2.6 a los 16 es enorme y temo un buen susto pero por otra parte invertire en mi casa ese dinero.
Mi pregunta es si tengo que pagar el impuesto de incremento patrimonial o me puedo librar de el por reinvertir en mi vivienda o que tipo de gastos me pueden ayudar a no pagar
Lo que no me cuadra es por que tengo que pagar por vender y tambien por comprar, es injusto y me resultaria una desfachatez que por los impuestos tuviera que pedir un prestamo hipotecario, vamos de mi trabajo en 20 años tener que pedir un prestamo para pagar a hacienda!
En fin toda respuesta se agradecera mucho
Gracias.