Deduccion vivienda habitual propiedad de mi mujer

Hola:

De antemano gracias a todos. Mi consulta es la siguiente:

Mi mujer heredó estando casados en regimen de gananciales un solar el cual es propiedad logicamente suyo. En dicho solar hemos construido nuestra vivienda habitual y para ello pedimos un prestamo a nombre de los dos. Una vez finalizada la vivienda, en las escrituras seguia aparaciendo como propietaria de la vivienda solo mi mujer. Durante la ejecucion de la obra me he estado deduciendo en el IRPF por inversion en construcción de vivienda habitual (hacemos declaraciones individuales aunque seguimos en regimen de gananciales) y ahora me diche Hacienda que está mal realizada la deducción porque la vivienda no es mía, sino que solo es de mi mujer.

¿Puedo hacer algo al respecto?