Проблемы с приватизацией квартиры из-за неправомерной выписки во время службы в армии

Был выписан из квартиры в связи с уходом в армию в 1997-2003 год, но я там небыл! При получении военого билета с отметкой не служил узнал что был выписан из квартиры! Получил новый паспорт с пропиской в 2003 году непридал этому значения! Но сейчас возникли проблемы с приватизацией квартиры не дают сделать приватизацию на себя просят писать отказ от приватизации на родственников каторые в квартире проживают или идти в суд доказывать, что жил и никуда не уходил. Как быть! Законно ли это? с приватизации пришол отказ!