Мой муж осужден и в зале суда его паспорт не взяли,а вернули мне

Мой муж осужден и в зале суда его паспорт не взяли,а вернули мне, сейчас начальникколонии где муж отбывает наказание требует паспорт от мужа,что б я его передала, в противном случае говорят, что этот паспорт анулируют, а новый выпишут, в личном деле копия паспорта есть, муж ничего никому не должен ,он пенсионер.Правомерно ли требования начальника привезти паспорт им.Ведь это документ и откуда я знаю, что он будет в деле. Прошу ответить.