Имею ли я право отказать ему в этом требовании.

Имеете право отказать, ИП также имеет право не заключать договор с Вами.

Согласно ГК РФ Статья 426. Публичный договор

1. Публичным договором признается договор, заключенный лицом, осуществляющим предпринимательскую или иную приносящую доход деятельность, и устанавливающий его обязанности по продаже товаров, выполнению работ либо оказанию услуг, которые такое лицо по характеру своей деятельности должно осуществлять в отношении каждого, кто к нему обратится (розничная торговля, перевозка транспортом общего пользования, услуги связи, энергоснабжение, медицинское, гостиничное обслуживание и т.п.).

Лицо, осуществляющее предпринимательскую или иную приносящую доход деятельность, не вправе оказывать предпочтение одному лицу перед другим лицом в отношении заключения публичного договора, за исключением случаев, предусмотренных законом или иными правовыми актами.

При необоснованном уклонении лица, осуществляющего предпринимательскую или иную приносящую доход деятельность, от заключения публичного договора применяются положения, предусмотренные пунктом 4 статьи 445 настоящего Кодекса.

Однако паспорт гражданина Российской Федерации, является основным документом, удостоверяющим личность гражданина Российской Федерации на территории Российской Федерации, а потому для заключения договора исполнитель вправе удостовериться в личности и просить паспортные данные.

Вы не предоставили, а потому он вправе отказаться от заключения договора.