Czy nabywcy usług mają prawo do odliczenia VAT z faktur wystawionych od istniejącego, jednak niezarejestrowanego kontrahenta?

Podatnik (PKPiR, niezarejestrowany do VAT) wykonał usługi budowlane wystawiając fakturę VAT. Nie jest zarejestrowany do VAT, gdyż nie dopełnił tego obowiązku zakładając firmę. Podatnik od początku był przekonany, że musi rozliczać VAT - złożył jednakże błędną deklarację VAT-7K za I kwartał 2017 r. oraz wpłacił podatek należny. Prowadzi również rejestry VAT oraz PKPiR. W obecnym czasie dowiedział się, że niestety nie może rozliczać VAT - musi go wpłacić z art. 108 u.p.t.u.

Czy nabywcy usług podatnika, otrzymując w okresie kiedy był jest zarejestrowany do VAT, będą mogli odliczyć VAT z faktur przez niego wystawionych?