Czy podatnik może dokonać odliczenia podatku naliczonego z faktur zakupowych bez podziału ze względu na udział we własności?

Prowadzę gospodarstwo rolne o pow. 7,21 ha. Jestem zarejestrowanym płatnikiem VAT. Rozpocząłem budowę przechowalni. Wydatki udokumentowane są fakturami wystawionymi na mnie i zapłacone z mojego konta bankowego. Przechowalnia jest stawiana na działce, będącej współwłasnością moją i moich rodziców. Starosta wydał pozwolenie na budowę na wszystkich współwłaścicieli. Uzyskałem kredyt na inwestycję. W stosownym zaświadczeniu bank wyjaśnia, że to ja jestem głównym kredytobiorcą, środki i rozliczenie kredytu są z mojego rachunku bankowego, natomiast rodzice są współkredytobiorcą ze względu na fakt, iż działka jest ich współwłasnością. Rodzice są rolnikami "ryczałtowymi". W trakcie kontroli urząd skarbowy stwierdził, że przysługuje mi prawo do odliczenia w 1/3 części.

Czy urząd ma rację?