Das Pfarrhaus, im Mittelpunkt des Dorfes und des Pfarrzentrums, wurde 1985/86 neu erbaut. Es hat eine Wohnfläche von 160 Quadratmetern.
Die Pfarrei St. Martin Pfraundorf war bis zum Jahre 2003 mit eigenen Priestern besetzt, die das Pfarrhaus bewohnten. Mit dem Weggang von Pfarrer Albert Weihrich in den Ruhestand wurde die Pfarrstelle nicht mehr besetzt, die Pfarreiengemeinschaft Beratzhausen – Pfraundorf wurde gebildet.
Im Pfarrhaus wohnte anschließend die Gemeindereferentin mit Familie. Nach deren Auszug wurde es an eine private wohnungssuchende Familie vermietet.
Die Pfarrverwaltung befindet sich weiterhin im integrierten Pfarrbüro des Pfarrhauses.