Žydų gelbėtojas. Rumšiškių kunigas, žydų gelbėtojas Antrojo pasaulinio karo metais. Karo metais kun. J. Žemaitis išgelbėjo apie 100 žydų vaikų, už tai 1999 m. buvo apdovanotas Žūvančiųjų gelbėjimo kryžiumi. 1956-1994 m. buvo klebonu Rumšiškėse ir iki 1972 m. dėstė Kauno tarpdiecezinėje kunigų seminarijoje. Daug pastangų įdėjo tam, kad iš senųjų Rumšiškių į naująsias būtų perkelta medinė bažnyčia ir varpinė. Nuo 1994 m. rugpjūčio 19 d. buvo Rumšiškių parapijos altarista. Palaidotas Rumšiškių bažnyčios šventoriuje.