Ferenc Xavér Haller nasceu em Varasdon, a 22 de dezembro de 1716. Entrou na Ordem dos Jesuítas em 1733; segundo as fontes, ou a 27 de outubro em Trencsén, ou a 3 de novembro em Viena. Fez o noviciado em Viena. Em 1736, estudou na escola normal de Zagreb; a partir de 1737, frequentou cursos de lógica, metafísica e física em Graz, tendo depois estudado e lecionado em Zagreb, Varasdon, Graz e Viena. Entre 1744 e 1747, concluiu o curso de Teologia em Nagyszombat; em 1748, cumpriu o terço em Besztercebánya; e, entre 1749 e 1750, lecionou Matemática em Liubliana.

As fontes posteriores confundiram frequentemente József Haller com o jesuíta, e também interpretaram erroneamente a designação «Quito». Ferenc Xavér Haller não foi incluído nos preparativos da expedição à fronteira hispano-portuguesa simplesmente como missionário de Quito, mas sim como jesuíta erudito, devido aos seus conhecimentos de matemática e astronomia. Chegou a Cumaná em 1754, tendo depois atuado na região do Orinoco-Guiana. Em maio de 1755, ou a 24 de junho, algures entre Trinidad e a Guiana, faleceu em consequência de uma doença febril tropical.