Son père était Zsigmond Berényi, sa mère Julianna Pongrácz ; il avait cinq frères et sœurs. Il était issu de la famille des comtes Berényi de Karancsberény. Il fut l’un des premiers missionnaires hongrois. Il fut ordonné prêtre le 23 août 1824. À la demande de l’archevêque József Kopácsy d’Esztergom, il vécut aux États-Unis en tant que missionnaire de 1825 à 1852.