Nathan Rybak nació en 1912 en Radom, Polonia, el segundo más joven de ocho hermanos. Su familia vivía en una granja lechera. Como la sinagoga jugaba un papel muy importante en su vida de joven, Nathan en un momento dado quería llegar a ser rabino.
Las condiciones para los judíos en Polonia se deterioraban rápidamente, y Nathan abandonó el país con su hermano menor en 1935. Sus tres hermanos mayores y una hermana también lograron escapar. De estos cuatro, dos llegaron a Nueva York, uno a Argentina y el otro a Israel. Durante muchos años Nathan intentó ahorrar dinero para sacar a los demás miembros de su familia, pero sus padres y dos hermanas no sobrevivieron al Holocausto.
Nathan y su hermano Oscar inmigraron a Nueva York en 1945 y fundaron un negocio de telas. Nathan conoció a Ruth, y se casaron en 1946. En 1948 se mudaron a El Paso y abrieron la tienda La Barata, que llegó a tener tres sucursales. Nathan y Ruth tuvieron cuatro hijos. Nathan murió en 1986.