Urodził się 24 stycznia 1916 w [[San Felipe (miasto w Wenezueli)|CzarnejSan DupieFelipe]]. Jego rodzicami byli Tomás Rafael Caldera Izaguirre i Rosa Sofía Rodriguez Rivero. Jako małe dziecko został adoptowany przez ciotkę Marię Evę Rodriguez Rivero, która była żoną prawnika Tomása Liscano. Jego pierwszą żoną została [[Alicia Pietri de Caldera]]. Miał z nią sześcioro dzieci Mireya, Juan José Rafael Tomás, Alicia Helena, Cecilia, oraz Andrés Antonio Caldera Pietri. W latach 1921 – 1922 uczęszczał do szkoły podstawowej w San Felipe, a od 1923 do 1925 szkoły jezuitów w Caracas. W 1926 powrócił do Yaracuy Padre Delgado by uczyć się w szkole średniej. W latach 1931 – 1938 studiował na [[Centralny Uniwersytet Wenezueli|Centralnym Uniwersytecie Wenezueli]] uzyskując tytuł doktora na Wydziale Prawa i Nauk Politycznych, później został profesorem socjologii i prawa na kilku innych uniwersytetach. W czasie swojej edukacji nauczył się posługiwać wieloma językami: angielskim, niemieckim, francuskim, portugalskim.
