Rakarov maakte zijn debuut voor Bulgarije in 1953. Hij heeft 58 wedstrijden gespeeld voor de nationale ploeg en hij heeft een doelpunt gescoord. Hij zat in de selectie die deed mee aan het voetbaltoernooi op de Olympische Zomerspelen 1956, waar Bulgarije een bronzen medaille won. Hij zat ook in de selectie die deed mee aan het voetbaltoernooi op Wereldkampioenschap 1962.