Mellan 1958 och 1964 spelade Scherer totalt 36 matcher för det tjeckoslovakiska fotbollslandslaget. Han var en del av den tjeckoslovakiska truppen under fotbolls-VM i Sverige 1962, där han dock inte deltog i några matcher, och i Chile 1962, där Tjeckoslovakien tog sig till finalen men slutade tvåa efter att ha förlorat mot Brasilien. I VM 1962 gjorde Scherer totalt tre mål; ett i kvartsfinalen mot Ungern och två i semifinalen mot Jugoslavien, och blev känd som en av de främsta tjeckoslovakiska målskyttarna.[2]
På klubbnivå spelade Scherer bland annat i Slovnaft Bratislava i Tjeckoslovakien. Han spelade även bland annat för franskaNîmes Olympique, och emigrerade 1973 till Frankrike.[3]