Nació el 16 de mayo de 1955 en Liberec. Se graduó en el Conservatorio de Brno y la Facultad de Teatro de la Academia de las Artes Musicales de Praga. Tras su graduación, pasó a formar parte del Teatro de Vinohrady. En 1985, tras un periodo de siete años en Vinohrady, se unió al Teatro de Ypsilonka, que se había trasladado a Praga durante dicho periodo. En 1993 se convirtió en miembro del Teatro Nacional.

Cuando todavía estaba en el Conservatorio de Brno, Kaiser fue descubierto por Karel Kachyňa, que le seleccionó para interpretar al protagonista de la película Láska (1972). Hasta la década de 1980 interpretó papeles protagónicos de personajes jóvenes y románticos, aunque posteriormente dio preferencia a su vis cómica, que fue utilizada por directores como Václav Vorlíček y Zdeněk Troška, entre otros. En los años 90, Kaiser apareció en Amerika, el debut de Vladimír Michálka, y estuvo insuperable en un papel menor en Un mundo azul oscuro (2001), de Jan Sverák. Su interpretación más reciente en Shark in the Head (dirigida por Marie Procházková, 2005) es una muestra de como los realizadores checos continúan infravalorando su potencial.