Geboren wurde Polt in München, genau wie sein Vorbild Karl Valentin, mit dem der Dialekt-Komiker gerne verglichen wird. Die Kindheit verbrachte er in Altötting, einem bayerischen Marienwallfahrtsort. Als evangelisch Getaufter unter Erzkatholiken aufgewachsen, lernte Polt Humor einzusetzen, um dem streng geregelten Alltag zu entkommen. Die Kirche und die CDU - die beiden Spaßbremsen seiner Jugendjahre - wurden zu gern genutzten Satireopfern in Polts Bühnenshows.