Polly jobbade för Zenith Electronics där han började på lagret och jobbade sig upp till reservdelar och producerade företagets första katalog. Han flyttade sedan till utvecklingsavdelningen där han bland annat jobbade på radarutrustning för det amerikanska försvaret under andra världskriget.
Mest känd är han dock för att 1955 ha uppfunnit den första trådlösa fjärrkontrollen Flash-Matic. Med hjälp av en ljuskälla och fotoceller i skärmen kunde man sätta på och stänga av TV-apparaten samt byta kanal. 1996 fick han tillsammans med kollegan Robert Adler en Emmy för arbetet med fjärrkontrollen.
Han jobbade även på bilradio med knappar samt bidrog till video disk, en föregångare till DVD.