Completați următoarea frază: În 1850, Penniman l-a învins pe democratul în funcție Alexander W. Buel pentru a fi ales ca Whig din districtul 1 al Congresului din Michigan în al 32-lea Congres, de la 4 martie 1851 până la 3 martie 1853. A fost primul cetățean din Plymouth ales în Congresul Statelor Unite. El nu a fost candidat la re-nominare în 1852. El a fost membru al convenției care s-a întrunit sub stejari la Jackson, Michigan, la 6 iulie 1854, la organizarea Partidului Republican din Michigan. A fost delegat la
Convenţia Naţională Republicană din 1856 din Michigan.