En 1850, Penniman venkis aktualan demokrato Alexander W. Buel por esti elektita kiel ŭigo de la unua kongresa distrikto de Miĉigano al la Tridek-dua Kongreso, servante de la 4-a de marto 1851 ĝis la 3-a de marto 1853. Li estis la unua Plymouth-civitano elektita al la Usona Kongreso. Li ne estis kandidato por renomumo en 1852. Li estis membro de la kongreso kiu renkontis sub la kverkoj en Jackson, Miĉigano, la 6-an de julio 1854, ĉe la organizo de la Respublikana Partio en Miĉigano. Li estis delegito al la Nacia Konvencio de la Respublikana Partio en 1856
Mi venas de Miĉigano.