Herbertas įžengė į politiką, kai 1854 m. Vasario mėn. Jis buvo sugrąžintas į Ludlow, nesuderinamas, ir laikė vietą, kol jis atsistatydino 1860 m. Rugsėjo mėn. Jis toliau tarnavo kariuomenėje ir buvo paskirtas sir De Lacy Evans'o Rytų armijos divizijos generalinio komisaro pavaduotoju. Jis nusileido į Krymą, kur buvo sunkiai sužeistas Alma mūšyje.
ir Sevastopolio apgulį ir taip pat tarnavo Inkermano mūšyje. Jis pakeitė serą Richardą Airey kaip viso britų kariuomenės generalą nuo Airey sugrįžimo į Angliją iki Krymo evakuacijos. Už savo tarnybą Krymo kare jis buvo paskirtas karalienės Viktorijos aide-de-camp, Bath ordino bendrininku ir pulkininku (brevetiniu laipsniu, 1854 m. lapkričio 28 d.), taip pat gavo Turkijos, Sardinijos ir Prancūzijos vyriausybių riterių titulus.