George byl hluboce oddaný a trávil hodiny v modlitbě, ale jeho zbožnost nebyla sdílena jeho bratry. George byl zděšen tím, co viděl jako jejich volnou morálku. V roce 1770 byl jeho bratr princ Henry, vévoda Cumberland a Strathearn, odhalen jako cizoložník a následující rok Cumberland si vzal mladou vdovu, Anne Horton. Král považoval ji za nevhodnou královskou nevěstu: pocházela z nižší společenské třídy a německý zákon zakázal jakékoli děti dvojice z hanoveriánského dědictví. George trval na novém zákoně, který v podstatě zakazoval členům královské rodiny legálně se oženit bez souhlasu panovníka. Návrh zákona byl nepopulární v pozdějším parlamentu, mezi vlastními ministry George, ale jakožto Zákon o královských manželstvích byl nyní schválen. Krátý král George byl krátce po roce 1772 odhalen jako cizoložník a následující rok Cumberland se oženil s mladou vdovou vdovou,
Maria.