Les fédéralistes ont fait de lui le symbole de leur parti, mais pendant de nombreuses années, les Jeffersoniens ont continué à se méfier de son influence et ont retardé la construction du Washington Monument.