Completar la frase següent: El governador John Hunter va ordenar que es construís un fort i el Fort Phillip va ser encarregat el 1804 pel tercer governador de Nova Gal·les del Sud (en el càrrec 1800<unk>1806), Philip Gidley King, en part com a resposta a amenaces externes com un possible atac francès el 1803 i en part a causa de l'agitació interna dels presoners rebel·lants que es reflecteixen en l'única gran guerra d'Austràlia
rebel·lió de presoners a Castle Hill el març de 1804. Aquesta va ser anomenada la Batalla de Vinegar Hill ja que la majoria dels rebels condemnats eren irlandesos. Windmill Hill (més tard Observatory Hill) va ser escollit com a ubicació del fort, ja que era el punt més alt sobre la colònia, oferint unes vistes dominants de les aproximacions del port des de l'est i l'oest, el riu i la carretera a Parramatta, el país que l'envolta i de tota la ciutat de sota. La fortalesa mai no va ser completament completada i mai no es va disparar un sol tret en la ira.