Гражданская война в США разделила страну. Южные штаты отделились и образовали Конфедеративные Штаты Америки, которые узаконили и защитили порабощение чернокожих. Четыре года Конфедерация восставала против Союза. 2 марта 1864 года Улисс С. Грант был произведен в генерал-лейтенанты и назначен командующим всеми армиями Союза. С того времени Грант разместил свой штаб в полевых условиях с Потомакской армией, крупнейшей армией Союза.
По завершении сухопутной кампании против армии Конфедерации Северной Вирджинии под командованием генерала Роберта Э. Ли Потомакская армия осадила город Петербург, штат Вирджиния. Именно в то время Грант решил разместить свою штаб-квартиру в портовом городе Сити-Пойнт.
Расположенный в месте слияния рек Аппоматтокс и Джеймс, поместье Аппоматтокс, принадлежавшее семье доктора Ричарда Эппса, было удобно расположено недалеко от пристани в Сити-Пойнт. Грант устроил свою штаб-квартиру на лужайке поместья, где было построено несколько хижин для размещения генерала и его штаба.
Во время своего пребывания в Сити-Пойнт Грант принимал у себя ряд высокопоставленных лиц, в том числе госсекретаря Уильяма Сьюарда, вице-президента Эндрю Джонсона и даже президента Авраама Линкольна.