Выбор формы прошедшего времени глагола "go" зависит от наличия вспомогательного глагола в вопросе.
База: В английском языке для образования вопроса в Past Simple (простое прошедшее время) часто используется вспомогательный глагол "did".