Это второе условное предложение, описывающее нереальную ситуацию в настоящем. Конструкция: If + Past Simple, Subject + would + Verb (base form).
Глагол 'go' после 'would' остается в основной форме.
If I weren't so lazy, I would go to the gym.