Ответ:

На самом деле нас нервировал не стадион, а комендант стадиона дядя Вася.

Грамматическая основа: комендант нервировал (комендант — дядя Вася). Предложение простое, осложнено однородными членами, соединёнными противительным союзом не …, а …. Перед а ставится запятая.