В данном предложении необходимо использовать время Past Continuous, так как в предложении указано точное время действия в прошлом.
Исправленный вариант:
Brian was drinking tea at five o'clock yesterday afternoon.
Ответ: Brian was drinking tea at five o'clock yesterday afternoon.