В данном случае, нейтральным синонимом к слову "смахивал" будет выражение был похож.
Ответ: был похож
Проверь себя: «А этот мальчишка, как говорили, сильно был похож на меня» – звучит более нейтрально!
Читерский прием: Использование синонимического выражения позволяет избежать повторения одного и того же слова в тексте.