Обычно мы говорим: река, покрытая льдом, застывшая река. Сравни эти выражения со строкой из стихотворения: брега с недвижною рекою.

Выражение "брега с недвижною рекою" поэтически описывает реку, которая замёрзла и не течёт, создавая картину полной тишины и покоя, что подчёркивает красоту зимнего пейзажа.