Фразеологизмы - это устойчивые выражения, которые имеют целостное значение, не выводимое из суммы значений составляющих их слов.
Разберем каждое предложение:
1) «Мы стояли у окна и смотрели на хмурое октябрьское небо, с которого, словно пух, падал редкий снег.» - Здесь есть сравнение «словно пух», но это не фразеологизм.
2) «Его и маленькую сестрёнку воспитывала мать, истеричная, крикливая женщина, которая то и дело приходила в школу, чтобы разобраться с обидчиками её детей.» - Выражение «то и дело» является фразеологизмом.
3) «Бабушкин замер и благоговейно, словно святыню, взял её в руки, пролистал страницы, и странная восторженная улыбка появилась на его лице.» - Здесь нет фразеологизмов, есть сравнение «словно святыню».
4) «А он, готовый от стыда провалиться сквозь землю, густо покраснел, торопливо поднял её и, погладив обложку, отодвинул от себя, словно извиняясь за то, что посмел к ней прикоснуться.» - Выражение «провалиться сквозь землю» - фразеологизм.
5) «Колька, да я отдал бы тебе всю библиотеку!» - Это выражение является гиперболой, но не фразеологизмом.
Таким образом, фразеологизмами являются предложения 2 и 4.
Ответ: 2, 4