Можно и алебастром
хотя это не лучший вариант, ибо алебастр не любит влажность.
Вы пишите что отвалилась штукатурка, перед заделыванием проблемных мест, простучите всю штукатурку, если звук "пустой" то это проблема, такая штукатурка долго на стенах не продержится.
Сами дыры (отверстия) очистите от пыли и грязи, желательно прогрунтовать с просушкой, если нет грунтовки, то хотя бы смочите их (отверстия).
Алебастр лучше разводить не большими порциями, ибо он быстро встаёт.
Сверлить, вбивать дюбеля под полку (Вы об этом спрашивали) лучше на следующий день, когда алебастр наберёт полную прочность.


Чистым цементом не надо заделывать дыры, он потрескается и отлетит, к цементу нужен песок, лучше сеянный.
Раствор цемент + песок + вода 1 к 3-м, конечно лучше алебастра, ибо прочней.
Единственный минус, он встаёт (застывает) гораздо медленнее алебастра.
А штукатурка и цемент с песком, это одно и тоже, в этом случае.