На олифу хорошо "ляжет" масляная краска, ибо масляная краска изготавливается на основе той самой олифы.
Так как речь о наружной части окна, то надо брать , или универсальную масляную краску (и для наружных и для внутренних работ), или для наружных работ.
Вот например такая краска "Лакра Ма-15",
это масляная краска на основе льняного масла (олифа натуральная так же изготавливается из льняного масла, чаше, хотя есть и другие варианты, например конопляное масло).
Краска атмосфероустойчивая, то есть снег, УФ-излучение, повышенная влажность, ей не страшны.
Наносится в два слоя с просушкой первого (конечно и олифу надо просушить полностью).
Работает и по дереву в томи числе (а так же по металлу).
Наносится и кистями и валиком, в Вашем случае лучше кисти.
Есть выбор по цвету, скорей всего будете окрашивать в белый цвет, это "классика" для окон, есть и белая у этой марки.
Разбавлять, перед нанесением, ни чем не надо, просто тщательно перемешайте краску.