Думаю,что если Вы в своих старых, деревянных окнах не найдете серьезных повреждений,к примеру крупных трещин,с которыми не справиться при помощи пены,то конечно можно. Подберите в магазине пистолетную пену,которая довольно хорошо запенивает все щели.Но,еще ,через некоторое время,когда она подсохнет,то также неплохо она должна срезаться ножом - аккуратно,чтоб не было впечатления топорной работы.Ну,а затем,можно как - то облицевать эту пену,как посчитаете нужным.Так что, вперед за работу, именно так, за что Вы бы сами захотели себя похвалить.