Улучшал подобный подоконник лет 10 назад. Цветы нужно было ставить во все окно (1,5м). Заказывал из доски 40ммх200х1500, сверлил в стене отверстия для трубок. И в подоконнике. И насаживал подоконник на трубки, предварительно залив в отв эпоксидную смолу (диам трубок 14-16мм, стенка 2-2,5мм) излишек смолы выходил из дерева и бетона. И подоконник садился намертво. А затем притягивал к стене крепежом. на всякий случай, до схватывания клея.
На пену ставить бы не рискнул - пена от влажности и температуры воздуха меняет свой объем - слишком велика вероятность получить плавающий подоконник.

по замене подоконников возможны два варианта развития событий:
1) Выдираете старый - он сидит на пене, и ставите новый, можно так же на пену, но придется немного подолбить стену еслт планируете сделать его шире чем он сейчас у вас.
2) Сверху на старый наклеиваете новый плстиковый, он длиной от 1,5 до 3 м., он Г-образный, закрывает старый, по бокам пластмассовые заглушки, на жидкие гвозди или силикон.

Я думаю, чо через год-другой надо будет уже и окна менять. Тогда заодно и подоконники нормальные ставить.
Оконщики мне по секрету сказали, что эти окна - дерьмо. Вернее, может не так категорично, но профиль самый дешевый, а значит под действием солнца деформируется. А тут еще и дом " поедет" наверняка. Вобщем они дали срок этим окнами лет пять, но я бы не была столь оптимистична. Вообщем я бы хотела годика через 2-3 эти окна поменять. А заодно тогда и подокнники и откосы сделать. А пока меня устроят и наклееные на старые.