Заклеила окна
по совету Шивы 
Поролон искать не стала, да и запихивать его туда было бы нечем. Дополнительно подготовила сухую поверхность, протерев её от любой возможной пыли без влаги и по инструкции применила эту ленту:
ozon.ru/t/Blb0LEQ На пару окон ушёл почти весь рулон.
Держится хорошо продолжительное время, ничего не отклеивается. Это полностью решило проблему, из щелей больше нет воздуха. В итоге зимой это точно сделает комнаты более тёплыми, чем раньше
А если хотите дополнительно подумать о температуре в комнатах и устранить сквозняки, может помочь вот такая вещица:
ozon.ru/t/y5eV4wE Она именуется как "стоппер для двери", но на деле она устанавливается на дверь и ещё не позволяет воздушным потокам проходить под дверью. Может защищать так же от запахов, насекомых, пыли. Конкретно эта вещица двусторонняя. Сохраните себе в избранное на всякий случай, может пригодиться. Её точную длину я пока что не знаю, но если она больше, чем ваша дверь, можно установить под дверь, отрезать лишнее и временно снять до тех пор, пока не пригодится.
На случай, если по каким-то причинам конструкция ваших дверей не позволит вам надеть эту двустороннюю вещь, есть вот такая с клейкой лентой:
ozon.ru/t/86Y4qBj Она уже односторонняя, но принцип действия очень похож

Надеюсь, это полезно