Ответ зависит от режима балкона после ремонта. Если балкон остаётся холодным (холодное остекление, без цели держать комфортную температуру), утепление всех стен обычно не требуется. Если цель — тёплый балкон (тёплое остекление, герметизация, утепление и отделка), то утепляют не выборочно, а по контуру: все наружные ограждения, которые граничат с улицей.
Ключевой принцип из строительной физики: если сделать утепление кусками, появляются мостики холода и зоны, где температура внутренней поверхности падает ниже точки росы. Это прямой путь к конденсату, наледи и грибку.