皇室典範の第二十三条を杓子定規に条文通り解釈すると、上皇は陛下ではなく殿下
陛下と敬称を付けられるのは天皇、皇后、太皇太后及び皇太后だけ

俺も個人的には上皇は陛下ってイメージなんだけどな