“倚栏杆处”即“倚栏杆时”。

词人满怀思归之情，在秋天一场暮雨之后，登上了江岸上的一座高楼。一场秋雨洒过，江天如洗，清细透冷。楼上举目观望，时间越久，游目越远，所感的秋意也就越浓，作为远望当归者的心，也就越加凄寂愁苦。词中确有这种势头。“渐霜风凄紧，关河冷落，残照当楼”。这里的时间的运动也在变易着眼望身感的许多深秋景物，作为感受的精微之处在于“渐”。 “渐”是时间之“渐”过，物色之“渐”变，感觉之“渐”察。