此诗描绘了一位前朝官员归隐后，其居所与楼观之间的情景与哲思。首句“罢归关令存遗宅”，点明了人物身份与归隐背景，暗示其曾为官一方，如今卸下官职，回归故里，留下宅邸。次句“羽驾真人有旧丘”，以“羽驾”和“真人”形容其归隐后的超凡脱俗，仿佛已接近神仙境界，与世隔绝。

接着，“水石自含仙气爽，烟云常许世人游”两句，通过自然景观的描写，营造出一种超凡脱俗、与世无争的氛围。水石间似乎蕴含着仙气，给人以清爽之感；而烟云缭绕，似乎允许世人前来游览，既展现了自然之美，也暗喻了隐士与世人的关系。

“悠悠天道推终始，扰扰尘缨滞去留”两句，进一步揭示了人生的哲理。天道自然运行，有始有终，而人间世事纷扰，人们在追求与放弃之间徘徊。这两句表达了对人生短暂与世事无常的感慨，以及对超脱世俗、顺应自然之道的向往。

最后，“君看一官容易舍，老来栖止占山陬”两句，以旁观者的视角，对归隐者的行为进行评价。归隐并非易事，尤其是对于年老之人而言，选择在山陬（山脚）安身立命，更是需要勇气与智慧。这两句既是对归隐者决断的肯定，也是对其生活态度的赞美。

整体来看，这首诗通过对归隐生活的描绘与哲理的探讨，展现了宋代文人对自然、人生及隐逸生活的独特见解，体现了宋代文人崇尚自然、追求精神自由的文化倾向。