史料记载，乾隆皇帝在退位后，并未实现真正的颐养生活，仅仅在斋建成后的几年的正月里偶尔来到倦勤斋小坐，并吟诗作句。随后，嘉庆、道光、光绪等皇帝也有在倦勤斋活动的遗迹，将其作为书房使用。斋内的内部装修及其布局基本保持了乾隆时期的原貌，仅根据皇帝各自生活习惯的不同略有改变。

根据清代嘉庆十九年、道光十七年和光绪二十三年的《倦勤斋陈设档》记载，倦勤斋楼上楼下共有宝座13张（楼上7张，楼下6张），每张床上都有黄炕毡垫、红花炕毯、床褥、靠背等铺陈，床上还有唾盂、容镜、如意、顺刀。床垫两侧安放炕几、柜格，上面摆放玉、瓷、珐琅、竹、木、牙、角等材料雕琢而成的珍玩文具。

此外，室内空间尽陈书格、多宝格、炕案、炕几、香几、长条桌、半圆桌、月牙桌、琴桌、椅子、绣墩、方案等家具。因倦勤斋室内空间狭小曲折，家具多为精细小巧的黑漆描金、漆地嵌螺钿等品类。在墙壁之上，除绢、纸帖落外，还挂有御笔字、山水、花鸟等插、挂屏，质地多为紫檀、雕漆、珐琅边框，内用玉石、宝石、珐琅、象牙、点翠等材料镶嵌。