在天气酷寒、条件艰苦的五国城，其最高长官的小儿子完颜充自幼喜好绘画，对水墨画有精湛的研究，一直致力于收藏宋徽宗的作品，如今俘虏送上门哪有放过的道理？于是生活方面给予便利，但三天两头前去索画。
书琴棋画本来都是精神层面的风雅之行，说白了就叫“吃饱了没事干”玩的花样，前提是衣食无忧。象宋徽宗的处境，整天活得战战兢兢，饿一顿饱一顿，住的房屋四面漏风，下雨天地上泥泞一片，哪有心情搞创作？往往敷衍涂上几笔交差完事，根本不考虑什么意境、构图之类。
偏偏完颜充也是对绘画比较内行的人，前后作品一比较就看出来了，当下很生气，警告说以你如今的身份，想要你的命比捏死只蚂蚁还容易，焉敢糊弄与我？从今天起给一个月时间画幅精品出来，否则你会死得很难看！
为活下去宋徽宗不得不勉强激发自己的创作灵感，认真构思、打腹稿、拟草图，没事拿树枝在地上揣摩、修订心里的构图，针对诸多细节反复推敲。
最终定稿为《五国城穴图》，自题诗曰：瑟影残灯破扉斜，守梦湿襟望天涯。画上老人蜷缩在狭小的草窝里，乌云蔽日，寒风呼啸，老人只有紧抱拐杖似乎才能获得一点点慰藉。
据说看到画完颜充摔掉两只茶杯，踢翻面前的桌子，激动地大叫：“天佑完颜，居然能得到如此神韵的绝世好画！”
大凡搞艺术的一脉相承，只看作品的表现力和艺术水准，对其正治含义倒看得比较淡，因此毫不在意其作品影射或是曲折反抗的暗喻。
或许耗尽心血的缘故，宋徽宗此后身体每况愈下勉强捱了一年多，有天早上宋钦宗进去探望，见父亲已僵死在土坑上。
《五国城穴图》因此成为宋徽宗的绝笔。
在即将离世前昔，宋徽宗还能留下绝唱千古的、代表其晚期最高艺术水准的画作，不知是作为一代风流皇帝的悲哀，还是古玩界的万幸？
之后元朝崛起，先后灭掉金国和南宋，作为统治阶层的完颜家庭遭到残酷清洗和屠杀，《五国城穴图》不知所踪。到了明代有位儒生从破落的元朝贵族子弟手里购得，将它献给杭州太守何晋贤，然后辗转于明代高官之手，直至清代被入宫收藏。
康熙年间为了笼络明朝降将，康熙将画连同大批珠宝赐给平西王吴三桂，后吴三桂起军叛乱，被镇压后收缴所有财物，但《五国城穴图》却流失到民间。后来时现时没，总是有它的消息出现，可总是不确定，更为它增添了神秘的色彩。
谁都没想到最后居然被中国古玩协会党组成员、秘书长唐巧所收藏！