搞完“牵羊礼”后,徽、钦二帝的后妃、女儿、侄女等三百余人都被送入浣衣院做苦役,兄弟、子侄则被编入兵籍去给金国开荒种地。
金太宗开始时对恶搞赵佶、赵桓这两个被俘的南朝皇帝非常上瘾,今天取笑一番,改日捉弄一下,感觉倍儿爽,后来慢慢地就失去兴趣了,于是就把他们父子二人迁到韩州(今吉林省梨树县北偏脸城)去了。两年后,徽、钦二帝又被迁到了五国城(今黑龙江省依兰县城北旧古城),也就是传说中他们坐井观天的地方。
刚刚在冰天雪地的敌国开始没有自由和尊严的囚徒生活时,宋徽宗因为受不了金人的折磨而想到了一死了之。一天夜里,他趁着看守不注意,悄悄地把衣服撕成一条一条的,然后系成一个结实的长带子准备悬梁自缢。钦宗正好在这个时候被父亲弄出的声响惊醒了,他明白了怎么回事儿后,急忙冲上去把徽宗从绳套上抱了下来,父子二人先是相对无言,继而抱头痛哭。
令徽、钦二帝难以忍受的不仅仅是暗无天日的牢狱生活,长途跋涉的迁徙之路也是对他们的深重考验。