搞完“牵羊礼”后，徽、钦二帝的后妃、女儿、侄女等三百余人都被送入浣衣院做苦役，兄弟、子侄则被编入兵籍去给金国开荒种地。
金太宗开始时对恶搞赵佶、赵桓这两个被俘的南朝皇帝非常上瘾，今天取笑一番，改日捉弄一下，感觉倍儿爽，后来慢慢地就失去兴趣了，于是就把他们父子二人迁到韩州（今吉林省梨树县北偏脸城）去了。两年后，徽、钦二帝又被迁到了五国城（今黑龙江省依兰县城北旧古城），也就是传说中他们坐井观天的地方。
刚刚在冰天雪地的敌国开始没有自由和尊严的囚徒生活时，宋徽宗因为受不了金人的折磨而想到了一死了之。一天夜里，他趁着看守不注意，悄悄地把衣服撕成一条一条的，然后系成一个结实的长带子准备悬梁自缢。钦宗正好在这个时候被父亲弄出的声响惊醒了，他明白了怎么回事儿后，急忙冲上去把徽宗从绳套上抱了下来，父子二人先是相对无言，继而抱头痛哭。
令徽、钦二帝难以忍受的不仅仅是暗无天日的牢狱生活，长途跋涉的迁徙之路也是对他们的深重考验。
