刚开始时，尚有家丁为其服务，买些饭菜什么的，到了中途，沿路百姓不知从何处得到的消息，知道蔡京贬为秘书监，前往南京任职，一路上是各种刁难和羞辱。家丁们原想着跟着蔡京享福呢，没想到连饭菜都买不到了，饿得前心贴肚皮，一肚子委屈。路途中，不断有家丁私下开溜，连带着马车钱财都给带跑了。剩下的家丁也不耐烦了，对蔡京一家恶言恶语。蔡京怕路途上出现意外，只能满脸堆笑，好言好语安抚着剩下来的家丁。

这一日，蔡京一行已望见南京城池了，忽然从后面追来一小队兵马，为首的将领大声喊道：“前面马车中可是蔡太师？！”

蔡京开着后面尘土中追来的一小队兵士，大吃一惊。当听到为首一将高喊：“前面马车中可是蔡太师”时，心里略安。

原本，蔡京以为或是来临，或许是圣上要惩处自己，当听到为首一将仍称其为“蔡太师”时，方觉得事并未坏到不可收拾。

蔡京心里略安，忙从马车上下来，站在车旁，等候着一小队兵马前来。

那小队兵马迅速来到蔡京的马车跟前。为首一将跳下马来，问蔡京道：“你便是蔡太师？”

蔡京已没了在朝廷当宰相、太师时的威风了，忙拱了腰，脸上堆上笑，轻声答道：“老夫正是蔡京。”

“是蔡京蔡太师便好！”为首一将道：“你让俺们找到好苦，一路打听方找到了你！”

蔡京见对方口气生硬，心里又慌了起来。

为首一将对蔡京说道：“俺们乃开封府差吏，蔡京听旨！”

蔡京忙跪倒在地。蔡京身后，徐氏、王氏、蔡脩等人也跪伏在地。

为首一将高声宣道：“奉天承运，皇帝诏曰：责令秘书监蔡京转任庆远军节度副使，即刻前往湖南赴任。”

蔡京叩首接旨。

接旨毕，蔡京等人站起身来。蔡京对为首将领说道：“差官，臣蔡京自汴京出发，一路车马劳顿，多有辛苦；天可怜见，现眼看抵达南京，臣欲进城，觐见太上皇，完毕后即刻转赴庆远军，可否？”

“不可！”为首将领说道：“俺们来之前，开封府徐府牧专门有交代，嘱咐俺们，不得让你进入南京，觐见太上皇。蔡太师，多有得罪，请转赴湖南吧。”

蔡京无奈，只得带着徐氏、王氏、蔡脩等人，转往湖南。