1864年12月20日在广州期间,他接到了母亲的来信:“母亲提到一位布雷登小姐(Miss Breadon)(原文如此),并且提到5000英镑的事(可能是他希望她能带来的财产数额)……对炉边厮守、共度快活时光的渴望不断增长,而对婚姻的期盼却在下降。”他对婚姻的期盼可能是在见到阿瑶后下降的,但很快又重新燃烧起来。1月10日,他已经在计划前往香港,准备在离开南方前将杂七杂八的事情做一个了结。下一篇日记记于1865年1月15日,显示他并未如愿以偿地与罗存德博士(Dr. Wilhelm Lobscheid)见面,“所以我只能在尚未了结最急于了结的事之前离开了”。桑普森与罗存德这位非同寻常的德国传教士非常熟悉,很可能建议赫德托他将孩子们带去英国。情况很可能是这样的,赫德本打算借着1864年12月这次造访与阿瑶协商分手事宜,做最后告别,但他陷入了与当年詹·卡·威2号相同的境地,即他又让她怀上了孩子。他只好推迟了将孩子马上送走的计划。如前所述,赫德于1866年8月写给赫丝特·布雷登的信中说,“至少在过去两年里,我的生活是清清白白的,无可非议”。但这种说法很可能隐瞒了他与阿瑶的最后一次相见。