最开始牧云闲自己还管着，后来图书馆做大了，牧云闲便不耐烦了，放权给苏默，让他成了图书馆对外的主事之人。
牧云闲觉得有点意思，放权给苏默，图书馆在不断的变好，在苏默眼中，却比最开始时他活下去都难的时候更让他焦心。他好像又找到了人生的寄托似的，为图书馆殚精竭虑，比他这个主人耿更甚。
鬼界里面不止有只会知道吃的生物，还有许多有灵智的，如此说来，图书馆这样的存在，可比当初的牧云闲更招人注意。
所以很快，有个挑战就来了。
当时牧云闲一直在图书馆里闭关，看着他的闲书，加上修炼，苏默却找上了门来，焦急道：“有人打上门来了。”
牧云闲笑道：“你慌什么？”
这件事他是知道的，打上门来的也是鬼界有名的存在，性格莽撞，估计是被人挑拨了几句，知道了图书馆这么个东西，就要来抢了。对方曾经也是个人类，生前武将出身，因着杀人无数，攒了一身戾气，才在鬼界快速崛起。
他说完，看着苏默一副恨铁不成钢的样子，牧云闲笑道：“你可知道，他手上有个东西？”
苏默一愣，问道：“是什么？”
“有个凡人，因着些缘故误入了鬼界……”牧云闲说：“他的亲人找上门来了。这人颇有些手段，所以……”
“所以什么？”苏默接着问。
“所以你可以回到人间去了。”牧云闲笑道。
他说完这句话时，仔细观察着苏默的表现。沧海桑田，世事变迁，他在鬼界说是没过多少日子，其实也过了两百余年。距离系统规定的日期也差不了多少了，苏默的表现对他而言，很是重要。
苏默这时却不说话了，牧云闲又问他：“你难道不想回去了么？”
苏默说：“请您容我再想想。”
牧云闲看了看他，也没再说什么，就让他出去了。
苏默走到外头，图书馆前头飘了许多鬼魂，有个鬼见了他，说：“大人，前段时间收的那些书，已然归档了。”
“我去看看。”他说着，跟着那只鬼看了下书，站在原地，默默不语。
他想起来许多事，忽然觉得，往昔的一切都模糊不清了。
苏默连他是怎么死的都不太清楚了。这时他努力回忆着，想到，他应该是病死的，死时亲友都在身边，按理说应该是没有什么遗憾的，可他到了鬼界，全然接受不了自己与亲友天人永隔的事实。
他站在桥上，听见有人说：“喝下这碗汤，一切就都忘了，是投胎，还是成了这里的一个鬼，日后如何就看自己的命吧。”
一群鬼被压着向前，有的挣扎，有的浑浑噩噩，喝了汤全是一个反应了。他心里无端生出许多惶恐，不知道哪来的力气，就跳下去了。本来以为会再死一回，结果遇上了牧云闲。
牧云闲逼着他练功的时候，他心里头想的，还都是回去，想起来他还能在亲人死前见他们一面，他就不想魂飞魄散了。后头牧云闲把图书馆交给他，以忙起来，他反而莫名觉得，自己放开了许多了。
又过了几天，牧云闲还是去应了约，准备去打回去了。
临走前和苏默说：“我和他说好了，他若是输了，就把这机会给我，你到时候想想，要不要这机会。”