Cả đời này của Từ Vị thực ra được không ít người ưu ái, mặc dù lão ly kinh bạn đạo, mặc dù lão điên điên khùng khùng, nhưng hết lần này tới lần khác lão lại tài hoa hơn người, vì vậy cho tới nay, đều có người mời lão đảm nhiệm đủ loại chức vị.
Nhưng Từ Vị đều cự tuyệt đại đa số lời mời, đặc biệt là lúc tuổi già, trên cơ bản lão đã quyết định sẽ không rời núi, lão cũng rõ ràng tính cách của mình không hợp với triều đình, lão trời sinh tính tình phóng túng, căn bản không thể chịu đựng được địa phương có lễ pháp sâm nghiêm.
Chỉ là Quách Đạm xuất hiện, làm lão có chút hiếu kì.
Nhưng cũng chỉ thế thôi.