يُحكى أنّ حاتما الأصم كان رجلا كثير العيال، وكان له أولاد ذكور وإناث، ولم يكن يملك حبة واحدة، وكان قدمه التوكل فجلس ذات ليلة مع أصحابه يتحدث معهم، فتعرضوا لذكر الحج، فداخل الشوق قلبه، ثم دخل على أولاده، فجلس معهم يحدثهم، ثم قال لهم : لو أذنتم لأبيكم أن يذهب إلى بيت ربه في هذا ..