لم يكن المعظم يثق بقدرة الخلافة على حمايته من أعدائه، وما يزال يتذكر تقاعد عساكرها عن إنجاد حلفائها لمّا غزا الصليبيون مصر، حتى أيام صلاح الدين حين كان يستنجد بالخليفة فلا يُرسَل إليه مددرفض المعظم نصيحة سبط ابن الجوزي لعدم ثقته بالخلافة العباسية، إذ تذكّر تقاعدها عن نجدة حلفائها أيام غزو الصليبيين مصر وحتى أيام صلاح الدين