كان الإمام علي بن عبد الله بن العباس طويلا ضخم الجثة ، أجمل قرشي . كان إذا قدم حاجا أو معتمرا عطلت قريش مجالسها في المسجد الحرام ، و هجرت مواضع حلقها ، و لزمت مجلس علي بن عبد الله إعظاما و إجلالا و تبجيلا، و كان لا يرى لقرشي في المسجد الحرام مجلس ذكر يجتمع إليه حتى يخرج علي بن عبد الله من الحرم .