بنای مسجد پنجه علی در محله ای به همین نام (منشعب از تکیه چهار مردان) واقع شده و به جهت وجود قطعه سنگی که تصویر دستی برآن حک شده، به این نام خوانده شده است.
با توجه به قطعات کتیبه های موجود؛ بنای آن تجدید و کتیبه هایی نیز برآن اضافه شده است. درجدار باختری فضای گنبددار مسجد، طاقچه ای وجود دارد که با کاشی های رنگی ساخته شده و در وسط آن، قطعه سنگ خاکستری با نقش فرو رفته دست انسان قرار گرفته است.
