بر اساس روایات و تاریخ معتبر در مورد زمان بازگشت اسرای اهل بیت به کربلا برخی معتقدند این زیارت در اربعین اول روی نداده و بلکه به دلیل دوری مسافت، اصلا چنین زیارتی ممکن نبوده، زیرا پیمودن مسیر کوفه تا شام و توقف ها وسپس بازگشت به کربلا در مدت زمان 40 روز، برای کاروان اسرای کربلا ممکن نبوده است و دراربعین سال‌های بعد بوده‌است. برخی معتقدند که اسرای کربلا از شام به عراق رفته و در روز اربعین، یعنی 40 روز بعد از واقعه عاشورا، به کربلا رسیدند ودر آنجا جابر بن عبدالله انصاری و برخی از بنی هاشم را نیز دیده‌اند و پس از زیارت امام حسین(ع) به مدینه رفته‌اند.