زمانی‌که کعبه توسط حضرت ابراهیم (ع) بازسازی شد، پس از ایشان و حضرت اسماعیل، نگهبانی و نگهداری از این خانه مقدس، به قبیله‌ جرهم سپرده شد که از یمن آمده بودند.