وبعد فتح قلعة الزبير انتقل اليهود إلى قلعة أبي وتحصنوا فيه، وفرض المسلمون عليهم الحصار، …
وقام بطلان من اليهود واحد بعد الآخر بطلب المبارزة، وقد قتلهما أبطال المسلمين، وكان الذي قتل المبارز الثاني هو البطل المشهور أبو دُجَانة سِمَاك بن خَرَشَة الأنصاري صاحب العصابة الحمراء. وقد أسرع أبو دجانة بعد قتله إلى اقتحام القلعة، واقتحم معه الجيش الإسلامي، وجري قتال مرير ساعة داخل الحصن، ثم تسلل اليهود من القلعة، وتحولوا إلى حصن النزار آخر حصن في الشطر الأول.