Selain kedalaman ilmu agamanya, Kiai Abbas dikenal seantero tanah Jawa sebagai seorang pendekar karena kedigdayaan dan kesaktiannya. Kesaktian Kiai Abbas ini sejak awal diketahui oleh Hadlratusyekh KH. Hasyim Asy’ari. Diceritakan sekitar tahun 1900-an pada awal pendirian Pesantren Tebu Ireng.