From Persona 5:
かつては、班目も携わっていた組織だよ。あいつの黒い噂は業界でも有名だった。まさか自白なんて、誰も思っていなかったよ。だがね、彼によって様々な人間が 恩恵を受けてきたのも事実だ。彼自身、方々から担がれ引けなかったのだろう。
班目is a character who used to work at a certain company before becoming a painter. A representative from that company 川鍋, says the above paragraph about 班目.
I am having trouble understanding the last line, 「彼自身、方々から担がれ引けなかったのだろう」. In the english version of the game, that line is 'I suppose its's likely he was deceiving us that whole time...'
What does 「担がれ引けなかった」mean? I can't connect the dots between the english and japanese versions of this line.