"Hittills har 23 kroppar hittats, och brandmän och dykare letar efter fler", säger den lokala polistjänstemannen Shafiqul Islam till AFP.
Omkring 50 hinduiska pilgrimer befann sig på båten, som var på väg till ett tempel när den kantrade och sjönk – och enligt uppgifter från polisen saknas fortfarande upp till 25 personer.
Olyckor till sjöss är vanliga i Bangladesh på grund av dåligt underhåll och överlastade båtar.