Drosselrørsangeren yngler i store, sammenhængende og flerårige rørskove i næringsrige søer, flodmundinger og laguner. Reden er en dyb, kurvagtig konstruktion, der bygges fast mellem en række kraftige rørstængler, som regel 40–100 cm over vandoverfladen. Hunnen lægger normalt 3–6 æg, og arten får normalt ét kuld om året. Rugningen varetages hovedsageligt af hunnen og varer omkring to uger.