Si gnu sed:

sed -z 's/\[Foo\][^[]*//' fichier

Mais en principe, les fichiers de conf de ce type doivent respecter un format, qui est une ligne vide en tant que fin de paragraphe...