Une idée: tu peux sélectionner tout ton noir avec une grosse tolérance ce qui aura pour effet de saisir en même temps les gris foncés. Fais plusieurs essais de manière à ne pas prendre en même temps les gris trop clairs qui doivent rester du coté des blancs.
Puis sur un calque au dessus remplis toute la zone ainsi obtenue du noir que tu souhaites.
En tout cas, chapeau pour la méthode de suppression de la colo!