Die unschöne Variante wäre also das Event zu überschreiben wenn es nicht mehr gebraucht wird, mit:
Wx::Event::EVT_GRID_CELL_RIGHT_CLICK($self, sub {} );

Bzw. mit $panel->disconnect(); Alle Events platt machen.