du greifst da ja auf eine Referenz zu, also musst du das auch so speichern:

$Config{'moduleMemory'} = \%temp;