Ich verstehe, was Du meinst.
Schwierigkeiten sehe ich aber darin, dass ich z.B. Tests festlegen müsste, die im Idealfall auch nach einem Jahr noch laufen, damit ich sie nicht immer neu schreiben muss. Und das idealerweise in einer Liveumgebung -- denn mich interessiert beides: läuft meine Anwendung überhaupt und läuft sie auch auf für die Welt erreichbar. Wenn sie auf meinem Testsystem schon fehlschlägt, ist das eine wertvolle Information. Aber wenn sie dort läuft aber auf dem Livesystem nicht, bringt's ja auch nichts.

Mit Screenshots, ja, das ist nicht uninteressant. Nimmst Du dann einmal einen Referenzscreenshot und definierst die Teile, die massiv verschieden sein dürfen (z.B. wechselnde Teaser- oder Headerbilder etc) oder wie machst Du das? Hast Du mit den Frameworks wie Selenium schlechte Erfahrungen gemacht oder ist das einfach so "gewachsen", dass Du nicht damit arbeitest?