Vandaag was het plan om dag lekker te werken aan het mooie OpenER project, helaas Murphy hier anders over te denken. Door systeembeheer werd een regel aan de firewal van de Blackboard database server toegevoegd. Niet heel bijzonder zou je denken en dat is het normaal ook niet. Helaas dacht IP Filter hier anders over en werden alle poorten dichtgegooid. Natuurlijk vanwege wat wisselingen zat de server niet op de console server aangesloten en was het dus nodig dat er iemand naar de serverruimte toeging om rechtstreeks op de server te kijken. Na enige tijd konden we weer remote bij de server, maar door de firewall waren de iSCSI verbindingen verbroken (gedeelte van de database bestanden staat op het SAN). Oracle kan hier heel slecht tegen en laat zich dan eigenlijk niet meer killen. Een reboot was noodzakelijk. Na het opnieuw opstarten bleek dat een aantal database files corrupt was geraakt. Omdat een restore wel te lang duurt, hebben we de procedure om de primary en secondary server te switch opgestart. Deze procedure bleek goed te werken, alleen bij het opnieuw opstarten van de applicatieservers (maar 3 van de 7) was de load-balancer ff wat in de war, waardoor het voor sommige gebruikers er langer niet op konden dan anderen. De switch-over van de load-balancer werkte gelukkig wel goed en daarmee was het probleem opgelost.
Uiteindelijk is Blackboard hierdoor van iets na half 11 tot half 2 niet beschikbaar geweest en dat tijdens de tentamenperiode!