EDV-Störungen / IT failures

wann
when

dd.mm.yyyy
Uhrzeit
time
wer
who
wo
where
Beschreibung
description
24.10.2015
bis/till
25.10.2015
1 day
alle Arbeitsplätze
all users
Schifferstadt Stromabschaltung Komplettwerk
complete plant: power shutdown
12.11.2014
bis/till
19.11.2014
2 - 4 hours workday mornings
viele Citrix-Benutzer
many Citrix users
alle Standorte
all locations
kein Citrix Login, obwohl alle Server fehlerfrei - verursacht durch das defekte Microsoft Update KB2992611 vom 11.11.2014 "Black Tuesday"
 
no Citrix login, in spite of all servers being error free - caused by the botched Microsoft update KB2992611 dated Nov. 11, 2014 "Black Tuesday"
11.01.2010
bis/till
24.01.2010
sporadic
for several hours
evenings, overnight,
weekends
alle Benutzer
all users
alle Standorte
all locations
geplante Wartung - alignen aller virtuellen Server, vorbereiten NetApp für Dedupe
Ziele: Festplattenplatzoptimierung im SAN, Optimierung der Serverleistung
stundenweise/nachtweise/wochenendlang keine Verfügbarkeit diverser Dienste (immer einzeln), für die User vor allem eMail, Internetzugang, Drucken im Netzwerk, XDEX.
Langsames Netzwerk ist während der Wartung zu erwarten.
 
planned maintenance - mbralign all virtual servers, prepare NetApp for Dedupe
goals: optimize SAN HDD utilization, optimize server performance
no availability of various services (always just 1 at a time), most notably for the users: eMail, internet access, network printing, XDEX.
Sluggish network performance is to be expected during the maintenance.
21.11.2009
Samstag
4hs: 08:00hs am to 12:00hs pm alle Benutzer
all users
Schifferstadt geplante Wartung - Neu-Elektrifizierung: Stromabschaltung in Werk Schifferstadt
da kein Strom + kein Netzwerk = keine EDV in Schifferstadt verfügbar
 
planned maintenance - power line renewal: power in Schifferstadt will be shut down completely
no power + no network = no IT available in Schifferstadt (let alone anything else)
13.02.2009
Freitag
between 00:00 and 16:00hs pm alle Benutzer
all users
alle Standorte
all sites
GAU: kein SAN , kein Netzwerk
Stromausfall, NetApp RAM Modul(e) defekt, eventuell auch Motherboard
Hersteller-Techniker mit neuen Teilen abwarten
 
worst case scenario: SAN down, no network
power failure, NetApp RAM module(s) defective, possibly motherboard as well
waiting for NetApp technician with new parts
08.12.2008
Montag
08:00 - 17:00 Versand
shipping dept.
Stuttgart geplante Wartung / planned maintenance:
XDEX Update von 3.0 auf 4.1 wegen ATLAS, XDEX nicht verfügbar für Versandabteilung
ATLAS = Automatisiertes Tarif- und Lokales Zoll-Abwicklungs-System, siehe ATLAS bei zoll.de
 
XDEX update from version 3.0 to 4.1 due to ATLAS, XDEX unavailable for shipping dept.
ATLAS = Automated Tariff and Local Customs Handling System (German Customs Administration), see ATLAS at zoll.de
05.12.2008
Freitag
between 12:00 and 16:00hs pm Benutzer in Schifferstadt
users in Schifferstadt
Schifferstadt geplante Wartung / planned maintenance:
Schaltschrankumbau wg. USV, mehrfach keine EDV verfügbar
 
switchgear cabinet being rewired + UPS mounted, no IT available several times for approx. 30 min.
15.09.2008
Montag
between 12:00 and 12:45hs pm Alle Benutzer
all users
alle Standorte
all sites
geplante Wartung / planned maintenance:
NetApp SAN Update, ca. 45 min. keine EDV verfügbar
 
NetApp SAN taken offline for firmware update, servers not available for approx. 45 min.
04.09.2008 Donnerstag einmalig / once Benutzer in Schifferstadt
users in Schifferstadt
Schifferstadt geplante Wartung / planned maintenance:
Umrüstung Server Schifferstadt, lokales Datenvolume sowie Dienste nicht verfügbar, mit Störungen/Langsamkeit lokal in Schifferstadt ist zu rechnen
 
replacement of server hard disks in Schifferstadt; local data volume + services unavailable, interruptions + slowness to be expected locally in Schifferstadt
07.06.2008 Samstag einmalig / once, est. time approx. 5.5h Benutzer in Schifferstadt
users in Schifferstadt
Schifferstadt geplante Wartung / planned maintenance:
Wartungsarbeiten an 20KV-Mittelspannung und Gasanlage; in Schifferstadt kein Strom und damit keine EDV verfügbar; geplant 07:00 - ca. 12:30 Uhr
 
maintenance of 20KV voltage + gas facility; there will be no power = no IT in our Schifferstadt plant; planned time is from 07:00 to approx. 12:30 hs.
08.05.2008 Donnerstag einmalig / once, est. time approx. 0.5h alle Benutzer
all users
alle Standorte
all sites
geplante Wartung / planned maintenance:
Außerbetriebnahme des Fileservers, Inbetriebnahme des SAN: ca. 0,5h keine Fileserverdienste verfügbar; Neuanmeldung erforderlich. Plus 1,5h Nacharbeit/Scripting
 
decommissioning of old file server, new SAN enters into service: file serving services will be down for approx. 0.5h; logout/login required. Plus 1.5h additional "advanced" scripting
17.04.2008 Donnerstag 08:00 - 17:00 Internet-Benutzer + Fernzugänge
internet users + remote services
alle Standorte
all sites
geplante Wartung / planned maintenance:
das Internet wird ab und an kurzzeitig nicht verfügbar sein.
 
internet browsing will be unavailable several times for a short while due to firewall software installation + reconfiguration
16.04.2008 Mittwoch 08:00 - 17:00 alle Benutzer
all users
alle Standorte
all sites
Wartung / maintenance:
Druckerkonfiguration, intermittierende Druckprobleme
 
printer configuration, intermittent printing problems
14.04.2008 Montag 08:00 - 17:00 alle Citrix- Benutzer
all Citrix users
alle Standorte
all sites
geplante Wartung / planned maintenance:
intermittierendes Ausloggen/Einloggen erforderlich wegen Serverfarm-Updates + Umzug des datastore; alle Citrix-Anwendungen werden kurzzeitig nicht verfügbar sein.
 
intermittent logoffs/logons required because of server farm updates + datastore migration; all Citrix applications will be unavailable for a short while
14.03.2008 Freitag
15.03.2008 Samstag
Freitag ab 12:00 keine AS/400 mehr verfügbar alle AS/400 Benutzer
all AS/400 users
alle Standorte
all sites
geplante Wartung / planned maintenance:
Umzug der AS/400 730 V5R2M0 auf eine 525 V5R4M0
Komplettsicherung und Rücksicherung + Konfiguration
29.02.2008 Freitag ab 15:00 bis ca. 18:00 Uhr alle Benutzer
all users
alle Standorte
all sites
geplante Wartung / planned maintenance:
Umbau Schaltschrank Stuttgart
intermittierende Serverabschaltungen, da alte Server für das Virtualisierungsprojekt aus dem Schaltschrank weichen müssen
16.01.2008 Mittwoch   keine Beeinträchtigung
no one affected
  freier Speicherplatz des Fileservers auf Alert: ca. 10% frei.
15.01.2008 Dienstag ab ca. 05:00 bis 13:00 Uhr keine Beeinträchtigung
no one affected
  Ausfall 1 phys. Festplatte des Mailservers im RAID1, Hotplug-Austausch + Rebuild; keine Beeinträchtigung der User.
11.01.2008 Freitag ab ca. 09:00 bis 19:30 Uhr keine Beeinträchtigung
no one affected
  Ausfall 1 phys. Festplatte des Fileservers im RAID5, 2x Hotplug-Austausch + Rebuild; 1. Austauschplatte tot, erst 2. Platte ok. Telefonanlagen-Software defekt, daher Server ca. 1 Stunde lang für User EXTREM langsam, am Montag vorläufig von mir repariert. Achtung: auf dem Fileserver hat eine 2. Platte desselben RAID5 Softerrors!
Unschön daran ist, daß die Datensicherung mittlerweile 17 Stunden läuft; sie mußte für die Aktion leider abgebrochen werden. Macht keinen Spaß bei bestehendem Plattenausfall. Mal wieder Glück gehabt.
in Kürze       1.) Probleme bei der Datensicherung Fileserver + Mailserver aufgrund Bandwechselsituation; Ausfallzeit möglich. Das Problem ist aufgrund der Datenmengen + der Serverhardware in keinem Fall einfach zu lösen, da nach Messung kein Server die notwendige I/O-Leistung hat.
 
2.) mehrere notwendige Server stehen in nicht-sicheren Räumlichkeiten bzw. sind zu niedrig ausgelastet; es bestehen mehrere Serverprozesse, die mehr schlecht als recht unter Workstation-Lizenz laufen, daher alternierende (und unnötige) Konnektivitätsprobleme
 
3.) alle Garantiezeiträume laufen aus = Verdoppelung der Wartungskosten
 
--> neues Projekt seit 05/2007: Staehle Virtualisierung
Vorbesprechung mit Geschäftsleitung erfolgte im Mai
sinnvoller Projektumfang und Finanzierungsbedarf ist fast vollständig geklärt
Feinplanung/Phasen werden ab 18.06.2007 festgelegt
Planungs- und Umsetzungszeitraum: nächste 3-4 Monate
13.07.2007 Freitag ab ca. 12:00 bis 13:00 Uhr alle E-Mail Benutzer
all email users
alle Standorte
all sites
physikalische + logische Vergrößerung DB-Volume des Mailservers + Wartungsarbeiten
24.05.2007 Donnerstag ab ca. 12:00 bis 13:00 Uhr alle Benutzer
all users
alle Standorte
all sites
logische Vergrößerung Daten-Volume des Fileservers + Wartungsarbeiten bis 17:30 Uhr
22.05.2007 Dienstag ab ca. 12:30 bis 13:30 Uhr alle Benutzer
all users
alle Standorte
all sites
physikalische Vergrößerung Daten-Volume des Fileservers + Wartungsarbeiten bis 16:30 Uhr
21.12.2006 Donnerstag ab ca. 17:15 bis 22.12.06 ca. 07:30 Uhr alle AS/400 Benutzer
all AS/400 users
alle Standorte
all sites
präventive Abschaltung der AS/400 wegen Schmorbrand der AS/400-USV mit erheblicher Geruchsentwicklung (Feuergefahr im EDV-Raum über Nacht)
19.07.2006 Mittwoch ca. 09:00 bis ca. 16:30 Uhr Versand
shipping dept
Stuttgart Versand columbus/Spedition Diehl:
kein bzw. nur sporadischer Zugriff auf die Internet-Erfassungsseite möglich, z. T. nur mit Beta-Versionen von Mozilla-Browsern; unverschämte EDV-Mitarbeiter sowohl bei Spedition Diehl wie bei deren Dienstleister AX4.com, die einem ganz klar ins Gesicht sagen, was für ein kleines Licht man doch unter den vieeelen Großkunden sei (angeblich 6000 Kunden, die alle üüüberhaupt kein Problem haben), und daß man dort auf gar keinen Fall einen Fehler gemacht habe, ausschließlich der Kunde ist das Problem und zu dumm, seine eigene EDV zu konfigurieren. Komisch, da muß ich wohl seit dem Vortag einiges verlernt haben, denn da ging's ja noch :-)) Auch komisch, daß alle anderen Websites tadellos tun, gell.
Da aufgrund des "Problemumgehungsspielchens" mit dem Motto: "wie erfasse ich einen Versandauftrag bei Spedition Diehl?" Kosten von geschätzt über 1.000,- EUR entstanden sind, habe ich das Controlling eingeschaltet. EDV + Controlling werden über die Ursachen und Auswirkungen dem Finanzleiter Bericht erstatten. Klares Ziel wurde vereinbart, daß unsere eigene funktionsfähige interne Software wieder genutzt werden soll. Terminierung baldmöglichst.
Zusätzlich wird vorhandene Lademittelverwaltung nochmals genau geprüft und soll endlich implementiert werden.
29.06.2006 Donnerstag ca. 08:00 bis ca. 10:30 Uhr teilweise Schifferstadt
some Schifferstadt users
alle Standorte
all sites
Ausfall eines Hubs in Schifferstadt Halle 1, Kollege baute Ersatzhub ein = ok
13.05.2006 Samstag ab ca. 08:30 Uhr alle Benutzer
all users
alle Standorte
all sites
geplante Störung: unaufschiebbare Vorbereitungen zur Elektrifizierung wegen Einbau 2er Klimaanlagen (EDV + Litho); Abschaltung Strom kompletter Verwaltungstrakt in Stuttgart, keine EDV verfügbar
21.10.2005 Freitag 15:00 Uhr bis ca. 01:00 Uhr alle AS/400 Benutzer
all AS/400 users
alle Standorte
all sites
AS/400 nicht verfügbar, geplanter Austausch von 8 Festplatten
08./09.04.2005 19:00 Uhr bis ca. 14:00 Uhr alle Benutzer
all users
alle Standorte
all sites
unaufschiebbare Wartung der Trafostation in Stuttgart, keine EDV verfügbar
30.03.2005 31.03.2005 mindestens ganztägig E-Mail staehle alle Standorte
all sites
Mailprovider für staehle.de löschte unberechtigterweise alle DNS- und mx-Einträge im Auftrag der Firma augenblick-its, obwohl augenblick-its für das Hosting der Domain schon bezahlt worden war, und zwar bis inkl. 08. Mai 2005.
augenblick-its weigert sich außerdem, die DNS- und mx-Einträge bis zum Vollzug des Providerwechsels beim alten Provider wieder aufleben zu lassen (Arbeit von Sekunden). Dies ist unerhört, denn auch Provider mit Millionen Kunden können dies innerhalb 30 Minuten erledigt haben.
Es ist dies insgesamt das dritte Mal, daß uns augenblick-its die Domain abschalten ließ.
Bekanntlich hat ja alles im Leben einen Sinn. Wir haben daraus gelernt.
 
Bitte meiden Sie in jedem Fall solche sogenannten "Internet Technology Service"-Anbieter als Mittler bzw. Vertragspartner!
Falls Ihnen ähnliches auch mal passiert, drohen Sie sofort mit dem Rechtsanwalt und wechseln Sie schnellstmöglich den Provider bzw. den Vertragspartner!
14.03.2005 ca. 16:00 - 18:00 Uhr E-Mail columbus user Stuttgart Mailprovider für columbus-clean.com löschte eigenmächtig mx-Einträge
01.03.2005 09:00 - 16:00 Uhr Schifferstädter Benutzer
Schifferstadt users
Schifferstadt Ausfall der Standleitung nach Schifferstadt durch Telekom
19.01.2005 11:00 - 16:00 Uhr Schifferstädter Benutzer
Schifferstadt users
Schifferstadt Ausfall der Standleitung nach Schifferstadt durch Telekom
11.01.2005 ab ca. 09:00 Uhr E-Mail alle User
email all users
alle Standorte
all sites
8 Jahre alter Mailserver defekt, nicht mehr bootfähig
seit 29.11.2004   Produktion
operations scheduling
Stuttgart Ausfall Etikettensoftware ebsoft, Ersatz: 11+ Jahre altes DOS-Programm
Achtung: Problem nicht behoben!!! Potentieller GAU: Produktionsstillstand columbus; keine Warenlieferungen möglich!
04.11.2004 bis 06.11.2004   alle Benutzer
all users
alle Standorte
all sites
Totalausfall der AS/400 für ca. 65 Stunden (GAU)

 
 
 
 
 
 
 
 
zurück zu den Projekten
 

 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

    go top
     
  • 01.03.2005: 09:00 - 16:00 Uhr: Ausfall der Standleitung nach Schifferstadt (Telekom)
    Zwischenverstärker in Schifferstadt von Telekom ersetzt, außerdem Kabelarbeiten (Neuverlegung);
    auch für die nächsten Tage bis zur Beendigung der Bauarbeiten der Telekom sind weitere Ausfälle vorprogrammiert.
     
     
     
     
     
     

  • go top
     
  • 19.01.2005: 11:00 - 16:00 Uhr: Ausfall der Standleitung nach Schifferstadt (Telekom)
    komplettes Werk inkl. Produktion und Versand ohne EDV, plus kurzzeitige Ausfälle von Telefon + Fax
    Baugruppe "Matrix-Einschub", ein Netzelement, bei Telekom ausgefallen, mußte erst geliefert werden.
     
     
     
     
     
     

  • go top
     
  • 04.11.2004 - 06.11.2004: Totalausfall der AS/400 für ca. 65 Stunden (GAU)
     
    Grund: überhohes Spannungspotential (über 2200mA ungeerdeter Fehlerstrom) über die Twinaxial-Leitungen am 04.11.2004 gegen 01:42 Uhr. Stromverkabelung von 2- bis 5-Draht im 105 Jahre alten Gebäude vorhanden. Eigentlicher Verursacher weiterhin unbekannt und nicht beseitigt. Vermutung: Stromverkabelung der Lampenbeleuchtung im EG/1. OG
     
    10 Stunden Fehlerdiagnose durch mehrere IBM-Techniker, da Referenzcode in der weltweiten Datenbank nicht auffindbar. Keine Ersatzgerätestellung.
     
    MF-IOP komplett zerstört. Defekte HDDs auf allen RAID5-Volumes. Da auf einem der Volumes gleich mehrere HDDs defekt waren, sind alle Daten zerstört.
     
    Nach Beschaffung der IBM-Ersatzteile per Taxi (am 04.11.2004 abends aus Stuttgart, nachts aus Stuttgart und München), Reparatur der Defekte, Rebuild der RAID-Volumes, Restore des Microcodes und der Systemdaten durch IBM sowie der eigentlichen Datenbankdateien durch uns unter Anleitung von Infor, ist die Maschine am 06.11.2004 ab 18:30 Uhr mit allen Modulen wieder lauffähig. Allerdings mußte ich alle OUTQ's für WII neu erstellen, da alle Parameter verloren waren.
     

     
     
     
     
     
     
  • go top