Update 11: 08:05 Uhr 13.10.2011

Nach der gestrigen Pressekonferenz (hier ein Directdownload für alle die es sich noch einmal anhören möchten) ging die Wiederherstellung relativ zügig weiter. Bereits gestern war für uns der BIS komplett wieder hergestellt. Mittlerweile sollte auch für den Rest von euch der gesamte BIS wieder funktionieren. Möglicherweise erlebt ihr hier und da noch die ein oder andere Verzögerung, im großen und ganzen sollte aber wieder alles reibungslos laufen. Ich hoffe das war das letzte Update was ich an diesem Post hier durchführen muss. BIS dahin ;).

Update 10: 21:15 Uhr 12.10.2011

RIM hat zu einer Livepressekonferenz eingeladen. Beschrieben wurde noch einmal die Ursache. Wie ihr weiter unten auch schon lesen könnt entstand der Fehler ursprünglich durch einen Fehler in einem Coreswitch. Das Failoverszenario für eben diesen hat leider nicht wie geplant funktioniert. Durch diese Fehlfunktion ist ein massiver Berg an Nachrichten aufgelaufen. Das Hauptproblem liegt also momentan in der Verarbeitung der aufgelaufenen Daten. Der Fokus liegt weiterhin in der Wiederherstellung des Dienstes. Leider wurde auch in dieser Pressekonferenz keine entgültige Wiederherstellungszeit genannt. Ebenfalls hat RIM sich mehrmals entschuldigt und sich etwas damit herausgeredet, dass statt zu versuchen allen Nutzern zu erklären was genau passiert ist, der Fokus auf die Lösung des Problems gelegt wurde, weil das am Ende das einzige ist, was die Kunden zufrieden stellt.

Update 9: 19:34 Uhr 12.10.2011

Auch wenn wir scheinbar noch zur Minderheit gehören, bin ich froh endlich Fortschritt berichten zu können. Unter vielen Vodafone DE Nutzern sowie einigen Telekom Nutzern scheinen die meisten BIS Dienste wiederhergestellt zu sein. Momentan kann ich E-Mail, BISB, BBM und sämtliche Apps auch ohne WLAN ohne Einschränkungen benutzen. Nutzer von O2 in meiner BBM Kontaktliste kann ich momentan allerdings noch nicht erreichen. Wie siehts bei euch aus? Sollte es trotz Vodafone oder Telekom bei euch noch nicht funktionieren macht euch nicht verrückt. Wahrscheinlich werden nach und nach mehr Nutzer hinzugefügt. Es sollte also nicht mehr lange dauern bis für alle der BIS wieder erreichbar ist.

Update 8: 15.18 Uhr 12.10.2011

Der BlackBerry Internet Service funktioniert noch immer nicht in vollem Umfang. Für mich funktionieren seit knapp einer Stunde aber wenigstens schon mal die E-Mails wieder. Soweit ich das prüfen konnte zähle ich dabei allerdings noch zu einer Minderheit im Moment. RIM hat allerdings selbst noch eine Maßnahme ergriffen um uns besser auf dem Laufenden zu halten und hat eine Statusseite zur Verfügung gestellt auf der es bisher allerdings auch keine großartig neuen Informationen gibt.

Twitter User @banthon hat wohl außerdem eine Information unter NDA erhalten. Dort ist angeblich zu lesen, das die Messagequeues für BIS und BES zu 90% abgearbeitet sind. BISB, BBM und Push-API sind aber weiterhin nicht aktiviert. Diese sollen wieder aktiviert werden, sobald sich der Dienst für BIS/BES E-Mail normalisiert hat, was wohl heut am späten Abend der Fall sein wird. Hoffen wir das Beste!

Update 7: 06:06 Uhr 12.10.2011

Wow! Zwar habe ich über Nacht die ein oder andere E-Mail oder Facebook Nachricht erhalten und auch jetzt kommen vereinzelt mal ein paar Mails durch aber sonst bewegt sich leider weiterhin nichts. Zu allem Übel hat es jetzt wohl auch noch andere Regionen wie Kanada, Mexico und die USA erwischt. Zu den neuen Meldungen gibt es bisher keine Bestätigung seitens RIM.

Update 6: 22:39 Uhr 11.10.2011

Der Fehler in der Infrastruktur wurde endlich gefunden und wird  nun behoben. Laut @BlackBerry Twitter Account lag der Fehler in einem Coreswitch. Das System sei zwar für so einen Ausfall konzipiert, hat aber nicht so funktioniert wie eigentlich geplant. Durch diesen Ausfall ist dann eine große Menge von Daten aufgelaufen, die das System überlastet haben. Dieses Backlog wird nun abgearbeitet um die Dienste wieder herzustellen. Hoffen wir, dass mit dieser Maßnahme der BIS wieder für die nächsten paar Jahre ohne grobe Ausfälle fit gemacht werden kann. Die Dienste sind übrigens noch nicht verfügbar, sollten sich aber nach der Behebung des Problems langsam wieder normalisieren. Wir halten euch auf dem Laufenden.

Originalerklärung von der Facebook Fanpage:

The messaging and browsing delays being experienced by BlackBerry users in Europe, the Middle East, Africa, India, Brazil, Chile and Argentina were caused by a core switch failure within RIM’s infrastructure. Although the system is designed to failover to a back-up switch, the failover did not function as previously tested. As a result, a large backlog of data was generated, and we are now working to clear that backlog and restore normal service as quickly as possible. We apologize for any inconvenience, and we will continue to keep you informed.

Update 5: 19:15 Uhr 11.10.2011

Der BIS ist immer noch gestört. N4BB hat eine E-Mail von RIM an die Carrier zugespielt bekommen in der ein paar mehr Details zu der aktuellen Situation zu finden sind. Das eigentliche Zeitfenster für die Wiederherstellung war angeblich zunächst auf 4 Stunden geschätzt worden. Momentan soll der Status allerdings mit einem „keine Zeit zur Lösung des Problems verfügbar“ angegeben sein. Weitere Details:

• das BlackBerry Support Team hat ein Netzwerkverbindungsproblem identifiziert
• BES E-Mail sollte nach und nach wieder funktionieren
• BIS E-Mail nur eingeschränkt verfügbar (bei mir geht es z.B. garnicht)
• BBM ist scheinbar am stärksten betroffen
• BlackBerry Browser ist ebenfalls nur eingeschränkt nutzbar
• das BlackBerry Support Team führen kontrollierte Neustartes der betroffenen Komponenten durch

Originalmeldungen:

Please see the latest update on the issue. There is still no resolution time available.The BlackBerry Support Team has identified a network connectivity issue between data centers and Support Teams are working on resolution of this now.

• BES email is recovering well.
• BIS email may be experiencing some delays in sending/receiving messages.
• BBM is impacted and many users are experiencing delays.
• BlackBerry Browsing may be impaired.
• The support teams are continuing to manage messagequeues and are performing controlled restarts of any affected components.

SERVICE(S) AFFECTED
Service Name: BlackBerry Services
Start Date/Time: 11-Oct-2011 10:58:00 GMT
Duration: Ongoing
Region of Impact: EMEA
State of Service: Severely Degraded
% of Subscribers Affected (estimated): 50
Service Impact: Subscribers may experience delays in sending or receiving messages, roaming in another location, or using other services such as Internet browsing or instant messaging. Subscribers may also be unable to create new accounts, integrate third-party email accounts, or use BlackBerry subscriber web sites. Devices may not receive new service books. BlackBerry-enabled devices that request a new PIN may not receive a PIN. BlackBerry Enterprise Servers may be unable to connect to the BlackBerry Infrastructure. Wireless service providers and device resellers may experience delays in using BlackBerry administration web sites, creating subscriber accounts, or provisioning services for subscribers. [00017]
Estimated Time to Resolution: Approximately 4 hours
Action(s) Taken: BlackBerry support teams have been engaged and are working toward resolution as quickly as possible.
Thank you for your patience during this time.

Quelle: n4bb

Update 4: 17:50 Uhr 11.10.2011

Leider immer noch keine Funktionsfähigkeit festzustellen. Zwischendurch gab es mal ein paar kurze Anzeichen für Besserung, aber im Moment bewegt sich gar nichts. RIM arbeitet weiter an einer Lösung.

Update 3: 13:00 Uhr 11.10.2011

Es scheint so als würde es einen Rückfall geben. Momentan sind wieder sämtliche Dienste über den BIS nicht erreichbar. Wir halten euch weiterhin auf dem Laufenden.

Update 2: 05:00 Uhr 11.10.2011

Alles scheint wieder zu funktionieren. Etwas zäh aber das sollte sich langsam wieder normalisieren.

Update 1: 23:00 Uhr 10.10.2011

Für einige Betreiber scheint die BIS seinen Dienst so langsam wieder aufzunehmen. Unter Vodafone DE bekommen ich mittlerweile wieder E-Mails und auch FaceBook/Twitter lässt sich wieder verwenden. Der BBM-Dienst scheint allerdings noch nicht wiederhergestellt zu sein.

Ursprünglicher Beitrag

Seit heute mittag sind wohl die meisten BlackBerry der Regionen Europa, Afrika und dem mittleren Osten so gut wie nutzlos. Ein Fehler am BlackBerry Internet Service (BIS) hat für einen Großteil der Nutzer den Datenverkehr komplett lahm gelegt. Ohne den besagten BIS funktioniert nämlich weder die E-Mail Funktion, noch der allseits beliebte BBM Dienst oder andere Apps die auf diesen Service angewiesen sind. Bereits heute gegen ca. 12 Uhr haben wir unsere Verbindung verloren. Research in Motion arbeitet mit Sicherheit unter Hochdruck an einer Lösung des Problems. Bis zum jetzigen Zeitpunkt kann ich persönlich allerdings keine Funktionsfähigkeit feststellen. Über den Twitter Account von BlackBerry UK kam erst gegen 16 Uhr eine „offizielle“ Bestätigung des Fehlers. Hoffen wir, dass die Störung nicht mehr all zu lange anhält. Wenn es etwas neues gibt halten wir euch natürlich hier auf dem Laufenden.