W nocy z wtorku na środę (9/10.03.2021) wybuchł pożar w serwerowni OVHCloud, w wyniku którego uszkodzone zostały dwa centra danych, co spowodowało bezpośrednio brak możliwości wysyłki notyfikacji, zbierania subskrybentów oraz całkowite wstrzymanie działania aplikacji PushPushGo.
Obecnie sytuacja została już opanowana i całkowite działanie aplikacji zostało w pełni przywrócone. Jako PushPushGo dołożyliśmy wszelkich starań, aby pomimo poważnej i nieprzewidzianej awarii, przywrócić możliwość działania tak szybko jak to tylko możliwe.
Dzięki wytężonej pracy naszego zespołu IT, udało nam się tego dokonać w czasie poniżej 24h, co jak widać po aktualnej sytuacji na rynku w związku z awarią, jest wynikiem nadspodziewanie dobrym.
Chciałbym bardzo podziękować wszystkim klientom za cierpliwość i wyrozumiałość w obliczu sytuacji w jakiej się znaleźliśmy. Państwa słowa wsparcia były dla nas nieocenione, dziękujemy.
Poniżej kilka najważniejszych wydarzeń z przebiegu wczorajszej awarii oraz odpowiedzi na najczęściej pojawiające się pytania.
00:30
Pojawił się niegroźny incydent - otrzymaliśmy pierwsze powiadomienie od Page Duty - Wyłączonych zostało kilka serwerów. Nasi Administratorzy rozpoczęli pracę nad poprawą infrastruktury.
00:47
Pierwsza informacja o ogniu w SGB2 - zgodnie z informacjami opublikowanymi przez OVH. Wdrożenie planu awaryjnego.
04:10
Przestało działać 90% infrastruktury - (akcja gaśnicza) datacenter SGB1, SGB2, SGB3, SGB4, w których mieliśmy dużą część repozytoriów. Pozostałe datacenter nie zostały uszkodzone.
06:00 - 18:00
Pełne odtwarzanie infrastruktury oraz odzyskanie kodów źródłowych aplikacji, na co składało się przygotowanie oraz uruchomienie kopii bazy danych (żeby przyjąć ruch z pełnym obciążeniem),
Ok. 14:00 pierwszy update:
18:30
Przywróciliśmy wysyłki - uruchomienie senderów/requesterów.
.png)
.png)
Mi tincidunt elit, id quisque ligula ac diam, amet. Vel etiam suspendisse morbi eleifend faucibus eget vestibulum felis. Dictum quis montes, sit sit. Tellus aliquam enim urna, etiam. Mauris posuere vulputate arcu amet, vitae nisi, tellus tincidunt. At feugiat sapien varius id.
Eget quis mi enim, leo lacinia pharetra, semper. Eget in volutpat mollis at volutpat lectus velit, sed auctor. Porttitor fames arcu quis fusce augue enim. Quis at habitant diam at. Suscipit tristique risus, at donec. In turpis vel et quam imperdiet. Ipsum molestie aliquet sodales id est ac volutpat.
Elit nisi in eleifend sed nisi. Pulvinar at orci, proin imperdiet commodo consectetur convallis risus. Sed condimentum enim dignissim adipiscing faucibus consequat, urna. Viverra purus et erat auctor aliquam. Risus, volutpat vulputate posuere purus sit congue convallis aliquet. Arcu id augue ut feugiat donec porttitor neque. Mauris, neque ultricies eu vestibulum, bibendum quam lorem id. Dolor lacus, eget nunc lectus in tellus, pharetra, porttitor.
"Ipsum sit mattis nulla quam nulla. Gravida id gravida ac enim mauris id. Non pellentesque congue eget consectetur turpis. Sapien, dictum molestie sem tempor. Diam elit, orci, tincidunt aenean tempus."
Tristique odio senectus nam posuere ornare leo metus, ultricies. Blandit duis ultricies vulputate morbi feugiat cras placerat elit. Aliquam tellus lorem sed ac. Montes, sed mattis pellentesque suscipit accumsan. Cursus viverra aenean magna risus elementum faucibus molestie pellentesque. Arcu ultricies sed mauris vestibulum.
Morbi sed imperdiet in ipsum, adipiscing elit dui lectus. Tellus id scelerisque est ultricies ultricies. Duis est sit sed leo nisl, blandit elit sagittis. Quisque tristique consequat quam sed. Nisl at scelerisque amet nulla purus habitasse.
Nunc sed faucibus bibendum feugiat sed interdum. Ipsum egestas condimentum mi massa. In tincidunt pharetra consectetur sed duis facilisis metus. Etiam egestas in nec sed et. Quis lobortis at sit dictum eget nibh tortor commodo cursus.
Odio felis sagittis, morbi feugiat tortor vitae feugiat fusce aliquet. Nam elementum urna nisi aliquet erat dolor enim. Ornare id morbi eget ipsum. Aliquam senectus neque ut id eget consectetur dictum. Donec posuere pharetra odio consequat scelerisque et, nunc tortor. Nulla adipiscing erat a erat. Condimentum lorem posuere gravida enim posuere cursus diam.