
2024-08-01 12:00:01
Збій у Djinni видалив 20 000 резюме IT-фахівців — як виявилось згодом, це сталося одразу після невдалого оновлення в ніч на п'ятницю.
«Наш скрипт видалив 300 тис “outdated” файлів з резюме, але деякі з них були насправді у використанні і через особливості NFS volume коли почався робочий день всі ці 404 запити спрацювали як DDOS сайту. Ми пробували різні варіанти, щоб повернути базу резюме і наш файловий storage до працюючого стану, але врешті-решт нам довелось піднімати бекап за 1 червня. Як наслідок Djinni не працював майже весь робочий день пʼятниці і ми втратили всі резюме, які кандидати завантажили у червні».
У коментарях до допису розробників підтримують, хоча й задаються питанням — навіщо вантажити велике комплексне рішення за раз і з релізом вночі. Схоже, головне IT-правило в цьому випадку дещо розширило свої часові межі.
«Наш скрипт видалив 300 тис “outdated” файлів з резюме, але деякі з них були насправді у використанні і через особливості NFS volume коли почався робочий день всі ці 404 запити спрацювали як DDOS сайту. Ми пробували різні варіанти, щоб повернути базу резюме і наш файловий storage до працюючого стану, але врешті-решт нам довелось піднімати бекап за 1 червня. Як наслідок Djinni не працював майже весь робочий день пʼятниці і ми втратили всі резюме, які кандидати завантажили у червні».
У коментарях до допису розробників підтримують, хоча й задаються питанням — навіщо вантажити велике комплексне рішення за раз і з релізом вночі. Схоже, головне IT-правило в цьому випадку дещо розширило свої часові межі.