GitLab.com Database Incident

[scorpion-ds]

В целом сегодня у них весь день простой, я так понимаю, что еще и данные за полдня вчера пропадут.

https://about.gitlab.com/2017/02/01/gitlab-dot-com-database-incident/

P.S.: Сам как-то дропнул БД продакшена, спутав его с тестовым сервером, но так как до этого я как раз стянул БД с прода (что бы на тесте запустить), то потерялись данные максимум минут за 30.

 

[grigori]

out of 5 backup/replication techniques deployed none are working reliably or set up in the first place. => we're now restoring a backup from 6 hours ago that worked

правильно дядя @fixxxer говорил: не проверяешь рикавери из бекапа - нет у тебя этого бекапа

 

[AmdY]

Люди делятся на три вида: тех кто не делает бэкапы, тех кто делает бэкапы и тех кто проверяет бэкапы.

А вообще, облака в этом году разочаровывают, гитлаб упал, а джира у нас в январе целую неделю лежала по 23 часа в день и саппорт атласиана не шевелился, как будто там русские работаю, которые неделю новогодние праздники отмечают. Работа была порализована и у нас.

 

[scorpion-ds]

Мы как раз на Джиру перешли после НГ, плюемся все, она и на той неделе тоже лежала какое-то время ...

 

[AmdY]

@scorpion-ds вы локальную или облачную юзаете?
Помню времена когда юзали локально зануленную версию, постоянно падала, тогда на админов грешили, а сейчас с облаком атласиана такая же беда и я в шоке. Прямо сейчас еле шевелится, я полез форум почитать. Уже мантис в чатике поминали добрым словом.

 

[scorpion-ds]

@AmdY, облако, серверную подумываем развернуть для еще одного проекта, где лучше отдельный трекер, но я сейчас не представляю какой там сервер нужен, что бы он тянул ее нормально.

А мы Redmine стали вспоминать ...

 

[AnrDaemon]

На мантис не гоните. Если из него дурь выбить - хороший трекер.

 

[fixxxer]

с облаком атласиана такая же беда и я в шоке. Прямо сейчас еле шевелится

Как я погляжу, за 3 года лучше не стало.

С локальной версией все хорошо, главное - ее не обновлять

 

[fixxxer]

не представляю какой там сервер нужен

8 гигов оперативки и проц... ну, не Atom, а так в принципе пофигу. Нормально работает, при том что оно в lxc и там же еще и bitbucket server плюс всякое по мелочи.

 

[флоппик]

Я вот весьма доволен self-hosted версией гитлаба. После битбакета - земля и небо, да еще и дешевле чуть ли не в половину обходится.

 

[scorpion-ds]

Gitlab неплох, мне к примеру понравилась их CI, хоть и очень упрощенное, но в целом удобно (для развертывания на тестовом сервере), вот чего не хватает, так это общей работы с задачами для нескольких репозиториев в одном проекте, списком их увидеть можно, но вот в остальном они раздельны (доска, метки и т.п.). Впрочем это уже к репозиторию не относится, но было бы хорошо, если бы они дальше развивали и багтрекер.

 

[grigori]

Пол-года использую Jira после нескольких лет Redmine, и не пойму, как этот глючный монстр может считаться удобным. Постоянные глюки, тормоза, таск в сабтаск или эпик не переделать, куча неработающих фич.

 

[scorpion-ds]

Мы сейчас еще Trello пробуем, но я не в восторге, для разработки не слишком пригодна.

 

[Adelf]

Один раз в жизни я был в полном восторге от процесса разработки. У Саши @admin в ГдеЭтотДом. Там был Редмайн с плагинами и свн с хуками. И ВСЕ общение исключительно шло в редмайне. Никаких чатов. Все общение по таску - в комментах к таску. У меня даже контактов не было, чтобы к другим членам команды обратиться как-либо иначе. Только к менеджеру. Я до сих пор вспоминаю это как идеал внутрикомандного общения.

А по теме - это 'rm -rf' стоимостью в миллионы долларов, имхо. Я был вообще в шоке когда узнал Не думал, что в компании более-менее нормального уровня админы что-то на работающем продакшене руками трогают.

 

[MiksIr]

А мне ютрек нравиться, хренли Особо последние релизы, где чуток переработали агиле борду. А уж апсорс ваще мячта

 

[флоппик]

Мы сейчас еще Trello пробуем, но я не в восторге, для разработки не слишком пригодна.

Трелло тоже атлассиан купил недавно.

Никаких чатов. Все общение по таску - в комментах к таску.

Мы так же в бейзкемпе ведем, на самом деле. Правда с ростом команды уже неудобно, конечно. Посмотрели жиру — жырная и тормозит. Что использовать — хз пока.

А по теме - это 'rm -rf' стоимостью в миллионы долларов, имхо. Я был вообще в шоке когда узнал Не думал, что в компании более-менее нормального уровня админы что-то на работающем продакшене руками трогают.

Там вроде в панике от борьбы со спамерами, начали второпях фиксить и затыкать дырку, за это время реплика стала отставать очень сильно, попытались реплику рестартануть в чистую, снеся данные... да только оказалось, что это была не реплика

 

[AmdY]

Я вот не понимаю, гитлаб бахнулся один раз, столько вони поднялось, почему джире всё прощают, все косяки замалчиваются. Хотя в очередной раз уже час лежит система

Спойлер

 

[Вурдалак]

гитлаб бахнулся один раз, столько вони поднялось

Это где?

 

[scorpion-ds]

Я вот не понимаю, гитлаб бахнулся один раз, столько вони поднялось, почему джире всё прощают, все косяки замалчиваются. Хотя в очередной раз уже час лежит система

Свое хаить, такая уж традиция, а Джира вчера действительно снова подводила.

Гитлаб во всем сразу сознался и начал публично сообщать о своих проблемах и предпринимаемый действиях, я считаю, что они красиво поступили, примерно также поступил Самсунг, когда их Нот7 стал взрываться, но некоторые это восприняли как проявление слабости.