Лучшее - враг хорошего.
Oct. 13th, 2008 09:25 pm![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png)
Прослушайте печальную историю о мальчике Бобби о том, как наживаются проблемы.
Одна большая-пребольшая компания (назовём её "Громкофон") держала собственный почтовый сервер. Обычный такой sendmail не на очень мощной машинке - но всё работало. Компания росла, почты становилось много, потом очень много, потом её стали многия гигабайты (невозможно объяснить всем юзерам, что полустаметровый бмп, созданный сканером визуально имеет такое же качество, как и полуметровый жпег) и сервак стал подыхать. Как подохнет - так админ прибьёт почту постарее, перезапустит демона, и полетели письма по городам и весям.
Но однажды было решено, что электрическая почта - это мало и несерьёзно. Электронный документооборот должен быть мощен, важен и пышен. Для обеспечения серьёзности были наняты сторонние подрядчики, которые нежно ввели в эксплуатацию чудо-барабайку Exchange.
Для 95% пользователей не поменялось ничего, как была для них почта иконкой оутглюка, так и осталась. Остальные 5% получили довольно существенные удобства, вроде автоматической самонастройки почтового клиента при входе в домен, удобных расписаний, возможности доступа к внутренним ящикам через веб-морду без заюзывания VPN и прочих интересных вещей.
И всё бы хорошо было. Но работает новая (да какая новая... полгода уже в эксплуатации) система примерно два дня в неделю, и то не у всех пользователей. А ведь ресурсы выделяли под систему с запасом - два взаимореплицируемых сервера в кластере, при падении одного почта должна мнгновенно подниматься на другом. Это в теории, на практике же каждое утро начинается со звонков "почему у нас почта не работает".
И если sendmail, хоть и падал иногда пару раз в день, перезапускался в течении 10-15 минут волшебным пенделем (а сделать это мог даже студент-практикант), то чудо-барабайку наши спецы поднимают часами, и обычно, поднять не могут. Тяжёлая, наверно. Тогда зовётся подрядчик, который нам настройку делал, и он начинает барабайку расковыривать. К следующему утру почта работает, все довольны - примерно до обеда. После обеда почта рушится.
Если посчитать, какие убытки это приносит компании с несколькими тысячами сотрудников, выйдет очень нехилая сумма. Достаточная, чтобы руководители компании задумались над ситуацией, над которой они вообще не должны думать.
Почему процесса задумывания не происходит - мне не очень ясно.
Одна большая-пребольшая компания (назовём её "Громкофон") держала собственный почтовый сервер. Обычный такой sendmail не на очень мощной машинке - но всё работало. Компания росла, почты становилось много, потом очень много, потом её стали многия гигабайты (невозможно объяснить всем юзерам, что полустаметровый бмп, созданный сканером визуально имеет такое же качество, как и полуметровый жпег) и сервак стал подыхать. Как подохнет - так админ прибьёт почту постарее, перезапустит демона, и полетели письма по городам и весям.
Но однажды было решено, что электрическая почта - это мало и несерьёзно. Электронный документооборот должен быть мощен, важен и пышен. Для обеспечения серьёзности были наняты сторонние подрядчики, которые нежно ввели в эксплуатацию чудо-барабайку Exchange.
Для 95% пользователей не поменялось ничего, как была для них почта иконкой оутглюка, так и осталась. Остальные 5% получили довольно существенные удобства, вроде автоматической самонастройки почтового клиента при входе в домен, удобных расписаний, возможности доступа к внутренним ящикам через веб-морду без заюзывания VPN и прочих интересных вещей.
И всё бы хорошо было. Но работает новая (да какая новая... полгода уже в эксплуатации) система примерно два дня в неделю, и то не у всех пользователей. А ведь ресурсы выделяли под систему с запасом - два взаимореплицируемых сервера в кластере, при падении одного почта должна мнгновенно подниматься на другом. Это в теории, на практике же каждое утро начинается со звонков "почему у нас почта не работает".
И если sendmail, хоть и падал иногда пару раз в день, перезапускался в течении 10-15 минут волшебным пенделем (а сделать это мог даже студент-практикант), то чудо-барабайку наши спецы поднимают часами, и обычно, поднять не могут. Тяжёлая, наверно. Тогда зовётся подрядчик, который нам настройку делал, и он начинает барабайку расковыривать. К следующему утру почта работает, все довольны - примерно до обеда. После обеда почта рушится.
Если посчитать, какие убытки это приносит компании с несколькими тысячами сотрудников, выйдет очень нехилая сумма. Достаточная, чтобы руководители компании задумались над ситуацией, над которой они вообще не должны думать.
Почему процесса задумывания не происходит - мне не очень ясно.
no subject
Date: 2008-10-13 06:17 pm (UTC)no subject
Date: 2008-10-14 05:05 am (UTC)Подробности мне неизвестны, но тут, скорее всего, отката не было. Система сама по себе удобная, и свои задачи выполняет.
Только со стабильностью проблемы. Верю, что устранимые. Но не понимаю, почему устраняют последствия, а не причины.
no subject
Date: 2008-10-14 05:27 am (UTC)может там специалистов нет таких, которые понимали бы причины? а если, то значит такая политика руководства, значит это кому-то надо...
просто у нас на работе подобные случаи бывают, но все понимают почему...
no subject
Date: 2008-10-14 05:54 am (UTC)Спорить не стану, всей подноготной не знаю.
Уже после опубликования поста узнал, что руководство всыпало пиздюлей кому требуется, на сервера поставили какой-то патч, обещают, что теперь всё будет работать даже в атомную войну.
no subject
Date: 2008-10-13 07:59 pm (UTC)no subject
Date: 2008-10-14 05:14 am (UTC)no subject
Date: 2008-10-14 02:55 am (UTC)ведь Мракософт на таких вот "руководителях" сделал 60 мильярдов чистыми в прошлом году =)
ну и лощеные "айфоноводы" и "HTC водители" из ИТ консалтинга всегда будут за коммерчески успешного вендора, приводя в пример уже "работающие" системы
на самом деле проблема в том, что РЕАЛЬНО есть примеры УСПЕШНОГО внедрения
no subject
Date: 2008-10-14 05:52 am (UTC)Ну уж целиком и полностью обливать MS говном не стоит. Вернее, стоит - но не только её. Я бы равномерно размазал какашки по всем вендорам, чьи продукты у нас внедрены.
У HP, к примеру, есть невыносимо жуткий и бесполезный OVO. Вот его приёмка, думается, без откатов не обошлась.
Есть и удачные решения, в том числе и от MS (в основном, серверные компоненты). Они ставятся в тех случаях, когда выбирать проект дают тому, кто будет им пользоваться.
no subject
Date: 2008-10-14 01:43 pm (UTC)no subject
Date: 2008-10-14 02:54 pm (UTC)Могу разузнать, если не забуду.
Знаю только, что один из косяков - не всегда автоматом поднимается копия базы на реплицируемом серваке в кластере, тогда как-то руками заводят.
no subject
Date: 2008-10-22 05:56 pm (UTC)no subject
Date: 2008-10-23 04:05 am (UTC)Кстати, как раз после вышеприведённой жалобы, те, кто был должен получить пиздюлей, их получили, и вот уже вторую неделю сервер работает железно.
no subject
Date: 2008-10-23 04:24 am (UTC)я работаю в довольно успешной фирме.. недавно понял почему наше дело все время процветает.. все начальники трепетно называют вазелин БИЗНЕС-ГЕЛЕМ