Здравствуйте, специалисты по Linux, Erlang и/или EJabberd.

Я столкнулся с очень странной (и даже невероятной) ситуацией при использовании EJabberd. Необъяснимость произошедшего очень заинтересовала, но собственное расследование ни к чему не привело. Надеюсь на помощь сообщества.

Исходные данные: VDS под Xen, на которой уже полгода крутится Ubuntu 12.04, и стандартные пакеты: изолированный (без S2S) EJabberd и RabbitMQ. За всё это время оба приложения перезагружались только планово при обновлениях или перезагрузках всего сервера, в остальном работали стабильно. К ejabberd локально подключен jabber-bot.

Недавно, пересматривая логи, обнаружил что бот терял связь с сервером на 40 секунд. Удивился, не сеть localhost же отваливался — посмотрел больше. И тут началось интересное.

Исходя из логов и таблицы процессов оказалось что процесс с Erlang VM (beam) был перезагружен. Время создание beam-процесса и его внутренний uptime (ejabberdctl stats uptimeseconds) конечно же соответствовали времени отключения бота.

Вопросы: почему упал(?) хвалёный пуленепробиваемый elrang. И, что более интересно, — кто его перезапустил?

Подвох в том, что в стандартном пакете 12.04 он запускается не через upstart (который умеет следить и respawn'ить), а через старый init.d (SysV), который является простым набором скриптов и запущенные процессы не контролирует, "умерла так умерла".

Ejabberd действительно никто не мониторит. "Убитый девяткой" (kill -9) не поднимается.

Перезагрузился только ejabberd. Ни RabbitMQ, ни epmd, ни другие демоны не "пострадали".

Это произошло во время выполнения cron.daily (стандартный набор). Послужило ли это причиной падения и/или поднятия? Возможно, но я не знаю какая связь. И в предыдущие полгода ничего такого не происходило.

Собрал все логи в одну ленту времени, расположил хронологически.

syslog.log: Cron начинает работу: Oct 25 16:18:01 myhostname CRON[18678]: (root) CMD (test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/cron.daily ))

ejabberd.log: EJD без видимой причины начинает отключать всех клиентов: =INFO REPORT==== 2013-10-25 16:22:57 === I(:ejabberd_c2s:1502) : ({socket_state,tls,{tlssock,#Port,#Port},}) Close session for admin@myhostname.com/3977817831382700501260091 =INFO REPORT==== 2013-10-25 16:22:57 === I(:ejabberd_c2s:1502) : ({socket_state,tls,{tlssock,#Port,#Port},}) Close session for support@myhostname.com/11507889201382475822937194 =INFO REPORT==== 2013-10-25 16:22:58 === I(:ejabberd_c2s:1502) : ({socket_state,gen_tcp,#Port,}) Close session for bot@myhostname.com/30615165031382475819899328

ejabberd.log: Некоторые клиенты пробуют вернуться: =INFO REPORT==== 2013-10-25 16:23:00 === I(:ejabberd_listener:281) : (#Port) Accepted connection {{127,0,0,1},33716} -> {{127,0,0,1},5222} =INFO REPORT==== 2013-10-25 16:23:00 === I(:ejabberd_c2s:785) : ({socket_state,gen_tcp,#Port,}) Accepted authentication for bot by [] =INFO REPORT==== 2013-10-25 16:23:01 === I(:ejabberd_c2s:938) : ({socket_state,gen_tcp,#Port,}) Opened session for bot@myhostname.com/90172789113827037819693

ejabberd.log: Но сервер тут же выключается: =INFO REPORT==== 2013-10-25 16:23:02 === I(:ejabberd_app:89) : ejabberd 2.1.10 is stopped in the node ejabberd@myhostname

erlang.log, ejabberd.log: Сервер читает конфигурацию, поднимается: =PROGRESS REPORT==== 25-Oct-2013::16:23:29 === supervisor: {local,ejabberd_sup} started: [{pid,}, {name,ejabberd_hooks}, {mfargs,{ejabberd_hooks,start_link,[]}}, {restart_type,permanent}, {shutdown,brutal_kill}, {child_type,worker}] =WARNING REPORT==== 2013-10-25 16:23:29 === W(:ejabberd_config:260) : The option 'modules' is disallowed, and will not be accepted =INFO REPORT==== 2013-10-25 16:23:31 === I(:ejabberd_app:72) : ejabberd 2.1.10 is started in the node ejabberd@myhostname

ejabberd.log: Возвращаются клиенты: =INFO REPORT==== 2013-10-25 16:23:32 === I(:ejabberd_listener:281) : (#Port) Accepted connection {{127,0,0,1},33730} -> {{127,0,0,1},5222} =INFO REPORT==== 2013-10-25 16:23:32 === I(:ejabberd_c2s:785) : ({socket_state,gen_tcp,#Port,}) Accepted authentication for bot by [] =INFO REPORT==== 2013-10-25 16:23:32 === I(:ejabberd_c2s:938) : ({socket_state,gen_tcp,#Port,}) Opened session for bot@myhostname.com/21300376551382703812415798

syslog.log: При этом cron всё ещё работает. Oct 25 16:23:38 myhostname rsyslogd: [origin software="rsyslogd" swVersion="5.8.6" x-pid="454" x-info="http://www.rsyslog.com"] rsyslogd was HUPed

Гипотезы, аргументы и вопросы:

1. Это просто был очень редкий гейзенбаг. Но кто же тогда перезапустил демона?

2. Cron перезапустил процесс для каких-то своих целей. Но раньше такого никогда не случалось. Да и слишком топорно для сетевого сервера.

3. Ejabberd решил перезапуститься по какой-то причине. Критическая ошибка, плановая перезагрузка (поискал в документации и коде про это — не нашёл). Похоже, потому что перезагрузка была мягкая, вначале отключались клиенты, в потом завершился процесс. Но почему тогда перезагрузилась сама VM? Обычно EJD рестартует внутри VM (ejabberdctl restart).

4. Erlang VM решил перезапуститься по какой-то причине. Если это критическая ошибка, то вряд ли EJD успел бы плавно отключить всех клиентов. Если плановая перезагрузка —… мы же про Erlang говорим, а не про Win95.

5. Это так Xen шалит. Не работал с ним, не в курсе его возможностей и особенностей. Но странно, если он отстреливает и перезапускает процессы.

6. Я проглядел монитор-респаунер EJD. Почему он тогда не поднимается после kill -9? Ну всякое бывает, раскройте мне глаза.

Перезапущенный нечистой силой демон сейчас работает, для проверки гипотез можно что-то посмотреть.

Есть такая проблема. Время от времени приходится снифирить трафик на интерфейсе и при разборе что да как приходится отфильтровывать кучу мусора. Можно ли как-то заблокировать по умолчанию весь трафик и разрешить только нужное.

Есть интернет-магазин. Через форму быстрого заказа ежедневно сыпятся спам-заказы. По логам вычислил как минимум два IP-адреса, с которых эти заказы отправляются POST-запросом. Как грамотно их заблокировать? Какая-то директива в .htaccess? Какие еще способы борьбы с такими ботами есть? Капчу ставить не хочется.

Спасибо.

Есть сеть 80-100 машин linux xubuntu. Работа через терминал - 2003r2 2008r2. Сейчас работа идет через remmina. С ней есть проблема. Часто, при коннекте в сессию, после ввода логина и пароля, окно приглашения пропадает, остается "серый экран", и клиент зависает. Исправляется выбрасыванием пользователя из сессии. Нашел программу 2x client там все работает замечательно, но не пробрасываются принтеры. Техподдержка платная, и стоит дорого. Посему прошу помощи здесь. Может кто сталкивался? Как пробросить принтеры через 2x client или исправить "серые экраны" в remmina

Работаю над личным проектом в одиночку, очень часто внедрение новых функций оборачивается ошибками. На сайте уже есть активное сообщество и из-за специфики проекта ошибки очень сильно нарушают работу ресурса. Лояльность падает.

С ноября всё стал сначала делать на тестовом сервере (полный дубликат рабочего), на рабочем развернул git и туда уже вливаю изменения из тестовых веток. Но ошибки всё равно есть, так как видимо я не могу отследить все моменты при тестировании, а хочется внедрять новшества быстрее. Может я слишком спешу?

Можете посоветовать какие-нибудь методологии разработки и внедрения новых фич, существующие в профессиональных проектах. Спасибо.

Получили внешний жесткий диск в подарок к телевизору Samsung. Через три недели очень редкого использования при подключении через usb распиналась файловая система, винда предложила отформатировать, но не смогла - ошибка (не заскриншотил, извините). Помогло только удаление раздела и сознание нового. До первого же перетыкания. После подключения и отключения - та же беда. Разобрал кейс (он, кстати, одноразовый, без поломки защелок - не разобрать). Воткнул диск в новый карман (другой, заведомо рабочий), отформатировал, в таком состоянии диск работает уже неделю, нет никаких нареканий.
Внутри стоял WD5000BPVT. Вывод - прокладка-конвертер SATA-USB - полный шлак. Скорость чтения в стандартном кармене была 30 мб/с. в другом кармане - 40 мб/с.
Но не это было самым огорчительным.

При попытке подключить диск напрямую через сата - компьютер не стартует. На первом же окне после проверки памяти/дисков экран становится черный, и все.. Тихо шуршат вентиляторы, биоса нет.
Отключил, поставил в биосе на этот сата порт горячее подключение, загрузился, воткнул хард - менеджер дисков видит два куска - 58.22 RAW и не размеченный на 407.54.

Вопрос к знатокам - что это зверь?
Через мои руки прошло много жестких дисков, но такое - вижу в первый раз.
Хотелось бы все-таки его использовать в качестве внутреннего.
Буду искренне благодарен за дельные советы.

UPD: Слышал, что у некоего знакомого знакомого такая же проблема.

Возможно вопрос ниже покажется бредовым, так как уже утро, но все же я спрошу.

Вот много на свете IT-профессий.

Возьмем к примеру программиста, — для того, чтобы получить опыт и знания, при этом не потеряв мотивацию, ему нужно программировать, — он может делать свою любимую программу о которой мечтал, просиживая ночами, не смыкая глаз, забывая о еде, так как он очень увлечен этим невероятным процессом; дизайнер — дорабатывать старые иконки, придумать логотип, знаки шрифты и прочее, — аналогично.

Сюда же проектировщик интерфейсов, художник, иллюстратор, 3D-модельер, верстальщик — людьми движет творческая страсть к любимому делу, в связи с этим их производительность, скорость обучения очень хорошая.

А если я системный администратор (инженер по сетям, администратор СУБД и пр.), то в чем искать творческую составляющую? Ну скачал я учебник по CCNA, кучу вопросов, симулятор сетевого оборудования, да хоть само оборудование домой — все это скучно, если ты не работаешь где-нибудь у провайдера, нет той свободы, нельзя построить свой маленький мир из классов и объектов, слоев и анимации; отсюда — нет мотивации тупо учить; читать → воспроизводить → понимать и так несколько месяцев, пока не усвоишь. Неужели мне просто не нравится своя профессия, что мне так от нее скучно? Но ведь это действительно так!

Как быть?

Добрый день!
Прошу помощи сообщества в формировании необходимой базы знаний для старта фрилансером, а конкретнее хочется уйти на odesk.com, но необходимо еще многому научится.
В данный момент работаю эникеем, поэтому хочу выбрать целевую нишу и стать в ней профессионалом. Посоветуйте, что сейчас актуально в сфере администрирования во фрилансе и желательно еще литературу по предлагаемым направлениям.