Сообщество - Лига Сисадминов

Лига Сисадминов

2 416 постов 18 934 подписчика

Популярные теги в сообществе:

1741

Ох уж эти it собеседования: ситуация №6 чёткий начальник и солидные деньги

Месяцев 7 назад мне позвонили со словами "вы тот кто нам нужен! Вас то мы и искали!" и пригласили на собеседование на должность полу программиста полу системного администратора. В назначенный час я приехал в центр города, подошёл к красивому зданию и засомневался, до боли всё было солидно и красиво. Войдя в нужный мне офис, мне предложили подождать минут 10 на комфортабельной табуретке, пока начальник не освободится.

Беглый осмотр натолкнул на мысль, что это очередной колл-центр с пятью девочками на минимальную зарплату. Но зачем же им нужен был я?

-Вас ждут, пройдите.

В кабинете руководителя было, как говориться, "дорого богато". Большое кресло, что бы взирать на вопрошающих, огромный стол, за которым можно было играть вдесятером в манчкин, ни к месту медный глобус на отдельной тумбочке (сейчас пишу и понимаю, что вероятно это был минибар), несколько солидных но скупых грамот и... одиноко стоящая в углу бита.

Риторически посмотрев взглядом Дона Корлеоне, начальник начал говорить...

-Короче, тут тема конкретная, реальные бабки заколачиваем.

-... - разница между внешним и внутренним вводила меня в ступор.

-И мне нужны серьезные люди, которые будут на меня работать.

-... - дар речи меня покинул окончательно.

-Итак, щас погоняем тебя по вопросикам, кто такой, почём стоишь, а потом проясним непонятки.

Далее была череда вопросов, от которых я начал сомневаться в том, а было ли у меня вообще высшее образование, опыт работы, что я вообще умею делать и зачем я сюда пришёл.

Среди вопросов были "Обрисуй мне свои навыки, чем ты лучше других?", "Сможешь отвёрткой в машину ГЛОНАС прикрутить?", "Обоснуй почему ты не знаешь С#.

-Ну в целом ты пацан толковый, я согласен тебе отсыпать нормальные такие деньги.

И вот настал мой черёд задавать вопросы.

-Сколько?

-Тебе хватит.

-А поконкретнее?

-У меня тут все за такое работают и не жалуются.

-Иии?

-20к в месяц первый год. Но дважды предупреждать не буду, один косяк и я тебя уволю. Я человек щедрый и если ты будешь хорошо работать, то через год подниму зарплату на 20%.

-24к?

-Именно. И учти, пол года испытательный срок, уволю в любой момент если что.

Выйдя из этого здания я ощущал смешанное чувство, с одной стороны было жалко денег на дорогу до этой серьезной фирмы, где можно обкашлять вопросики, а с другой стороны, сам бы не поверил, если бы не увидел такого чёткого динозавра вживую.

p.s. На днях я увидел вакансию этой же фирмы, после чего вспомнил о них. Оказалось что они так никого и не нашли за эти серьезные деньги.

Показать полностью
42

Куда могло исчезнуть дисковое пространство? (2/5)

Разрежённые файлы (файлы с "дыркой")

Другая проблема может появиться, например, во время создания бэкапа:

Тут возникает вопрос. А как из каталога размером 12 мегабайт получился архив на 426 мегабайт, который занял всё место?
Давайте глянем, какой самый большой файл располагается в каталоге /var/lib/docker:

Интересно, откуда у нас образовался 100 гиговый файл на разделе размером в 5 гигабайт?

Копнём дальше:

Наиболее вероятно, дальнейшее гугление симптомов приведёт вас на страничку wiki, посвящённую разрежённым файлам. И да, здесь мы имеем дело именно с ними (Unix - Профессиональное программирование, стр 157, или М.Керриск - Linux API исчерпывающее руководство, стр. 118).

Да, в описываемом случае Docker использовал в качестве драйвера хранилища Devicemapper, который на данный момент устарел (рекомендуется использовать или overlay2 или fuse-overlayfs для rootless режима). Однако в целом использование разрежённых файлов довольно распространённое решение для хранения файловых систем в файлах, поэтому для devicemapper оно не уникально, и может встречаться достаточно часто.

Заключение

  • Большинство современных файловых систем поддерживают разрежённые файлы. Полный список доступен на вики.

  • Разрежённые файлы - это файлы которые не используют блоки до тех пор, пока туда не будут записаны данные.

  • Разрежённые файлы легко могут быть найдены с помощью однострочника:

где:

указывает что нужно искать на машине все объекты с типом файл

Эта часть распечатает «разреженность» файла и его полное имя.

На этом этапе вывод будет выглядеть примерно так:

Если первое число меньше 1.0, то файл считается «разреженным».

Дальше мы фильтруем вывод с помощью awk:

и получаем список разрежённых файлов.

  • Файлы можно конвертировать в разрежённые и обратно

  • Некоторым утилитам (tar, rsync) нужно передать дополнительные аргументы (например "--sparse" для tar) для работы с разрежёнными файлами

Показать полностью 6
9

Ищу помощи в скачивании прошивки для устройства Fortigate

Здравствуйте.

Ищу человека у кого есть активная подписка на сервисы Fortinet позволяющая скачивать прошивки для устройств и готового помочь их скачать. Есть на руках железки, а подписки нет. Скачать прошивку неоткуда.

Ну или ищу подсказки на ресурс, где можно найти эти прошивки в свободном доступе. Я не нашел.

Заранее спасибо.

39

Куда могло исчезнуть дисковое пространство? (1/5)

В этом небольшом цикле статей будет рассмотрено несколько кейсов, происходивших в реальных инфраструктурах, с описанием их решения.

Тестовая инфраструктура, на которой будем воспроизводить проблемы состоит из виртуалки с Ubuntu 20.04, с установленным стеком LAMP и корневым разделом на 5гигов (потому что больше не понадобится).

Начало каждого инцидента одинаково — мониторинг показывает, что наш веб-сервер не отвечает или внезапно увеличился уровень ошибок.

После оповещения от мониторинга ваша задача первым делом подключиться к серверу по SSH и запустить несколько утилит, для проверки общего состояния сервера: uptime, free, ss, ps и т.д.

Удалённые файлы

Давайте взглянем на первый сценарий. Стандартная проверка для таких случаев:

Чтобы уменьшить количество выводимых данных (например чтобы убрать из вывода tmpfs или squashfs), применим опцию "-x" к df:

В любом случае здесь очевидно, что дисковое пространство полностью исчерпано. Давайте найдём виновного:

У du тоже есть полезная опция "-x", здесь она выполняет задачу исключения из вывода точек монтирования других файловых систем.

Общее пространство, занимаемое корневым разделом, составляет 4,2Gb. То есть у нас должно быть примерно 700Mb свободного места (15% от общего объема). Давайте перепроверим:

Всё так же. Значения в выводах df и du не совпадают:

Выглядит довольно запутанно. Объем свободного дискового пространства, сообщаемый df, меньше суммы размеров всех файлов. Чем же тогда занято всё место?
Оно занято удалёнными файлами.

В выводе команды lsof выше мы можем видеть, что логи сервера Apache хоть и были удалены, но всё еще заняты процессом (М.Керриск - Linux API исчерпывающее руководство, стр. 379). Особенно часто это происходит из-за неправильно настроенного logrotate. Иногда logrotate удаляет журнал, не сообщая процессу, что ему необходимо закрыть файловый дескриптор. Мы можем получить доступ к данным через /proc/$PID/fd/$DESCRIPTOR_NUMBER:

Поскольку данные всё еще там, мы можем их восстановить (кстати еще это может оказаться полезным если вы случайно удалите файлы mysql, тут только главное чтоб сервис был запущен).

Есть пара возможных вариантов решения:

  1. Вы можете перезапустить сервис, и дескриптор будет освобождён.

  2. Или усечь длину файла до нуля, с помощью truncate:

Проверяем:

Отлично. Проблема решена.

Заключение

  • Процесс (в нашем случае Apache) вызвал системный вызов open, и получил дескриптор файла для работы с ним. Поскольку это файл журнала, он не был закрыт сразу.

  • Тем временем какой-то другой процесс (или тот же самый) пытался удалить файл (вызвал системный вызов unlink).

  • Это уменьшило счетчик ссылок в индексном дескрипторе до нуля, и файл исчез из дерева файлов.

  • Однако ядро не смогло освободить блоки, поскольку всё еще существовал открытый дескриптор, ссылающийся на индексный дескриптор.

  • Как итог у нас есть два возможных решения такой проблемы — обрезать файл или закрыть дескриптор.

P.S. Извиняюсь за картинки. Так и не понял, как здесь можно вставлять stdout без потери форматирования. Если кто-то в комментах подскажет - будет супер.

Показать полностью 11
930

Ох уж эти it собеседования: ситуация №5

-Добрый день. Я хочу у вас работать.

-Вы не умеете работать курами на производстве. Вы нам не подходите.

-Что-что простите?

Ох уж эти it собеседования: ситуация №5
Отличная работа, все прочитано!