proft.me - Блог о Linux, Python, Vim и другом здоровом образе жизни

Сменил xubuntu на arch linux

Tue, 24 Apr 2012 23:15:44 +0300

Arch linux будет третьим моим linux-дистрибутивом на десктопе, а все начиналось в далеком 2004, когда мне предложили писать на Qt и я решил поставить Red Hat 8.0 (до сих пор в загашнике валяются три cd-болванки) с KDE 3 (ностальгирую). В 2008 решил попробовать ubuntu и заказал диск с Hardy Heron, 8.04 (услуга доставки дисков shipit от canonical тогда еще работала).

Почему выбрал арч? Вот несколько причин:

Облегченность. Простота настройки. Расширение кругозора. Мне понравился подход используемый для распространения arch - базовый образ занимает 390 МБ и устанавливается за 10 минут. Дальше обновляешься до актуальной версии и доставляешь нужные только тебе пакеты. Например в моей xubuntu 11.10 было около 1900 пакетов, часть из которых мне не нужны и висели багажом, сейчас в арче 842 пакета. Также удобно что основные настройки (демоны, модули, сеть, локаль, временная зона) настраивается в одном текстовом файле. В общем рай для тех, кому нравится знать, что у него 'под капотом'.
Wiki. Вики содержит почти всю (если не всю) информацию про дистрибутив, начиная с установки, заканчивая нюансами настройки видеокарт, тачпадов и возможных отклонений при разных конфигурациях. Раньше, что бы решить какую-либо проблему для ubuntu или centos приходилось рыскать по разным блогам. Сейчас же достаточно зайти на вики и скорее всего там есть решение. Также вики постоянно обновляется и за всеми новостями можно следить в одном месте, удобно. Пытался я как-то такое найти для ubuntu - безрезультатно, на форуме мой топик остался без должного внимания.
AUR. AUR позволяет собирать пакеты отсутствующие в основных репозитариях. Чаще всего в ауре можно встретить самые свежие версии из git, hg, svn, bzr репозитариев или модификации пакетов с какими-то рюшками от других пользователей. Раньше что-бы найти новое приложение, которого нет в репозитариях ubuntu, приходилось гуглить и находить ppa, сейчас достаточно поискать в AUR и выбрать желаемый пакет. Недавно хотел поставить последнюю стабильную версию GIMP 2.7.2, не все так просто оказалось, надо было вручную разрешать зависимости, устанавливать последние версии библиотек из git-репозитария. В арче достаточно найти нужную версию в ауре и подтвердить установку нужных зависимостей.
Rolling release model. Это означает, что нету обновлений дистрибутива с некоторой периодичность (например, как у ubuntu раз в шесть месяцев), а обновленные пакеты приезжают по мере своего обновления. Если что-то сломается то всегда можно откатится на предыдущую версию, для для этого есть несколько вариантов. У меня за два месяца использования такое было только раз: на одной из машин отвалился wifi c ядром 3.3.1, пришлось откатится на 3.2 и добавить пакет в игнор, с новым ядром 3.3.2 все работает как и полагается. Еще один позитив - не надо пере устанавливать систему при неудачном апгрейде. Я застал 8 релизов ubuntu, три прошли с неработоспособной системой после обновлений, как следствие - пере установка рутового раздела и установка нужных приложений с нуля.
Python3. В арче, начиная с конца 2010 года по умолчанию установлен python3. Это подстегнуло меня более вдумчиво прочитать новшества в третей версии, изменения в основных ветках смотри по ссылкам 3.0, 3.1, 3.2. Переезд используемых скриптов не занял много времени, консольная утилита 2to3 отлично справляется со своим предназначением. (Про то, что в ubuntu 12.04 уже будет python3 я знаю).
Производительность. Местами система стала отзывчевей и время первой загрузки стало заметно быстрее.
Шрифты. Шрифты из коробки стали приятнее чем были в xubuntu. Как я только не колдовал с fonts.conf - похожего эффекта мне не удалось добиться под ubuntu. Также в chromium, под ubuntu, на некоторых сайтах шрифты отображались без сглаживания, как оказалось в последствии, это баг chromium который проявляется не всегда. В том же самом релизе chromium (линейки 18) на арче все выглядит нормально.

Ниже описаны действия которые я проделывал у себя, сохраню собранную инфу для будущих поколений. Почти все это можно найти в разных уголках вики.

Первоначальная установка

Пакеты выбранные при установке:

# группы
base base-devel

# пакеты
net-tools netcfg openssh sudo wireless_tools

Локаль правим на последних шагах установщика либо уже после установки.

# vim /etc/locale.gen

# раскомментировать строку
ru_RU.UTF-8 UTF-8

# сохраняем файл, запускаем
locale-gen

Раскомментируем ближайшие репозитарии в файле /etc/pacman.d/mirrorlist. Свежий список зеркал можно получить тут.

Настроем wifi-сеть с помощью netcfg.

# скопируем пример с настройками 
cp /etc/network.d/examples/wireless-wpa /etc/network.d/mywifi

# внесем нужные правки в /etc/network.d/mywifi (название сети, пароль)
vim /etc/network.d/mywifi

# выполним для безопасности
chmod 0600 /etc/network.d/mywifi

# добавим netcfg при загрузке, для этого надо отредактировать строки с NETWORKS и DAEMONS
vim /etc/rc.conf

NETWORKS=(mywifi)
DAEMONS=(syslog-ng @network @net-profiles crond)

Со времени выхода последнего установочного диска (август 2011) были проделаны разные обновления в внутренностях системы. Подскажем системе что обновилось.

1. initscripts update

rm /etc/profile.d/locale.sh

2. Ошибка вида glibc: /usr/bin/tzselect exists in filesystem

pacman -S tzdata

3. filesystem upgrade

pacman -S filesystem --force

Обновим систему.

pacman -Syu

Добавим в /etc/pacman.conf два новых репозитария для yaourt и vim. Краткий список с примерами использования pacman и yaourt (надстройка над pacman с возможность установки из AUR) можно посмотреть тут.

# vim /etc/pacman.conf

[archlinuxfr]
Server = http://repo.archlinux.fr/$arch

[herecura-stable]
Server = http://repo.herecura.be/herecura-stable/$arch

Обновим vim и yaourt.

pacman -S herecura-stable/vim yaourt

Добавим рабочего пользователя и добавим его в группу wheel. Я использую zsh вместо bash потому сразу и установлю его.

# создание пользователя

pacman -S zsh
useradd -m -g users -G audio,lp,optical,storage,video,games,power,wheel -s /bin/zsh proft
passwd proft

# добавление в новую группу
export EDITOR=vim && visudo

# раскомментировать строку
%wheel ALL=(ALL) ALL

Графическая среда

Установка Xorg.

sudo pacman -S dbus xorg-server xorg-xinit xorg-utils xorg-server-utils xorg xf86-input-keyboard xf86-input-mouse

Добавить dbus в DAEMONS.

Установка драйвера на видео.

# для intel
sudo pacman -S xf86-video-intel

# для nvidia
sudo pacman -S nvidia

Установка XFCE.

sudo pacman -S xfce4 xfce4-goodies
sudo yaourt -S xfce4-volumed xfce4-notifyd

Для корректной отрисовки приложений написанных на QT понадобится пакет libgnomeui.

sudo pacman -S libgnomeui

Установка менеджера входа Slim.

sudo pacman -S slim slim-themes archlinux-themes-slim

Отредактируем /etc/inittab, переключив уровень запуска по умолчанию на 5, также раскомментируем строку с slim, для включении его в качестве менеджера входа по умолчанию.

Добавим новые раскладки для клавиатуры.

# sudo vim /etc/X11/xorg.conf.d/10-evdev.conf:
# в раздел для клавиатуры добавим

Option "XkbLayout" "us,ru,ua"
Option "XkbVariant" ",winkeys"

Активируем запуск xfce при логине.

# vim ~/.xinitrc

#!/bin/sh
exec ck-launch-session startxfce4

Установим дополнительные шрифты.

yaourt -S ttf-dejavu ttf-bitstream-vera ttf-ms-fonts terminus-font ttf-ubuntu-font-family

Установим скринсервер.

yaourt -S xscreensaver-arch-logo

Украшательства: темы, иконки, курсоры.

sudo pacman -S faenza-cupertino-icon-theme faenza-icon-theme faenza-xfce-addon xcursor-human xfce-theme-greybird zukitwo-themes

Звук

Т.к. ALSA установлена по умолчанию, то установим пакет alsa-utils в котором есть микшер.

sudo pacman -S alsa-utils

Включим звук с помощью alsamixer (по умолчанию он отключен).

Сохраним настройки.

sudo alsactl store

Добавим alsa в /etc/rc.conf (секция DAEMONS) для восстановления уровней микшера при загрузке.

Дополнительные приложения

Сетевые приложения.

sudo pacman -S dnsutils whois flashplugin firefox chromium transmission-gtk

Skype.

yaourt -S skype skypetab-ng-git v4l-utils

Аудио и видио-плейер, кодеки.

sudo pacman -S smplayer smplayer-themes deadbeef libvorbis libmad flac curl wavpack ffmpeg libsndfile mpg123

Nautilus и архивы (rar, zip c поддержкой национальных символов).

pacman -S nautilus p7zip zip unrar file-roller gstreamer0.10-plugins
yaourt -S unzip-beta gloobus-sushi-bzr

Ассоциация файлов с приложением для отдельного пользователя находятся в ~/.local/share/applications/mimeapps.list. Для всех пользователей в /usr/share/applications/defaults.list.

Dropbox.

yaourt -S dropbox dropbox-daemon nautilus-dropbox

Впишем имя системного пользователя в файл /etc/conf.d/dropboxd.conf.

Добавим dropboxd в список DAEMONS в файле /etc/rc.conf.

LibreOffice.

pacman -S libreoffice libreoffice-gnome

Разная мелочь: Synapse, Clipit, Caffeine, Goldendict, Pidgin.

yaourt -S synapse clipit caffeine goldendict-git pidgin pidgin-faenza-tray-dark-icons evince keepassx

Настройки для ноутбука/нетбука

Установим драйвер для тачпада.

sudo pacman -S xf86-input-synaptics

Установим пакет laptop-mode-tools для управления энергосбережением.

sudo pacman -S laptop-mode-tools acpi hdparm

Добавим laptop-mode в список DAEMONS в файле /etc/rc.conf.

Подробности настройки Laptop Mode смотри в вики и про ноутбуки в целом.

Настройка принтера

Для Samsung'овских usb-принтеров понадобятся два пакета

yaourt -S cups-usblp splix

Дальше заходим браузером на http://localhost:631, вводим рутовый пароль, выбираем Adding Printers and Classes → Add Printer и следуем предлагаем инструкциям.

Скриншот десктопа.

Водный марафон 2012

Mon, 16 Apr 2012 01:22:16 +0300

В прошлые выходные (7,8 апреля) состоялся очередной водный марафон протяженостью 100 км. Примерная география участников: Винница, Киев, Черкассы, Чернигов, Молдавия. Маршрут такой же: Спартак-Тывров (первые 50 км), Тывров-Печора (вторые 50 км + пороги).

Погода в этот раз была более дружелюбной, без снегопада. Только на втором этапе лил дождь, примерно с половины дороги, но это лучше чем град с дождем :) как в прошлый раз.

За время марафона мы сменили две посудины: вышли на байдарке, двойке, а финишировали на катамаране :) (см. фото ниже). Возле Воробьевки, где-то на третьем пороге, пробили байдарку. В этому году уровень воды был меньше и часто приходилось вылазить с байды и отталкивается от камней. Черпать воду под дождем не вариант :), клеить латку - тоже, отвалится при первом же камне. Пока осматривали пробоину, нас догнал шестиместный катамаран, но с четырьмя гребцами, места хватило и мне с напарником и байду можно было привязать по центру, так и финишировали :).

Представителей из процессы/телевидения в этом году было больше: два местных (20 минут, Вита) и Интер.

Ролик со старта, правда, не очень хорошего качества, от 20 минут (мы на ближнем плане, оранжевая байдарка)

Ролик от Вита - больше разных интервью от организаторов и участников, старт показали частично. Также есть заметка на myvin.com.ua.

Ролик от Интера пока не нашел.

Как и в прошлый раз - масса положительных эмоций и физическая усталость, такое впечатление что таскал весь день рояль, в девяти-этажной коммуналке, без лифта :).

Еще +100 к моему пределу возможностей :-D

pacman: пакетный менеджер для arch linux

Sat, 24 Mar 2012 13:02:39 +0200

Pacman - это пакетный менеджер для дистрибутива Arch. Pacman умеет работать с базовыми репозитариями Arch, выполняя привычные действия: поиск, установка, получение информации о пакете и т.д., но существует удобная надстройки над ним - yaourt, которая кроме функций самого pacman обладает некоторыми другими: предоставление прямого доступа к AUR (пользовательский репозитарий Arch), позволяющей собирать и устанавливать пакеты автоматически. Из эстетический вкусностей yaourt - раскрашивание рабочего выхлопа, чего я не видел в других менеджерах пакетов, мелочь, а приятно.

Пост представляет собой мини-справочник по опциям pacman/yaourt, по аналогии с справочниками для других пакетных менеджеров apt/dpkg и rpm/yum.

Подготовка к установке yaourt (выполнять от root)

pacman -S base-devel fakeroot sudo

Добавим в pacman.conf репозитарий с yaourt

# vim /etc/pacman.conf

[archlinuxfr]
Server = http://repo.archlinux.fr/$arch

Установка

pacman -Syu yaourt

Команда pacman	Команда yaourt	Описание
pacman -S package_name/group_name	yaourt -S package_name	установка/переустановка пакета/группы с именем package_name/group_name; опция `--ignore` packagename - игнорирование пакета при установке/обновлении; опция -p выводит список действий команды, без выполнения самого действия
pacman -Sg group_name	yaourt -Sg group_name	список пакетов в группе group_name
pacman -Sl repository	yaourt -Sl repository	список всех пакетов в указанном репозитарии
pacman -Sw packagename	yaourt -Sw packagename	скачивание пакета packagename, без установки
pacman -U /path/to/package.pkg.tar.xz	yaourt -U /path/to/package.pkg.tar.xz	установка пакета package.pkg.tar.xz из файла
pacman -R package_name	yaourt -R package_name	удаление пакета package_name без удаления зависимостей, опция -s для удаления зависимостей, не использующимися другими пакетами
pacman -Syu	yaourt -Syua	обновление системы, набор опций для pacman обновляет пакеты из базовых репозитариев, для yaourt - также обновляет из AUR
pacman -Qu	yaourt -Qu	список пакетов, для которых доступны обновления
pacman -Q packagename	yaourt -Q packagename	поиск пакета packagename в локальной базе пакетов
pacman -Ss package_name/package_desc	yaourt package_name/package_desc	поиск в базовых репозитариях пакета (в AUR для yaourt) с именем package_name или описанием package_desc
pacman -Si package_name	yaourt -Si package_name	информация о пакете package_name (извлекается из базовых репозитариев)
pacman -Qi package_name	yaourt -Qi package_name	информация о локально установленном пакете package_name
pacman -Ql package_name	yaourt -Ql package_name	список файлов, установленных пакетом package_name
pacman -Qo /path/file	yaourt -Qo /path/file	получение имени пакета, которому принадлежит файл path/file
	yaourt -S --depends packagename	список пакетов, которые зависят от packagename
pacman -Sc	yaourt -Sc	удалить из кэша /var/cache/pacman/pkg неустановленные пакеты и закэшированные базы с пакетами
	yaourt -G package_name	получить PKGBUILD для пакета package_name
	yaourt --stats	статистика по установленным пакетам

Профайлинг Python/Django/Flask приложений

Tue, 20 Mar 2012 21:10:42 +0200

Профайлер - программа, предназначенная для измерения производительности отдельного куска кода или всего приложения. Профайлер умеет собирать такие статистических данные: список вызываемых функций, количество вызовов функции, время проведенное внутри функции и т.д.

Иногда так случается, что функционал содержащий несколько строчек кода в начале процесса разработки может обрасти дополнительными возможностями и разными вызовами вспомогательных функций. Казалось бы, все хорошо, функционал реализован на все 110% но вдруг замечается легкая задумчивость при обращении к новому функционалу. Специально для таких случаев существует профайлер, который умеет подсчитывать время, проведенное исполняющим процессом внутри определенной функции и количество вызовов этой функции.

Последние версии python поставляются с тремя разными профайлерами: cProfile (рекомендуемый в большинстве случаев), profile (удобен в случае добавления функционала к стандартному профайлеру), hotshot (на данный момент не поддерживается, но обладающий двумя методами которые до сих пор актуальны - start и stop).

В качестве примера работы профайлера будет использоваться синтетический тест работы процессора - pystones

# файл tst.py

import test.pystone
test.pystone.pystones()

Ниже приведен пример запуска py-файла, рабочий выхлоп профайлера отсортирован по суммарному времени проведенному внутри определенной функции, другие возможные варианты сортировки есть тут.

python -m cProfile -s cumulative tst.py

Результат работы профайлера можно сохранить в файл

python -m cProfile -o profile.pstats tst.py

Сохраненный файл можно проанализировать с помощью сторонних утилит (kcachegrind, RunSnakeRun), либо вручную

import pstats
p = pstats.Stats('profile.pstats')

# вывести только функции, которые вызывали функцию Proc0
p.print_callers('Proc0')

Для построчного профайлинга есть модуль line_profiler, который умеет подсчитывать количество обращений к отдельным строкам кода.

# установка
pip install line_profiler

# запуск профайлера
kernprof.py tst.py

# просмотр собранных данных
python -m pstats tst.py.prof
tst.py.prof% stats

Пакет profilestats предоставляет декоратор для функций, позволяющий сохранять результаты работы профайлера в формате kcachegrind.

Кроме kcachegrind есть еще один способ визуализации - с помощью Gprof2Dot, который умеет строить дерево из вызываемых функций и визуально выделять наиболее страстные функции к CPU. Установка под Ubuntu:

sudo apt-get install graphviz
pip install gprof2dot

Пример использования

gprof2dot.py -f pstats output.pstats | dot -Tpng -o output.png

Django

Для профайлинга django-приложений есть несколько способов.

С помощью middleware, когда при каждом запросе страницы мониторятся вызовы всех функций внутри запрашиваемого view. Вариант который работает не только для обычного запроса, но и для AJAX. Еще есть модуль django-profiling, который срабатывает при наличии ?prof в запрашиваемом адресе.

С помощью декоратора для вызываемой функции/view. Вариант который сохранят каждое обращение под указанным именем + дата и время.

С помощью django-debug-toolbar. Сам по себе django-debug-toolbar не показывает данные с профайлингом, но тут описан способ как добавить вкладку Profiling.

С помощью django-extensions в который встроена возможность запуска тестового сервера с активированной возможностью профайлинга, результат сохраняется для каждого запроса.

Для визуального просмотра собранных данных можно воспользоваться описанными выше kcachegrind, gprof2dot.

Flask

Для профайлинга flask-приложений есть несколько способов.

С помощью встроенного в werkzeug профайлера.

С помощью flask-debugtoolbar, портированого с django-debug-toolbar.

Дополнительно чтиво по оптимизации

Дополнительно чтиво по измерению потребления памяти

Измерение производительности реализаций python

Небольшой бонус :), протестировать работу разных версий питона и окружений можно с помощью встроенного синтетического теста

# версия 2.7
python2.7 -c "from test import pystone;pystone.main()"

# версия 3.0
python3.0 -c "from test import pystone;pystone.main()"

# pypy
pypy -c "from test import pystone;pystone.main()""

Установка связки trac + git + nginx

Tue, 06 Mar 2012 17:02:18 +0200

Узелок на память про установку багтрекера trac + git-репозитория, раздача статики через nginx. Дело не хитрое, но со временем под забывается последовательность действий. В качестве хранилище будет mysql, trac будет установлен в virtualenv под Ubuntu Server.

Настройка MySQL

Создание БД и пользователя

# mysql -u root -p

CREATE DATABASE trac DEFAULT CHARACTER SET utf8 COLLATE utf8_bin;
GRANT ALL ON trac.* TO trac@localhost IDENTIFIED BY '_PASSWORD_';

Строка подключения (DSN) для MySQL

mysql://trac:_PASSWORD_@localhost/trac

Установка Trac

Установка pip и dev-файлов для MySQL

sudo apt-get install python-setuptools libmysqlclient-dev
sudo easy_install pip

Установка trac и зависимостей (предполагается что virtualenv установлен и активировано рабочие окружение)

pip install babel docutils pygments pytz mysql-python 
pip install trac

Создадим директорию для будущих trac-окружений и тестовый проект. Утилита trac-admin спросит некоторые параметры, среди которых строка подключения к БД (DSN), пример для mysql приведен выше.

sudo mkdir /home/www/tracs/
sudo -uwww trac-admin /home/www/tracs/testproj initenv

Основной этап установки окончен. Детали настройки внешнего вида описаны в wiki, также доступны разные темы.

На этом этапе можно запустить встроенный в trac веб-сервер (без возможности залогинится в админку)

sudo -uwww tracd -p 8080 /home/www/tracs/testproj

Следующий этап - это настройка авторизации пользователей, подключение git-репозитория и раздача статики с помощью nginx.

Авторизация пользователей

Добавим admin'а для управления установленной версией trac'a

sudo trac-admin /home/www/tracs/testproj permission add proft TRAC_ADMIN

Для настройки digest-аутентификации сгенерируем пароль для пользователя с помощью одного из способов описанных в UsingAuthentication, я использовал приведенный python-скрипт (у меня не установлен apache)

# cd /home/www/tracs/

python trac-digest.py -u proft -p password >> testproj/conf/users.htdigest

Запустим сервер tracd с возможностью авторизации пользователей из файла users.htdigest

tracd -p 8000 -s --auth="testproj,/home/www/tracs/testproj/conf/users.htdigest,trac" /home/www/tracs/testproj

Проверим, зайдя на http://127.0.0.1:8000/login/.

Для авторизации можно использовать аккаунты из Django.

GIT-репозиторий

У меня git-репозитория настроен с помощью gitolite.

Установка дополнения для trac

pip install http://github.com/hvr/trac-git-plugin/tarball/master

Отредактируем trac.ini, обновив секцию trac и добавив две новых: components и git.

[components]
tracext.git.* = enabled

[trac]
repository_dir = /home/git/repositories/testproj.git
repository_type = git

[git]
cached_repository = true
persistent_cache = true
shortrev_len = 6
wiki_shortrev_len = 7
git_bin = /usr/bin/git
git_fs_encoding = latin1
trac_user_rlookup = true
use_committer_id = false
use_committer_time = false

nginx как frontend

Запустим настроенное выше trac-окружение с помощью команды

tracd -d -p 3050 --protocol=http -s /home/www/tracs/testproj

Пример настроек для хоста под nginx'ом

upstream testproj_tracd {
    server  127.0.0.1:3050;
}

server {
    listen 127.0.0.1:80;
    server_name vb.local;

access_log      /var/log/nginx/testproj.access.log;
    error_log       /var/log/nginx/testproj.error_log;

location / { 
        #auth_basic "Secure Login";
        #auth_basic_user_file /home/www/tracs/testproj/conf/users.basic;

proxy_pass http://testproj_tracd;
        include /etc/nginx/proxy_params;
    }

location ~ (/.*)?/chrome/site/ {
        rewrite (/.*)?/chrome/site/(.*) /$1/htdocs/$2 break;
        root    /home/www/tracs/testproj;
    }

}

Дополнительный материал

proxychains: прокси-цепочка из socks5 в http

Wed, 29 Feb 2012 13:29:41 +0200

Недавно УкрТелеком преподнес новый сюрприз - перестал открываться сайт twitter.com. Для просмотра сайтов, которые по той или иной причине не открывается через каналы этого провайдера, я использую socks5-прокси. В большинстве приложений есть поддержка этого типа прокси, но некоторые могут похвастатся только http-проксей. В таких случаях помогают утилиты которые поддерживают оба типа проксей и могут выступать в качестве посредника. Одна из таких утилит - proxychains.

proxychains умеет направлять сетевой поток (TCP) приложения через туннель разных проксей. Заявлена поддержка таких типов прокси: http, socks4, socks5. Настройки позволяет гибко переключаться между разными прокси:

dynamic_chain - прокси берутся из списка, с пропуском не работающих;
random_chain - прокси выбираются из списка случайным образом;
strict_chain - прокси берутся из списка последовательно, если в списке есть не рабочий сервер, то вся цепочка не работает;

Установка под Ubuntu

sudo apt-get install proxychains

Установка под Arch

yaourt proxychains

Настроем proxychains, добавив в /etc/proxychains.conf список проксей

# sudo vim /etc/proxychains.conf

[ProxyList]
socks5  127.0.0.1 9999

Пример использование, сетевой поток приложения hotot пропускается через proxychains

proxychains hotot

Дополнительное чтиво

Использование HTTP proxy и SOCKS в Linux

archey: короткая сводка о linux-системе

Sun, 12 Feb 2012 14:05:15 +0200

На скриншотах в галереи ЛОРа можно часто увидеть терминалы арчеводов, на которых запущен archey с логотипом дистрибутива и краткой информацией о системе.

На github.com есть archey для других дистрибутивов (Debian/Ubuntu/Fedora/RedHat).

Установим зависимости

sudo apt-get install scrot lsb-release

Установим archey на ubuntu

wget https://github.com/downloads/djmelik/archey/archey-0.2.8.deb
sudo dpkg -i archey-0.2.8.deb

Результат

smartd: мониторинг состояния жесткого диска

Fri, 10 Feb 2012 16:35:24 +0200

S.M.A.R.T. — технология самодиагностики и предсказания возможного отказа жесткого диска.

Установка под ubuntu

sudo apt-get install smartmontools

# добавление в автозагрузку
sudo update-rc.d smartmontools defaults

Установка под CentOS

sudo yum install smartmontools

# добавление в автозагрузку
sudo chkconfig smartmontools on

Пакет smartmontools состоит из двух утилит командной строки

smartctl — просмотр текущих значений S.M.A.R.T., запуск тестов самодиагностики диска вручную;
smartd — демон для записи в системный журнал изменений в значениях S.M.A.R.T., уведомления по электронной почте об ошибках, запуска тестов самодиагностики по расписанию;

Информация о диске /dev/sda

sudo smartctl -i /dev/sda

Если S.M.A.R.T. отключен, то для включения нужно выполнить команду

sudo smartctl -s on /dev/sda

Просмотр значений S.M.A.R.T. для устройства /dev/sda

sudo smartctl -A /dev/sda

Существует 2 типа атрибутов (колонка TYPE)

критичные атрибуты (pre-fail);
некритичные атрибуты (old_age);

Критичные атрибуты:

Raw Read Error Rate - частота ошибок при чтении данных с диска;
Reallocated Sector Count - число операций переназначения секторов;
Spin Up Time - время раскрутки пакета дисков из состояния покоя до рабочей скорости;
Spin Up Retry Count - число повторных попыток раскрутки дисков до рабочей скорости, в случае если первая попытка была неудачной;
Seek Error Rate - частота ошибок при позиционировании блока головок;

Полный список атрибутов с описанием есть в вики.

Быстрый опрос диска на предмет живучести, с предсказанием отказа диска в ближайшие 24 часа

sudo smartctl -H /dev/sda

Список поддерживаемых тестов и примерное время на каждый текст

sudo smartctl -c /dev/sda

Запуск теста на проверку читаемости секторов

sudo smartctl -t short /dev/sda

Т.к. тест запускается в фоне, то статус проверки можно узнать с помощью

sudo smartctl -l selftest /dev/sda

Журнал ошибок, произошедших во время работы диска

sudo smartctl -l error /dev/sda

Журнал тестов самодиагностики

sudo smartctl -l selftest /dev/sda

Для периодического тестирования дисков настроим демон smartd, для этого нужно

под Ubuntu: активировать smartd в /etc/default/smartmontools, задать настройки в /etc/smartd.conf, перезапустить демон sudo /etc/init.d/smartmontools restart;
под CentOS: активировать smartd в /etc/smartd.conf, задать настройки в /etc/smartd.conf, перезапустить демон sudo /etc/init.d/smartd restart;

Отредактируем файл /etc/default/smartmontools, удалив # перед start_smartd. Параметр smartd_opts отвечает за дополнительные опции для smartd, --interval говорит о периодичности проведения самодиагностики.

Настройка списка дисков для проверки и периодичности проверки:

отредактируем /etc/smartd.conf, закоментировав строку с DEVICESCAN;
для каждого диска добавить строчку, вида:

# sudo vim /etc/smartd.conf

/dev/sda -a -s (S/../../(1|3|6)/01|L) -m root@example.com -M diminishing

Описание используемых опций

-a - включение большинства возможностей мониторинга: проверка "здоровья" диска, отслеживание изменений всех атрибутов, отслеживание неудачных тестов диагностики;
-s (S/../../(1|3|6)/01|L) - расписание запуска тестов диагностики диска в виде регулярного выражения. В данном случае: в 1 час ночи в понедельник, среду, субботу будет запускаться краткий тест диска;
-m root@example.com - email пользователя, который будет получать сообщения о ошибках дисков. Для функционирования должен быть настроен почтовый сервер;
-M diminishing - периодически повторять отправку письма с сообщениями об ошибке;

После внесения правок в /etc/smartd.conf перезапустим демон, под ubuntu

sudo /etc/init.d/smartmontools restart

Если возникли ошибки, то нужно смотреть лог /var/log/daemon.log.

Для проверки работы email-оповещения нужно в /etc/smartd.conf, вместо -M diminishing поставить -M test.

Для установки GUI нужно выполнить

sudo apt-get install gsmartcontrol

Дополнительное чтиво

Настройка SSD на xubuntu linux

Извлечение субтитров из mkv-файлов

Mon, 30 Jan 2012 23:56:37 +0200

Файлы с расширением mkv относятся к мультимедийному контейнеру Matroska.

Для работы с файлами такого расширения понадобится пакет mkvtoolnix

sudo apt-get install mkvtoolnix

Получение подробной информации о mkv-файле

mkvinfo video.mkv

Или только перечень вложенных объектов

mkvmerge -i video.mkv

Извлечение субтитров под номером 4 в файл subtitle.srt

mkvextract tracks video.mkv -c UTF8 4:subtitle.srt

где

-c UTF8 - кодировка для файла с субтитрами;
4:subtitle.srt - номер объекта для извлечения и имя файла для сохранения;

Получил права на вождение

Fri, 27 Jan 2012 22:48:05 +0200

Получил сегодня права на вождение автомобиля и решил сохранить в этой заметке материалы по которым готовился к экзамену.

Правила дорожного движения (для Украины)

Сайт testpdd.com.ua содержит киевские и харьковские билеты, также ведется статистика по знанию разных параграфов ПДД.

Отличная подборка видео роликов про ПДД.

Проезд перекрестков:

Сигналы регулировщика.

Правила ДД - шутливый ролик про ситуации на дороге, в каждой шутке есть доля правды ;).

Первая медицинская помощь при ДТП

Большая статья про первую медицинскую помощь при ДТП, описана анатомии и физиологии человека, наиболее характерные травмы при ДТП, способы транспортировки пострадавшего.

Наглядный рисунок с техникой реанимации.

Управление автомобилем

М. А. Геннингсон. Самоучитель езды на автомобиле.