Кодовая польза

linux: свободное место на диске (df - disk free)

noreply@blogger.com (keip) — Thu, 01 Dec 2011 17:51:00 +0000

df -h

С помощью этой команды вы можете получить отчет об использовании дисков: сколько места на осталось на диске, сколько места занято — и все в приятном читабельном виде (ключ -h, то есть human readable — именно для этого)

Пример:

$ df -h
Файловая система      Разм  Исп  Дост  Исп% смонтирована на
/dev/sda2              20G  4,6G   14G  25% /
tmpfs                 5,0M     0  5,0M   0% /lib/init/rw
udev                  989M     0  989M   0% /dev
tmpfs                 398M  856K  397M   1% /var/run/shm
tmpfs                 199M  932K  198M   1% /var/run
/dev/sda3              25G  3,6G   20G  16% /home
/dev/sdb1             466G  166G  300G  36% /media/WD

ssh: принудительный вход по паролю

noreply@blogger.com (keip) — Tue, 20 Sep 2011 11:17:00 +0000

ssh -o PubkeyAuthentication=no user@machine

Такая команда может оказаться полезной, если у вас возникают проблемы при авторизации по ключу.

[Ссылка] JetBrains PyCharm 2.0 EAP

noreply@blogger.com (keip) — Tue, 20 Sep 2011 05:09:00 +0000

Вышел early access preview второй версии PyCharm:
http://confluence.jetbrains.net/display/PYH/JetBrains+PyCharm+Preview

ssh вход без пароля

noreply@blogger.com (keip) — Fri, 16 Sep 2011 10:00:00 +0000

Чтобы заходить по ssh на какой-то сервер (SOME_HOST), мы должны сделать примерно следующее:

cat ~/.ssh/id_rsa.pub | ssh login@SOME_HOST 'cat >> .ssh/authorized_keys'

То есть дописать наш публичный ключик в .ssh/authorized_keys на сервере. Разумеется, необходимо позаботиться, чтобы эти файлы и каталоги существовали. Чуть подробнее об этом: http://linuxproblem.org/art_9.html.

Подсветка синтаксиса

noreply@blogger.com (keip) — Sat, 20 Aug 2011 09:00:00 +0000

Подсветка синтаксиса – это то, без чего нам теперь уже не обойтись и мы, конечно, благодарны средам разработки, которые одарили нас этим чудом. Но как экспортировать эти чудеса в html для интернетов? Есть несколько способов:

Воспользоваться самой IDE. Так вы получите подсветку в стиле, привычном для вас и, возможно, ваших коллег (или соучастников сообщества, в которое вы обратились), Например, JetBrains Pycharm (а также NetBeans) предлагает удобную подсветку синтаксиса с возможностью выбрать кусок текста, который надо подсветить.

Минус: стили подсветки не инлайнятся и в код вашего сообщения, если вы куда-то этот код отправляете, необходимо вставлять также и блок со стилем. Это не всегда удобно (например, мне сейчас пришлось так сделать).
```
def setUp(self): 
        self.group = TestGroup() 
        self.moderation_rules = ModerationRule.get_many(data_getter=lambda x: moderation_rules)
```
Использовать редактор VIM.
Не все знают, что в vim есть поддержка экспорта в HTML. Для этого существует команда :TOhtml, которая генерирует html-код в стиле vim и выводит его в отдельном "окне", что позволяет его сохранить (:w).
- Имеется почти на каждом компьютере с unix-подобной ОС.
- VIM такой VIM. Все-таки vim - это круто. Когда вы его используете, вы как бы соприкасаетесь с историей (жаль, это нужно далеко не всегда).
- Вам в 80% случаях придется не по вкусу то, что он нагенерировал (или вы собираетесь вставить код на какой-нибудь черный фон?).
- Непонятно, как изменить цветовую схему того, что он выдает.

Использовать сервис в интернете для подсветки синтаксиса. Например, tohtml.com (а вообще их более 9000). Это, наверное, самый оптимальный вариант, так как код, изготовляемый сервисом, уже готов для вставки в различные формы на форумах, блогах итд.
- Код здесь получается довольно приятным по цвету и все стили - инлайнятся, поэтому не нужно вставлять никаких дополнительных блоков
- Поддерживается множество языков программирования, а также множество вариантов расцветки.
- Не нужно иметь IDE под рукой - сервис работает достаточно быстро и, разумеется, везде, где есть интернет.
- Возможно, вам покажется непривычной расцветка кода, которую вам предложит сервис
* более удобные реализации данной фичи есть, например, в редакторе kate (но это потребует кучу библиотек для KDE).

Vim: как заменить табы на пробелы

noreply@blogger.com (keip) — Fri, 19 Aug 2011 08:57:00 +0000

Достаточно простой способ замены табов на пробелы предлагает vim. Для этого нужно:

Воспользоваться опцией expandtab, которая позволяет при нажатии на клавишу TAB вставлять в текст пробелы. Делается это так:
```
:set expandtab
```
Набрать команду retab
```
:retab
```

Взято отсюда.

Jetbrains Pycharm: полуавтоматическое обновление

noreply@blogger.com (keip) — Wed, 06 Jul 2011 06:09:00 +0000

В Pycharm есть очень много полезных фич, но лично мне не хватает автоматического обновления. К счастью, это очень просто лечится примерно таким bash-скриптом.

#!/bin/sh

if [ $1 ]
then
    VER=$1
else
    echo "Which version of pycharm ide do you want do download?"
    read VER
fi

NAME=PyCharm-$VER.tar.gz
EXTRACTED=pycharm-$VER

cd ~/bin
wget -c http://download.jetbrains.com/python/$NAME
tar xzf $NAME
unlink pycharm
ln -s $EXTRACTED pycharm

Использование:
sh ./download_pycharm.sh 1.5.2
либо
sh ./download_pycharm.sh

Как видим, скрипт получает от нас номер нужной версии Pycharm, либо сам спрашивает. скачать. Затем, он выкачивает архив, распаковывает и складывает в подкаталог bin нашего домашнего каталога + играет с символическими ссылками, чтобы в ~/bin/pycharm можно было всегда найти свежую версию IDE.

Разумеется, скрипт работает только пока ребята в JetBrains не поменяли структуру каталогов, из которых происходит скачивание.

Глобальный 301 редирект на/с "www." версию домена в nginx

noreply@blogger.com (Вадим Лопатюк) — Mon, 16 May 2011 11:02:00 +0000

Для чего если можно просто указать все версии домена в server_name? Чтоб не слетали куки. А то авторизованный на example.com человек оказывается не авторизован на www.example.com куда его привела скажем ссылка из уведомления о новом ответе на форуме. Это очень раздражает.

Подчтеннейшая публика! Предлагаю Вам вариант универсального редиректа на все виртуальные серваки управляемые целевым nginx'ом.

В общем для мазохистов-любителей длинных имён и прочих эмо есть вариант редиректа с без "www" на "www":

server {
  server_name ~^(?!www\.);
  rewrite ^ http://www.$host$request_uri permanent;
}

да, почему-то принято упоминать, что автор решения Игорь Сысоев.

Для прочих же, кто не стремится нажимать лишние клавиши преобразование из "www" в без "www"

server {
  server_name ~^(?=www\.);
  if ( $host ~* "www.(.*)"){
    set $unwww $1;
  }
  rewrite ^ $scheme://$unwww$request_uri permanent;
}

Автор решения Ваш покорный слуга :)

ВНИМАНИЕ! Всё это дело вставляется в начало блока http файла nginx.conf и не забываем убирать в конфах виртуальных серваков из server_name вариант с/без "www" (убираем то, с чего редиректим), а то не сработает!

Индивидуальные ssh ключи для разных git проектов

noreply@blogger.com (Вадим Лопатюк) — Wed, 22 Dec 2010 06:54:00 +0000

Ситуация - 2 проекта в разных git репозиториях. Скажем один с работы один личный. Допустим тебе срочно нужно подправить что-то в личном проекте, ты находишься на работе а нужно загрузить обновлённые файли в репозиторий. Я пользуюсь сервисом codaset.com который, как известно, "как github только лучше" (в частности предлагает бесплатно 1 приватный проект для разработки с не ограниченным количеством участников и больше места). Соответственно по работе там один акк, а личный - другой и у них разные ssh ключи для доступа (что тоже логично, как мне кажется), рабочий и личный. Личный у меня на флешке на шифрованном виртуальном диске.

Проблема в том, что пытаясь залепить push в репу из личного проекта система подхватывает рабочий публичный ключ (т.к. она уже работала с этим сервером) и соответсвенно не пускает меня с левым ключём в частный репозиторий.

Выходы есть такие:

Можно добавить рабочий ключ в список допущенных в личном репозитории, но! Страдает приватность, т.к. на работе мало ли кто имеет доступ к ПК и вообще.
Можно убирать рабочий ключ и заливать в папку ~/.ssh/ свой и потом менять - ну это понятно не наш метод. Да и забыть можно ключь свой на работе, что тоже не кошерно.

Наш метод:

В файл ~/.ssh/config добавляем описания хостов

Host GitQnub
  Hostname=codaset.com
  IdentityFile=/media/truecrypt1/qnub

Host GitWork
  Hostname=codaset.com
  IdentityFile=~/.ssh/work/work

Как видно рабочие ключи нужно также перенести из папки ~/.ssh т.к. она по умолчанию просматривается системой на предмет наличия ключей.

Соответственно IdentityFile это путь к ключу для данного репозитория (свой и рабочий). Остаётся только заменить домен Hostname в параметре url файла .git/config вашего проекта на значение Host.

Пример:

Было:

[remote "origin"]
 url = git@codaset.com:work/work-project.git

Стало:

[remote "origin"]
 url = git@GitWork:work/work-project.git

После этого команды git fetch, git push и git pull будут использовать назначенные ключи для назначенных репозиториев. Аналогичная штука работает и с github.

Рандомный цвет в js

noreply@blogger.com (keip) — Wed, 10 Nov 2010 07:18:00 +0000

rand_color = function() { return '#' + (Math.round(Math.random() * Math.pow(2, 24))).toString(16); }

Звездочки Crontab

noreply@blogger.com (keip) — Tue, 19 Oct 2010 05:02:00 +0000

ссылка: mongodb основы map/reduce

noreply@blogger.com (keip) — Wed, 13 Oct 2010 04:35:00 +0000

Map-Reduce Basics: очень неплохая статья об агрегировании данных в MongoDB с помощью map/reduce.

Python: парсим дату

noreply@blogger.com (keip) — Mon, 27 Sep 2010 04:58:00 +0000

Иногда достаточно напряжной задачей бывает парсинг даты или времени. Это часто происходит совсем не в силу сложности задачи, а просто от отсутствия понимания, что здесь никакого велосипеда изобретать не нужно, а просто надо правильно использовать ресурсы стандартной библиотеки питона (), которые предлагают элегантные способы решения данной задачи.
Вашему вниманию предлагается ненапряжный (оттяжный) способ парсинга даты в питоне

datetime.strptime(sys.argv[1], '%H:%M')

С помощью которого можно сделать, например, простой-простой будильник (простой-простой, потому что будет работать в рамках одной даты, например, с 3 ночи до 7 утра, что бывает достаточно для программиста, админа или еще какого-нибудь гика).

#-*- coding: UTF-8 -*-
import time
import os
import sys
from datetime import datetime

def play():
    command = "totem ~/bin/alarm.pls >/dev/null 2>/dev/null"
    os.popen(command)

def main():
    try:
        while datetime.now().time() < datetime.strptime(sys.argv[1], '%H:%M').time():
            time.sleep(1)
    except:
        print "Invalid hour:minute value!"
    finally:
        play()
        return

if __name__ == "__main__":
    main()

День программиста-2010

noreply@blogger.com (keip) — Mon, 13 Sep 2010 02:00:00 +0000

Поздравляем программистов всех стран с их профессиональным праздником - днем программиста! Вот вам указ об официальном празднике: "О дне программиста".
Пусть даже разбег дат у нас небольшой - 13 сентября в простой год, о 365 днях, и 12 сентября - в високосный, о 366), мы все равно запасли для вас разные способы узнать, когда же он будет, на таких языках программирования как Python и JavaScript (хотели бы сами получить варианты на хаскелле и каком-нибудь брейнфаке):

python:

from datetime import date, timedelta

def prog_date():
    today = date.today()
    return today.replace(month=1, day=1) + timedelta(256)

if __name__ == '__main__':
    print prog_date()

javascript:

function prog_date() {
    today = new Date();
    today.setMonth(0, 1);
    today.setDate(256);
    return today;
}

* А эту функцию так мы вообще выполним:

Python и mongodb: забрать значения из курсора

noreply@blogger.com (keip) — Thu, 19 Aug 2010 06:10:00 +0000

Очень полезной особенностью API Python для MongoDB (pymongo) является то, что мы всегда можем достать значения из ленивого курсора: для этого просто нужно использовать преобразование в list.

from pymongo import Connection

c = Connection()
db = c['database']
print db.users.find()
# выведет курсор MongoDB: 
print list(db.users.find())
# выведет список объектов из базы: [{u'username': u'user', u'visitor': False ... }, ...]

Python: произвольная строка

noreply@blogger.com (keip) — Thu, 19 Aug 2010 06:00:00 +0000

Часто возникает необходимость сгенерировать строку из случайных символов (например, для того, чтобы задать пароль). Язык Python позволяет сделать это быстро и элегантно:

import string
import random

def randstring(n):
    a = string.ascii_letters + string.digits
    return ''.join([random.choice(a) for i in range(n)])

print randstring(10)

Здесь мы создали и вывели на печать строку из 10 рандомных символов.

(Ссылка) Python: конфликты метаклассов

noreply@blogger.com (keip) — Mon, 09 Aug 2010 06:00:00 +0000

Весьма неплохая статья о разрешении конфликтов метаклассов в Python.

http://code.activestate.com/recipes/204197-solving-the-metaclass-conflict/

JavaScript, jQuery: обертки

noreply@blogger.com (keip) — Mon, 09 Aug 2010 03:00:00 +0000

Когда-то можно было пользоваться такой функцией без всякого сомнения:

function $(id) { 
    return getElementById(id); 
}

Теперь же, когда многие используют библиотеку jQuery, объявление подобной функции может привести к неработоспособности другого кода, так как $ является синонимом для jQuery.

В таком случае можно либо явно указывать jQuery вместо знака доллара, либо прибегнуть к более изящному решению - оберткам:

Было:

function f(arg1, arg2) {

$('#some_selector')// ...

}

Стало:

function f(arg1,arg2) {

(function($) {
        $('#some_selector')// ... code
    })(jQuery)

}

Здесь мы создаем анонимную функцию и сразу же ее вызываем. Она представляет собой старую функцию с несколько измененной сигнатурой: в качестве параметра она получит jQuery, а "старые" аргументы будут доступны ей благодаря замыканиям.

Python: коварство рефакторинга (об удалении *.pyc файлов)

noreply@blogger.com (keip) — Sat, 07 Aug 2010 07:00:00 +0000

Python компилирует свои скрипты при первом запуске программы (точнее - при первом импорте из срипта, питон пытается сделать последующие обращения к скрипту чуть быстрее путем компиляции его в файл с расширением .pyc), потом он сначала ищет откомпилированный скрипт и только если его не находит - обращается к исходнику (.py).

Коварство рефакторинга (в частности, в среде разработки PyCharm от JetBrains) заключается в том, что если вы переименовываете один из модулей (например, old_module -> new_module), то вам необходимо вручную прописать импорты в других модулях. Иначе может получиться довольно забавная ситуация: вы в новом модуле добавляете какой-то функционал, а программа при запуске импортирует .pyc файлы старого модуля, ни сколько не ругается и, разумеется, выполняет старый код.

Удалять старые компилированные файлы можно, например, такой командой:

find -type f -name '*.pyc' -exec rm {} \;

Bash: подсчет количества строк

noreply@blogger.com (keip) — Mon, 19 Jul 2010 03:00:00 +0000

find -type f -name '*.py' -exec cat {} \; | wc -l

Так с помощью командной строки мы можем узнать количество строк кода в нашем проекте.

Единственное значение из mysql на php в 2 строки

noreply@blogger.com (Вадим Лопатюк) — Thu, 15 Jul 2010 03:00:00 +0000

Бывает нужно получить единственное значение из MySQL и огород из запроса и получения строки из результата, а потом использования значения полученного массива кажется явно лишним.

Т.е. стандартное (академическое) решение выглядит так:


$sql = mysqli_query("SELECT COUNT(*) FROM `table` WHERE `col`='value';"); // получаем данные
$row = mysqli_fetch_assoc($sql); // получаем строку в массив
echo $row['COUNT(*)']; // используем значение массива
// неудобная переменная, нужно одно значение, а используем массив

// можно присвоить значение новой переменной
$count = $row['COUNT(*)'];

// либо переопределить массив в переменную
$row = $row['COUNT(*)'];

// но это либо дополнительная переменная,
// либо не логичное название переменной,
// либо с самого начала нужно было использовать правильное название...

В принципе предлагаемый вариант немного удобнее для последующего использования:

$sql = mysqli_query("SELECT COUNT(*) FROM `table` WHERE `col`='value';"); // получаем данные list($count) = mysqli_fetch_array($sql); // получаем строку в массив и // первое значение сразу присваиваем переменной echo $count; // используем переменную

ООП вариант сообразите по аналогии...

Bash: оставим только новые файлы (как удалять устаревшие архивы)

noreply@blogger.com (keip) — Wed, 14 Jul 2010 06:00:00 +0000

В комментариях к одному из предыдущих постов поступило предложение сделать скрипт, который позволил бы время от времени чистить папку с архивами, чтобы в ней оставалось лишь определенное количество файлов (разумеется, самых свежих).
Хинт: Для этих целей можно использовать редактор awk, запустив следующую команду из директории с архивами:

ls -t | awk 'NR>=10 {print;}' /dev/stdin | xargs -i rm {}

ls -t выводит список файлов, сортируя его по времени создания
команда awk NR>=10 {print;} выводит из файла строки, номера которых больше 10. /dev/stdin в качестве имени файла позволяет использовать стандартный поток ввода (что делает ls -t через пайп).
xargs -i rm {} удаляет файлы, имена которых приходят через пайп от awk.
Таким образом, мы оставляем в директории только 10 самых новых файлов.

Bash: быстрый бэкап

noreply@blogger.com (keip) — Mon, 12 Jul 2010 06:43:00 +0000

Если вам нужно периодически делать бэкапы тех или иных директорий, вы можете воспользоваться date для формирования имени:

tar -czf ~/archived_folder_`date +'%Y%m%d_%H%M'`.tar.gz ./working_folder/

Данная команда создает в домашней папке архив arсhived_folder (с добавлением года, месяца, дня и времени: archived_folder_20100712_1242.tar.gz) из папки working_folder (в текущей директории).

Возвращаемые значения 1С SOAP в PHP

noreply@blogger.com (Вадим Лопатюк) — Sun, 11 Jul 2010 14:10:00 +0000

В SOAP как и в других нормальных программерских технологиях есть значения передаваемые и возвращаемые. Так вот, если Ваш 1С кодер есть Вам мозг и утверждает, что нужно передавать в SOAP переменную (или ссылку на неё) в которой будет возвращаться значение - не верьте ему. На самом деле возвращаемое значение/я идёт/ут дополнительными массивами/объектами в возвращаемом результате вызова SOAP метода.

Недавний пример. 1Сник заявляет, что нужно вызывать метод

CheckBalances(OrderData, TradeBalances)

при этом TradeBalances это пустая переменная в которой будет возвращаться результат (вообще в PHP реализации SOAP не понятно как передать ссылку на переменную в именованном массиве, да и вообще странно это...). На самом деле оказалось надо так:

CheckBalances(OrderData)

а TradeBalances возвращается следующим элементом массива в возвращаемом результирующем объекте SOAP. Типа:

$SOAPresult = $SOAPclient->CheckBalances(OrderData);

и результат

stdClass Object
(
    [return] => stdClass Object
        (
            [success] => 
            [message] => 
        )

    [TradeBalances] => stdClass Object
        (
             ...
        )
)

JavaScript: быстрый просмотр кода функции/метода

noreply@blogger.com (keip) — Sat, 10 Jul 2010 06:14:00 +0000

Часто веб-разработчику приходится искать ту или иную JavaScript-функцию на сайте (например, чтобы понять, как работает доставшийся ему в наследство код и исправить). Учитывая, что функции пишутся в разных файлах и вставляются в страницу с помощью этот процесс может оказаться весьма хлопотным.
хинт:
Вариант 1: любой браузер умеет скачивать "веб-страницу полностью". Можно воспользоваться этой фичей и потом произвести поиск нужной функции в соответствующей папке, в которой содержатся файлы, относящиеся к скачанной веб-странице.
плюсы:

поддерживается любым браузером
как только вы найдете функцию, вы можете сразу приступить к ее правке

минусы:

браузер может не скачать то, что лежит за пределами сайта (и правильно сделает: зачем ему скачивать, например, код яндексовой баннерки)
это все равно не так быстро, как следующий способ:)

Вариант 2: в браузерах Google Chrome и Firefox (+firebug) есть возможность работать с консолью JavaScript. Надо зайти в эту консоль и набрать имя (но не просто вызвать ее: то есть набирать func_name вместо func_name()) нужной функции.

пример использования консоли Google Chrome для быстрого просмотра исходного кода функции showOrHideDateFields

плюсы:

это достаточно быстро
вы можете таким образом просмотреть (и вызвать) любую функцию, которая загружена в память, а не только те, которые выкачаются.

минусы:

браузер должен поддерживать консоль JavaScript (Google Chrome точно пожжерживает)
все равно непонятно, где лежит код этой функции:)