Blog

Koniec działalności

Thu, 13 Jan 2011 07:59:26 +0100

Z powodu kiepskiej jakości łącza jaką dysponuje serwer na którym znajduje się strona, a także dlatego, że nie mam już nic ciekawego do napisania zamykam ten blog. Ponieważ jednak od czasu do czasu ktoś tu zagląda, zrobię dump całej strony do statycznych plików, tak aby treść wciąż była dostępna pod tymi samymi adresami. Nie będzie jednak możliwości komentowania i nie pojawi się już nowa treść.

Możliwe, że znajdę sobie inne miejsce gdzie okresowo dodam jakąś treść.

Debugowanie "wiszącego" skryptu

Sun, 21 Nov 2010 13:13:40 +0100

Jednym ze skryptów jaki ostatnio pisałem by crawler zbierający informacje o jednej z usług udostępnianej przez amazon. Skrypt napisałem z wykorzystaniem gevent, parsując źródło strony przy użyciu wyrażeń regularnych (moduł re ze standardowej biblioteki) oraz psycopg2 działające w asynchronicznym trybie.

Skrypt nie był duży - nie przekraczał łącznie paru tysięcy linii kodu. W miejscach w którzych działo się coś ważnego umieszczałem zapisywanie istotnych informacji do logów. Dla funkcji parsujących strony napisałem testy. Nie wiedzieć dlaczego w losowych momentach działania skrypt zawieszał się, używając 100% CPU. Dodawanie kolejnych logowań i użycie ipdb nie pomogło.

Rozwiązanie okazało się jednak bardzo proste - zarejestrowałem handler dla sygnału SIGUSR1, który uruchomia debugger. W trakcie wykonywania się skryptu czekam, aż się zawiesi i wtedy wysyłam do procesu SIGUSR1. W efekcie, mam uruchomiony debbuger dokładnie w miejscu w którym zatrzymywała się aplikacja.

Tą samą metodę, po dodaniu paru wrapperów można wykorzystać do stworzenia "bezpiecznych" wyrażeń regularnych (dodanie parametru timeout), lub pilnowania, aby funkcja nie wywoływała się zbyt długo.

Luakit

Mon, 04 Oct 2010 21:28:22 +0100

Jedną z najważniejszych aplikacji na każdym komuterze jest obecnie przeglądarka. Coraz więcej dostępnych usług, coraz większe możliwości. Prawie same zalety. Do tej pory używałem Firefoxa z vimperatorem, co wystarczało mi do momentu kiedy odkryłem coś lepszego (i nie było to chromium).

Luakit to przeglądarka napisana z wykorzystaniem webkit i gtk+, skryptowana w Lua, zbudowana w znacznej mierze na kodzie surf i awesome. Projekt jest jeszcze stosunkowo młody, ale bardzo szybko pojawiają się nowe funkcjonalności i poprawiane są błędy.

Co takiego wyjątkowego posiada Luakit, czego nie mogłem osiągnąć w vimperatorze? Przede wszystkim szybkość. Luakit uruchamia się w mniej niż 1 sekundę. W przypadku firefoxa jest to czasami nawet ponad 10 sekund (słownie: dziesięć!). Nie muszę czekać aż będę mógł przeczytać artukuł, bo przeglądarka nie chce się uruchomoć. Spadło też zużycie pamięci i okazjonalne zwiechy.

Parę funkcjonalności o których warto wiedzieć gdy zaczynie się używać luakit:

quickmarks pozwalają zdefiniować skróty dla najpopularniejszych adresów
formfiller (skróty za, zn, ze, zl) umożliwia automatyczne wypełnianie formularzy. Bardzo przydatne jeśli uruchamia się naprzemian różne kompilacje, bo ciasteczka nie lubią takich zmian
na merge czeka mój branch w kŧórym dodałem wsparcie dla dbus, dzięki czemu będzie można komunikować się z procesami Luakit

Dodatkowo działa większość skrótów znanych z vimperatora, a jeśli czegoś brakuje, to bardzo łatwo można to dopisać w konfiguracji.

Na liście brakujących funkcjonalności wciąż znajduje się jednak parę ważnych pozycji:

adblock - można używać proxy (na przykład privoxy), ale to nie zawsze działa tak jak trzeba
noscript
pobieranie plików - uruchamianie wgeta w tle to chyba jakis bug
firebug - webkit posiada jakiś debugger, ale nie można go porównywać z firebugiem

Vim: making those arrow keys work with you

Tue, 14 Sep 2010 18:50:03 +0100

Po przeczytaniu Vim: Making those Arrow Keys Work With You, dodałem do swojej konfiguracji Vima blokadę strzałek:

inoremap  <Up>     <NOP>
inoremap  <Down>   <NOP>
inoremap  <Left>   <NOP>
inoremap  <Right>  <NOP>
noremap   <Up>     <NOP>
noremap   <Down>   <NOP>
noremap   <Left>   <NOP>
noremap   <Right>  <NOP>

Minął pierwszy dzień pracy na nowych ustawieniach. Pisze się trochę wolniej, ale dokładnie tak jak napisał autor artykułu - nie ma odruchu wciskania strzałek, przez co używam o wiele więcej skrótów niż tylko h, j, k, l i dokładniej "celuję" w miejsca do których chcę przenieść kursor.

Database high scalability

Mon, 06 Sep 2010 07:57:57 +0100

Jakiś czas temu, ja również przeżywałem chwilowy zachwyt nad bazami noSQL.

Znalezione na highscalability.com