CNR BSRN

golang ikilileri niye bu kadar büyük? nasıl küçültürüm?

noreply@blogger.com (Caner BAŞARAN) — Fri, 27 Feb 2015 16:59:00 +0000

Go(golang) ile "Merhaba Dünya" dedin ve derlediğinde( go build hello.go ) gözlerini inanamadın. 1.8Mb içinde acaba ne var dedin.

Hata ayıklama bilgileri olmadan derle go build -ldflags "-s" hello.go yarı yarıya düştü bak 0.9Mb.

Hala düşünüyorsun ne var bunun içinde? fmt paketi birçok özelliği olan büyük bir paket. Sadece ekrana yazı basacağım diyorsan, fmt yi kaldır. fmt.Println yerine yerleşik fonksiyonlardan, println kullan. 0.25Mb oldu bak.

Sıkıştır

7z -> 0.075Mb
UPX ve goupx -> 0.1Mb

UPX, ikili çalıştıralabilir dosyalarını sıkıştırıyor. Kurulumu sudo apt-get install upx-ucl

goupx, golang fixi GOPATH=${PWD}/env go get github.com/pwaller/goupx/

go build -ldflags "-s" hello.go
cd env/bin/
./goupx hello

Doğa için ufak kendimde yaptığım değişiklikler - 2

noreply@blogger.com (Caner BAŞARAN) — Wed, 01 Oct 2014 22:51:00 +0000

taşındı tıkla

Bazı bazı regexler

noreply@blogger.com (Caner BAŞARAN) — Fri, 25 Jul 2014 15:41:00 +0000

^([0-7][0-9]|8[0-1])[A-Z]{1,3}\d{2,5}$ (Türkiye Taşıt Plaka tanıma)

Ağız Kopuzuna Hızlı Başlangıç

noreply@blogger.com (Caner BAŞARAN) — Sat, 21 Jun 2014 19:51:00 +0000

taşındı tıkla

Tükenmeden Tüketmek, Köle Olmadan Üretmek

noreply@blogger.com (Caner BAŞARAN) — Tue, 29 Apr 2014 16:52:00 +0000

taşındı tıkla

T. İş Bankası Sms Gönderimi İptali

noreply@blogger.com (Caner BAŞARAN) — Tue, 18 Feb 2014 17:56:00 +0000

https://www.isbank.com.tr/internet/yardim/yardimyenisite/Yardim.aspx girilir. Aşağıda "Bir sorunum/itirazım var" işaretlenir. İletişim bilgileriniz girilir ve

"İletmek istediğiniz mesajınız:" kısmına "Bankanıza ait fırsat, tanıtım vb. gibi konularda kesinlikle SMS almak istemiyorum." yazılır. Ortalama 2 gün içinde aşağıdaki gibi geri döneceklerdir.

"T. İş Bankası kampanya duyurularının sms olarak gönderimi talebiniz üzerine engellendi.

Bugüne dek bildirimlerimize vakit ayırdığınız için teşekkür ederiz.

Saygılarımızla,

TÜRKİYE İŞ BANKASI A.Ş.
Müşteri İlişkileri Birimi "

Taş Plak Kumpanyası

noreply@blogger.com (Caner BAŞARAN) — Thu, 17 Oct 2013 12:32:00 +0000

taşındı tıkla

Olgun Kokulu Kitaplar 7. Sahaf Festivalinde

noreply@blogger.com (Caner BAŞARAN) — Wed, 09 Oct 2013 21:20:00 +0000

30 Eylül - 19 Ekim 2013 11:00 - 22:00 Tepebaşı (TRT yanı, Pera Müzesi dibi :)

Çayınızı, çorbanızı için, kitap severler ile sohbet edin. Sahaflar ile tanışın. Hiçbir yerde bulamadığınız kitaplara ulaşın.

Fotoğraf Kurs Belgesi

noreply@blogger.com (Caner BAŞARAN) — Mon, 29 Jul 2013 22:34:00 +0000

Bir derneğin kursu için hazırladığım bir belge (sertifika).
Belki birisinin işine yarar. Film karesi burdan kullanıldı. Inkscape (özgür vektörel çizim yazılımı) ile rahatlıkla istediğiniz değişikleri yapabilirsiniz. Telif: Kamu Malı
İndir (sağ tıkla farklı kaydet)

Doğa için ufak kendimde yaptığım değişiklikler - 1

noreply@blogger.com (Caner BAŞARAN) — Wed, 24 Jul 2013 22:30:00 +0000

taşındı tıkla

Tor üzerinde istemediğiniz ülkelerin çıkış düğümlerini yasaklama

noreply@blogger.com (Caner BAŞARAN) — Sat, 06 Jul 2013 13:23:00 +0000

Prism programı başlaması ile ABD, TOR çıkış düğümlerinin (exit-node) ağ trafiğini kaydettiği söylentisi ortaya çıktı.
Tor Browser Bundle klasörünün içinde Data -> Tor -> torrc dosyasının sonuna şu iki satırı ekleyin ve değişiklikleri kaydedin. Ayarların geçerli olması için kapatıp açın.

ExcludeNodes {us}, {au}, {de}, {ca}, {at}, {il}, {nz}, {cn}, {hk}, {in}, {it}, {fr}, {tr}, {gb}
Böylece ABD, vb. ülkelerin düğümlerine bağlantı yapılmaz.

Fyre, kaotik fonksiyonlarla sanat üretimi

noreply@blogger.com (Caner BAŞARAN) — Sat, 12 Jan 2013 22:34:00 +0000

https://canerbasaran.github.io/grafik.html

Yazılımcı kafasıyla birşey seçmek

noreply@blogger.com (Caner BAŞARAN) — Sun, 09 Dec 2012 17:26:00 +0000

Seçmek artık zor geliyor. Rasgele seçmek için algoritma yardıma koşuyor :) iyi ki varsın.

Örneğin yemek yiyeceğim, mönü önüme koyulunca yine sıkılıyorum. Eğer dışarda isem; caddeden geçen otomobillerin plakaları, dükkan tabelaları v.b. , içerde ve tek başıma değilsem; rasgele bir sayı söylemelerini (random.randint) istiyorum. Mönüdeki yemek sayısı ile modluyorum (%)

Bottle minicik python web anaçatısı

noreply@blogger.com (Caner BAŞARAN) — Fri, 09 Dec 2011 16:32:00 +0000

Bottle hafif, basit, hızlı ve küçücük bir python web anaçatısı. Python(standart kütüphane) dışında bir bağımlılığı yok. Sadece bir dosyadan oluşmakta (yaklaşık 100kb)

Merak edenler sitesine girer bakar :) sadece ağız sulandırma görevimizi yapalım.

from bottle import route, run

@route('/')

@route('/:isim')

def index(isim='osman'):

    return 'Merhaba %s!' % isim

run(host='localhost', port=8080)

çıktı:

http://localhost:8080/ girildiğinde

Merhaba osman! göreceksiniz

http://localhost:8080/Caner girildiğinde

Merhaba Caner!

Ayrıca:
Ağ bağlantısından paylaşılan bir tane dosyayı kopyalamak, bazen sizi çileden çıkarmış olabilir. Tabi ufak bi ftp ya da başka bir çözümde olabilir.

Neyse sadede gelelim. Forkladığım basit bir web uygulaması var. dirShare
python /verbabaistediğindizini işlem tamam. http://ArkadaşınIPsi:8080 ulaş dosyalara :)

Consistent hashing

noreply@blogger.com (Caner BAŞARAN) — Thu, 20 Oct 2011 23:03:00 +0000

Consistent hashing, özel bir hashing türüdür. Bu yöntem, slot ekleme veya çıkarma durumunda, diğer slotların key mapping lerini önemli ölçüde değişmemesini sağlar. Buna rağmen geleneksel hash table, dizi içerisindeki bir tek değerin değişmesi ile tüm key lerin remapping yapılması gerekir.

Consistent hashing, ortalama olarak K/n kadar remapping gerekir. (K->Key sayısı, n->Slot sayısı) İnternet kullanımının artması ile gün geçtikçe önem derecesi artmaktadır.

David Karger tarafından MIT de kullanmak için tasarlandı.[1]

Resimdeki çember üzerindeki mavi noktalar(1,2,3,4) nesneler, kırmızı noktalar önbelleklerdir.

Çember üzerinde, saat yönünde dönerek hangi nesnenin hangi önbelleğe denk geldiğini bulabiliriz.
1. ve 4. nesneler A önbelleği, 2. nesne B önbelleği, 3. nesne C önbelleğindedir.
Eğer C önbelleği kaldırılırsa, 3. nesne A önbelleğinde yer alır ve diğer tüm nesnelerin mapping i değişmez.

Eğer D önbelleği eklenirse, 3. ve 4. nesneler D önbelleğinde, 1. nesne A önbelleğinde.

Consistent hashing basit bir python implementasyonu

import md5

class HashRing(object):

    def __init__(self, nodes=None, replicas=3):
        self.replicas = replicas

        self.ring = dict()
        self._sorted_keys = []

        if nodes:
            for node in nodes:
                self.add_node(node)

    def add_node(self, node):
        for i in xrange(0, self.replicas):
            key = self.gen_key('%s:%s' % (node, i))
            self.ring[key] = node
            self._sorted_keys.append(key)

        self._sorted_keys.sort()

    def remove_node(self, node):
        for i in xrange(0, self.replicas):
            key = self.gen_key('%s:%s' % (node, i))
            del self.ring[key]
            self._sorted_keys.remove(key)

    def get_node(self, string_key):
        return self.get_node_pos(string_key)[0]

    def get_node_pos(self, string_key):
        if not self.ring:
            return None, None

        key = self.gen_key(string_key)

        nodes = self._sorted_keys
        for i in xrange(0, len(nodes)):
            node = nodes[i]
            if key <= node:
                return self.ring[node], i

        return self.ring[nodes[0]], 0

    def get_nodes(self, string_key):
        if not self.ring:
            yield None, None

        node, pos = self.get_node_pos(string_key)
        for key in self._sorted_keys[pos:]:
            yield self.ring[key]

        while True:
            for key in self._sorted_keys:
                yield self.ring[key]

    def gen_key(self, key):
        m = md5.new()
        m.update(key)
        return long(m.hexdigest(), 16)

Kullanımı

import HashRing

memcache_servers = ['192.168.0.246:11212',
                    '192.168.0.247:11212',
                    '192.168.0.249:11212']
ring = HashRing(memcache_servers)
server = ring.get_node('my_key')

[1]http://www.akamai.com/dl/technical_publications/ConsistenHashingandRandomTreesDistributedCachingprotocolsforrelievingHotSpotsontheworldwideweb.pdf
http://en.wikipedia.org/wiki/Consistent_hashing
http://www.lexemetech.com/2007/11/consistent-hashing.html
http://amix.dk/blog/post/19367

UTF-8

noreply@blogger.com (Caner BAŞARAN) — Thu, 20 Oct 2011 13:51:00 +0000

Nedir?
UTF-8 8-bitlik bir Unicode* dönüşüm biçimidir. 0-127 arası ASCII* harici karakterler, 1-6 byte uzunluğunda diziler olarak kodlanır. Bu da ek olarak veri sığa kullanımı demektir.

UTF-8, unicode karakter setlerinin en geçerli olanı. Dünyadaki bütün alfabelerin bütün karakterlerine bu sette yer alır. Karakter seti karışıklığına yol açmadan, hepsini bir arada kullanmayı mümkün kılar.

Joseph Becker’in 29 Ağustos 1988 tarihinde yazdığı Unicode 88 başlıklı makale, unicode hakkındaki ilk taslak metin olması bakımından önem taşır. Becker bu makalede neden unicode gibi bir sisteme ihtiyaç duyulduğunu, ascii’nin İngilizce dışındaki dillere ait karakterleri göstermekteki yetersizliğini ve herkesin ihtiyacına cevap verebilecek bir sistemin nasıl ortaya çıkarılabileceğini anlatır. Bu makaleye http://unicode.org/history/unicode88.pdf adresinden ulaşabilirsiniz.

Unicode 2.0’dan itibaren 16-bit sınırlaması kaldırılmıştır.

>>> a = unicode("Kâğıt", "utf-8") # yada a = u"Kâğıt"
>>> b = "Kâğıt"
>>>
>>> a
u'K\xe2\u011f\u0131t'
>>> len(a)
5
>>> type(a)
type 'unicode'
>>> b
'K\xc3\xa2\xc4\x9f\xc4\xb1t'

>>> len(b)
8
>>> type(b)
type 'str'

Yorum
Yüzyıllardır süren asimilasyon dünyadaki birçok dili yok etmiştir. Bu şekilde devam ederse, gelecekte ASCII bize yetebilecektir :( Çok dilli, çok renkli dünyalar dileği ile...

*unicode” ise Türkçe’ye özgü harflerle birlikte dünya üzerindeki pek çok dile ait harfleri de tanıyabilen karakter kodlama biçimlerini içeren, gelişmiş bir sistemdir.
*“ascii”, Türkçe’ye özgü “ş”, “ç”, “ö”, “ğ”, “ü” ve “ı” gibi harfleri tanımayan bir karakter kodlama biçimidir. 7-bitlik bir karakter kümesidir.

http://www.evanjones.ca/python-utf8.html
http://www.cl.cam.ac.uk/~mgk25/unicode.html#utf-8
http://tr.wikipedia.org/wiki/UTF-8
http://opereysin.com/edebi-hezeyanlar/825-utf-8-ve-kizilderili-asimilasyonu/
http://www.istihza.com/py2/unicode.html

MapReduce

noreply@blogger.com (Caner BAŞARAN) — Thu, 20 Oct 2011 11:48:00 +0000

MapReduce nedir?
Büyük veri setleri ile yapılacak işlemlerin birden fazla iş birimine dağıtılmasını (Distributed computing) sağlayan bir yöntemdir. Her ne kadar Google ile bu yöntem ismi eşlense de, 1960'lı yılların tasarım kalıbıdır(design pattern).

Genel İşleyiş
1. Öncelikle input partitioning yöntemiyle alınan veriler, 16-64 mb büyüklügünde parçalara ayrılır.
2. Bu parçaların her biri master a gönderilir.
3. Master aldığı verileri mapper lara ya da reducer lara göndermekle yükümlüdür.
4. Mapperler input olarak key,value alırlar ve output larını key, intermediate value şeklinde intermediate alana gönderirler. Böylece aynı key e sahip veriler gruplanmış olur.
5. Master intermediate alandaki verileri boş olan reducer lara gönderir.
6. Reducer lar intermediate key, value şeklinde aldıkları input u, key, list(values) şeklinde output dosyalarına yazar.

Artıları
Performans - doğrusal(linear) problemlerde
Hata toleransı - hata veya arıza oluştuğunda, iş parçacığını diğer birimlere aktarabilme
Maliyet - zaman olarak fırsat maliyeti
Sahiplik - Amazon'un EC2 (dağııtmlı işlemci) ve S3 (dağıtımlı depolama) gibi kiralanabilir clould servisler

Yorum
Mapper ve reducer ların problemlerini master tolere ediyor. Fakat master de oluşabilecek fiziksel problemleri tolere edebilecek ek bir yedek master ın sistem kararlığını daha iyileyeceğini düşünüyorum. - felaket tellalı :)

Hadoop - http://hadoop.apache.org/
OctoPy - http://code.google.com/p/octopy
Disco - http://discoproject.org/

Amazon'un hadoop çiftliklerinden işlem gücü satın alarak amazon s3'te yer alan veri yığınında mapreduce algoritmaları çalıştırabilirsiniz. http://aws.amazon.com/elasticmapreduce/

Python ile de Amazon Elastic MapReduce'ın kullanımı http://aws.amazon.com/articles/2294

http://code.google.com/intl/tr-TR/edu/parallel/mapreduce-tutorial.html
http://labs.google.com/papers/mapreduce-osdi04-slides/index.html
http://www.serdarb.com/nosql/map-reduce-nedir
http://cookingthecode.com/a44_Mapreduce-nedir,-nasil-calisir_
http://www.eksisozluk.com/show.asp?t=mapreduce

Çam fıstığı zamanı

noreply@blogger.com (Caner BAŞARAN) — Fri, 30 Sep 2011 14:47:00 +0000

Çam fıstığı, besin değeri yüksek fıstık çamının kozalaklarından çıkarılan bir besin. 20 yıldan sonra ancak kozalak yapabiliyor, fıstık çamları.

Aslında şu küçük tanelerin ne olduklarını bu yaşıma kadar bilmiyordum. Teyzemin teklifi ile çam fıstığı toplamaya gittik. Keyifli, bir o kadar da yorucu idi. Çünkü uzun süre, sürekli eğilip kalmanız, bacaklarınızı yormakta ve biraz da başınız dönmekte. Çam ağaçlarının altında bulunmak, nefesimi açtı. (alerjisi olanlar hariç)

Çam fıstığı ile yapılan çaya, Bergama/Kozak'ta cilveli çay denilmekteymiş :) Bu çayın lezzeti başka hiçbir çayın lezzetine benzemez, diyorlar. Fıstıkları kabuğundan çıkardıktan sonra deneyeceğim.

UCI to Arff (csvtoarff) UCI makine öğrenmesi veri setlerinin weka arff formatına çevirilmesi

noreply@blogger.com (Caner BAŞARAN) — Sat, 07 May 2011 08:03:00 +0000

Veri madenciliği dersinde yapmam gereken uygulamada, csv veri setinin weka arff dönüşümü gerekiyordu. Belki işinize yarar, bir örnek ile anlatıyorum.

iris veri setinin bulunduğu sayfadan iris.data indir.
csv2arff web uygulaması ile indirdiğin iris.data yükle.
Dönüştürmek istediğin sütunları seç ya da bütün sütunlar seç (check all)
İlgili sütunların türlerine göre (örnek: 5.1 3.5 1.4 0.2) numeric (sayısal) ya da (örnek: Iris-setosa) nominal (sembolik) olarak seç ve gönder

El ile yapacağın saatlerce işlem (veri setinin boyutuna bağlı), bir dakikanı bile almadı :)

Robin Hood Tax - Robin Hood Vergisi

noreply@blogger.com (Caner BAŞARAN) — Sun, 20 Feb 2011 20:19:00 +0000

Anamalcılık, kan kaybediyor. Mal ve hizmet alanların olmadığı bir anamalcılık sistemi, doğal olarak çöker. Bu çöküşün yavaşlaması ya da durdurulması için en az gelir gruplarında yaşayan, temel ihtiyaçlarını karşılamakta güçlük çekenlere destek olunmalıdır. Robin Hood Vergisi, tüm bankacılık hareketlerine % 0,05'lik bir vergi koymanın fakirliği çözmede çok büyük katkısının olacağı vurguluyor.

Kaynaklar:
http://robinhoodtax.org/
http://www.turkishtime.org/tr/content.asp?PID={D2CEAD3F-F69E-4CBC-92FB-228A4C05DC25}
http://www.duruk.gen.tr/2010/03/robin-hood-nasreddin-hocaya-kars.html
http://www.finansgundem.com/haber/Finansta-bir-cagin-sonu/21882

Rastgele T.C. kimlik no üretici

noreply@blogger.com (Caner BAŞARAN) — Thu, 06 Jan 2011 11:39:00 +0000

taşındı tıkla

Grooveshark'dan dinlediklerini Wireshark ile kaydet

noreply@blogger.com (Caner BAŞARAN) — Thu, 30 Dec 2010 23:57:00 +0000

Pardus'unuzda eğer Wireshark yüklü değilse, Uygulama Çalıştırıcı Menüsü > Sistem >Paket Yöneticisi > Wireshark
ya da kısaca Alt+F2 > Yakuake > sudo pisi it wireshark

1. Wireshark çalıştır, Capture menüsü > Options. Açılan pencerede Interface, internete girdiğiniz ağ kartını seçiniz. Capture Filter, port 80 girin ve Start.

2. Wireshark'ın üst bölümünde Filter 'e, http.content_type == "audio/mpeg" girin ve Apply tuşlayın.

3. Grooveshark'dan artık şarkılarınızı dinlemeye başlayabilirsiniz. Dinlediğiniz şarkı bittikten sonra Wireshark'ta

solda gördüğünüz gibi sağ tıklayıp "Follow TCP Stream" tıklıyoruz. Ve son olarak kaydediyoruz.

Çukurova Üniversitesi tezleri indirme

noreply@blogger.com (Caner BAŞARAN) — Tue, 28 Dec 2010 08:30:00 +0000

Yazılmış tezler içinde rasgele dolaşmak, kurcalamak istiyordum. Çukurova Üniversitesi tezlerini bu dizinde "http://library.cu.edu.tr/tezler/" tutmakta ama dizin listeleme engeli var.

import os

for i in range(4861,8197):
os.system("wget http://library.cu.edu.tr/tezler/%s.pdf" % i)

5GiB lık arşiv sabit diskimde :) artık dilediğim gibi...

Dr. Deming'in kalite anlayışı

noreply@blogger.com (Caner BAŞARAN) — Tue, 21 Dec 2010 14:31:00 +0000

taşındı tıkla

Alchemy ile ilk denemem

noreply@blogger.com (Caner BAŞARAN) — Sat, 02 Oct 2010 04:49:00 +0000

https://canerbasaran.github.io/grafik.html