Uygulamayı github’a koymayı çok pratik bulmuyorum nedense. Türk Python’cularının toplanma alanı olarak gördüğüm istihza üzerinde kodlarımı paylaşarak, usta pythoncuların eleştirmesini de istedim. MaqaSQLDumper V3 ‘ü de gelecek bu eleştriler doğrultusunda hazırlamayı düşünüyorum

Artık uygulamamıza geçelim.

Uygulamanın adı nereden geliyor?

Uygulamanın adı konu başlığında da belirttiğim gibi MaqaSQLDumper V2.1. Bu isim nereden geliyor;
Maqas bildiğiniz gibi bizim gnu uygulamalar geliştirmeye çalıştığımız sosyal yazılım grubumuz (bkz Maqas.Net) . Çok değerli yazılımcıların bulunduğu harika bir grup.
SQL tüm yapısal sorgulama dili üzerinde çalıştığımız izlenimini verse de uygulama şuanda sadece MySQL’i destekliyor, bunu ifade ediyor.
Dumper; MySQLDump’tan geliyor. Dump edici olarak yorumlanabilir.

MaqaSQLDumper V2 ne yapar?

• Web sunucunuz üzerindeki tüm veritabalarını sıkıştırarak göstereceğiniz yere yedekler. (MySQLDump)
• Ana web dizininizi sıkıştırarak göstereceğiniz yere yedekler.
• Kullanıcının belirteceği gün limitinden önceki yedekleri otomatik siler.
• Gmail adresinize bilgilendirme maili atar.
• Son durumu / Yapılanları ekrana basar.

Birçok web developerın, server yöneticisinin, benim gibi home-developer’ların zaman zaman yedek alması gerektiği su götürmez bir gerçektir. Bu uygulamayı Linux altında cron’a, windows altında (test etmedim, çalışılması gerek) Zamanlanmış Görevler’e eklenirse istenen frekansta yedekleri alıp, belirtilen tarihten eski yedekleri de kendisi siler. Ve hepsini script başında basitce ayarlayabilir.

Neden GUI değil?

Aslında gelen eleştri maillerinde de bu konu dikkatimi çekti. Tabii ki GUI olması daha basit bir uygulama yönetimi sağlayacaktı. Fakat şuda bir gerçek ki, neredeyse tüm server yöneticileri, panel harici kurma/kaldırma/ayarlama işlerini;  ssh üzerinden serverına bağlanır ve ssh üzerinden yapar. Terminal (yada putty) üzerinde çalışacak uygulamanın GUI desteklemesi bana pek mantıklı gelmedi. MaqaSQLDumper’ın cross-platform ve GUI versiyonunu da yakında hazırlayacağım.

Uygulamanın hazırlandığı bileşenler nelerdir?

Linux 3.0.0-16-generic-pae #29-Ubuntu SMP Tue Feb 14 13:56:31 UTC 2012 i686 i686 i386 GNU/Linux
Python 2.7.2+ (default, Oct 4 2011, 20:03:08) - [GCC 4.6.1] on linux2
pyCharm 2.0.2

Uygulamanın ekran görüntüleri

Çalışma zamanı ekran görüntüsü ;

Bilgilendirme maili ekran görüntüsü;

Nerden indirip deneyebiliriz?

Link : http://mustak.org/work_dir/maqasqldumper/MaqaSQLDumper_V2.zip
Sisteminizde bulunmayan, eksik kütüphane sorunu olursa (ki sanmıyorum), mail yoluyla iletişime geçebilirsiniz.

Pythoncular için tartışma alanı

http://www.istihza.com/forum/viewtopic.php?f=25&t=716

Kodlar

Tavsiyem uygulama kodlarını üstteki linkten indirmeniz, aşağıdaki kodları ise sadece inceleme için kullanmanız. Malum ki python sözdizimi konusunda hassastır. Copy/Paste ile ciddi yerimi sıkıntısı olacağı için çalıştırma sorunları yaşanabilir, derlemeden önce üzerinde ciddi zaman harcayabilirsiniz.

#!/usr/bin/env python
#-*- coding: utf-8 -*-

# MaqaSQLDumper V2.1
# @author: Hakan Mustak
# @mail: hmustak@gmail.com @web: http://www.mustak.org
# Revised on 14/03/2012
# Created on 10/03/2012

#Betik içinde İhtiyaç duyduğumuz paketleri ekliyoruz
import os, time, MySQLdb, tarfile, shutil, smtplib
from os.path import getsize
from email.MIMEMultipart import MIMEMultipart
from email.MIMEBase import MIMEBase
from email.MIMEText import MIMEText

#AYARLAR - (Kullanıcı tarafından değiştirilebilir ayarlar)
#---------------------------------------------------------------------------
#MySQL kurulu bilgisayar
dbserver = "localhost"
#MySQL kullanıcı adı
dbUser = "root"
#MySQL şifresi
dbPasswd = "DATABASE_PASSWORD_HERE"
#MySQL Backup Yolumuz
yedekYolu = "/home/redshark/Backup/"
#Web dizini Yolumu
webYolu = r"/var/www/"
#Eski dosta silinme Limit Gün sayısı
limit = 10
#Mail Bilgileri
mailUser = "hmustak@gmail.com"
mailPasswd = "GMAIL_PASSWORD_HERE"
mailFrom = "hakan@mustak.org"
mailTo = "hmustak@gmail.com"
#----------------------------------------------------------------------------

# Kullanıcı tarafından değiştirilmesi ÖNERİLMEYEN ayarlar
#---------------------------------------------------------------------------
#Tarih-Saat bilgisi
zaman = time.strftime("%Y-%m-%d-%H-%M")
#DB yedekyolu
dbYedekYolu = r"%smysql/%s/" % (yedekYolu, time.strftime("%Y-%m-%d"))
#WebDizini Backup Yolumu
webYedekYolu = r"%sweb/%s/" % (yedekYolu,time.strftime("%Y-%m-%d"))
#Database isimlerini koyacağımız liste
dbListe = []
#Database dosyalarımızın boyutları
bilgiBoyut = []
#Silinen dizin-dizinler
silinenDizin = []
#---------------------------------------------------------------------------

#DB isimlerini listelere yerleştiriyoruz
def dbListeOlustur():
 #Bilgilendirmeyi yapalım
 print " => Veritabanı bağlantısı sağlanıyor"
 # Database bağlantısını yapıyoruz
 dataCon = MySQLdb.connect(dbserver,dbUser,dbPasswd)
 # Nesnemizi oluşturuyoruz
 dbNesne = dataCon.cursor()
 # Databaselerimizi çekelim
 dbNesne.execute("show databases")

# Ve Databaselerimizi yedekleyelim
 for database in dbNesne.fetchall():
 #Yedeklenmesini istemediğimiz VT'leri hariç bırakalım
 if (database[0]!="information_schema")and(database[0]!="mysql"):
 #Yedek hazırlayan fonksiyonumuzu çağırıyoruz
 dbListe.append(database[0])

#DB lerimizi sıkıştırıp Dump ediyoruz
def dbYedekle():
 #Bilgilendirmeyi yapalım
 print " => SQL Yedek dosyaları oluşturuluyor"
 #Veritabanı listesini çekiyoruz
 for liste in dbListe:
 #Dosya adını oluşturuyoruz
 dbYedekDosya = r"%s_%s_SQL_backup.sql" % (zaman,liste)
 #MysqlDump komutumuzu işleterek sql dosyamızı oluşturuyoruz
 os.system("mysqldump -u%s -p%s %s > %s%s" % (dbUser, dbPasswd, liste, dbYedekYolu, dbYedekDosya))
 #Oluşturduğumuz sql dosyamızı sıkıştırıyoruz
 os.system("gzip -9 %s%s" % (dbYedekYolu, dbYedekDosya))

#Yedeklenecek DB'leri gösterir
def dbListeGoster():
 #Bilgilendirmeyi yapalım
 print "*** Veritabanları yedeklendi"
 #Dosya ölçü ve isimlerini çekelim
 for dosya in os.listdir(dbYedekYolu):
 #dosya ve yolunu bir değişkene atamalıyız(daha okunur oluyor)
 yol = r"%s%s" % (dbYedekYolu,dosya)
 #sonuçları listemize ekliyoruz
 bilgiBoyut.append("[vt][%s kb] %s" % (round((getsize(yol)/1024.0),2) ,dosya))

#Yedeklenecek web ana dizinini burada sıkıştırıp yedekliyoruz
def dizinYedekle(source, target):
 #yedek dosyamızın adını oluşturuyoruz
 dosyaYol = "%s%s%s"%(target,zaman,".tar.gz")
 #Klasör sıkıştırmak için tar modülünü kullanıyoruz
 tar = tarfile.open(dosyaYol, "w:gz")
 #Üstte oluşturduğumuz dosyaya aşağıdaki adresi ekliyoruz
 tar.add(source)
 #İşimiz bitince ışıkları söndürelim/uygulamaları kapatalım
 tar.close()
 #yedeklenen dizinlerin bilgilerini daha sonra kullanmak üzere listeye ekliyoruz
 bilgiBoyut.append("[dizin][%s mb] %s" % (round(((getsize(dosyaYol)/1024.0)/1024),2) ,dosyaYol))
 #Uygulama ne aşamada kullanıcıya bilgi verelim
 print "*** Web dizini yedeklendi"

#Belli bir süre sonunda ihtiyacı biten yedekleri silmeliyiz
def eskiDizinSil(sil,tip):
 #Yedeğin silineceği dizindeki klasörleri listeliyoruz
 for dizin in os.listdir(sil):
 #silinen dosyaadını taşıyacağımız değişken
 silinenTip=""
 #limit gün sayısından toplam saniyeyi hesaplıyoruz
 limitSN = limit * 86400
 #Silme aşamasında hata oluşabiliyor, oluşursa devam edelim
 try:
 #Dizinin ömrü verilen limitten fazla ise (default:10gün)
 if (os.stat(sil+dizin).st_ctime < (time.time()-limitSN)):
 #Silme bilgisi için kayıt oluşturuyoruz
 silinenTip = "[%s] %s"%(tip,dizin)
 #silme bilgisini kayıt listesine ekliyoruz
 silinenDizin.append(silinenTip)
 #Dizini tüm alt dizin ve dosyaları ile birlikte silitoruz
 shutil.rmtree(sil+dizin)
 except :
 #Hata varsa, devam et
 pass

def bilgi():
 #Mail gönderilecek gövde
 metin = "" + "\n\n"
 metin = metin + "Yedeklenen Dosyalar ve büyüklükleri" + "\n"
 metin = metin + "----------------------------------------------------------------------" + "\n"
 #Yedekleme bilgileri hazırlanıyor
 for liste in bilgiBoyut:
 metin = metin + liste + "\n"
 metin = metin + "----------------------------------------------------------------------" + "\n\n"
 metin = metin + "Silinen Dizinler" + "\n"
 metin = metin + "----------------------------------------------------------------------" + "\n"
 #Silme bilgileri hazırlanıyor
 for dizin in silinenDizin:
 metin = metin + dizin + "\n"
 metin = metin + "----------------------------------------------------------------------" + "\n\n"

#MIMEMultipartı hazırlamaya başlıyoruz
 posta = MIMEMultipart()
 posta['Subject'] = "%s : Günlük Yedekleme Tamamlanmıştır" % (zaman)
 posta['From'] = mailFrom
 posta['To'] = mailTo
 mesaj = metin
 posta.attach(MIMEText(mesaj))

#Mail göndermek üzere gmaile bağlanıyoruz (Günlük limit 500)
 smtpserver = smtplib.SMTP("smtp.gmail.com",587)
 smtpserver.ehlo()
 smtpserver.starttls()
 smtpserver.ehlo
 smtpserver.login(mailUser, mailPasswd)
 smtpserver.sendmail(mailUser, mailTo, posta.as_string())
 smtpserver.close()

#Mail gönderdikten sonra sonuçları ekrana basalım
 print "\n"
 print "Yedeklenen Dosyalar ve büyüklükleri"
 print "--------------------------------------------------------------------"
 #Bilgi Listemizi gösterelim
 for liste in bilgiBoyut:
 print liste
 print "--------------------------------------------------------------------\n"
 print "Silinen Dizinler"
 print "--------------------------------------------------------------------"
 #Bilgi Listemizi gösterelim
 for dizin in silinenDizin:
 print dizin
 print "--------------------------------------------------------------------\n"
 print "Bilgilendirme maili gönderilmiştir : %s" % (mailUser)
 print "\n"

#Dizin oluşturma fonksiyonumuz
def dizinOlustur(dizin):
 os.mkdir(dizin)

# Backup altındaki base yedek dizinimizi oluşturalım
if os.path.isdir(yedekYolu+"mysql/") == False:
 dizinOlustur(yedekYolu+"mysql/")
if os.path.isdir(yedekYolu+"web/") == False:
 dizinOlustur(yedekYolu+"web/")

#Günlük yedekleme yapılmış mı? Kontrol ve yedekleme alanımız
if os.path.isdir(dbYedekYolu) == False:
 #Veritabanı ve Web dizini için yedeklenecek dizini oluşturalım
 dizinOlustur(dbYedekYolu)
 dizinOlustur(webYedekYolu)

#Veritabanı yedekleme işlemleri
 dbListeOlustur()
 dbYedekle()
 dbListeGoster()

#Web dizini yedekleme işlemleri
 dizinYedekle(webYolu,webYedekYolu)

#Eski dizinleri silme vakti
 eskiDizinSil(yedekYolu+"mysql/","vt")
 eskiDizinSil(yedekYolu+"web/","web")

#Yedekleme sonuç gösterme/gönderme bilgileri
 bilgi()

else:
 print "Bugün (%s) yedeğiniz alınmış gözüküyor" % (time.strftime("%d-%m-%Y"))

coşmak üzere…
Hakan Müştak

Okumanızı önerdiğim benzer yayınlarım;

• [Python] Mysql üzerinde tüm databaselerimizi yedekleyelim
  Akşam uyuma hazırlığı yaparken, sitelerimin ev sahipliğini yapan arkadaşım daha önce yazdığım veritabanı yedekleme ile ilgili yazımın yetersizliğinden bahsedince uykum kaçtı. Haklıydı, o günün ihtiyac...
• Pythonla MySql yedeği alıp mail atalım
  Konumuz Pythonun faydalarından en üst seviyede faydalanmak! Zaman zaman birçok kişinin ihtiyaç duyduğu, aradığı ve sıkıntılar yaşadığı bir konu; "Düzenli Yedek Almak". Bir çok server yada site yönetic...
• SUDO’nun patenti Microsoft’ta !
  Az önce SUDO dergisinde okuduğum bir haberle irkildim. Microsoft; Ubuntu, Pardus ve Linux Mint de dahil olmak üzere debian Linux dağıtımlarında ve Unix benzeri sistemde kullanılan Sudo komutunun çalış...
• SCP – Secure Copy ile dosya transferi
  O kadar görsel arayüz (gui) ile çalışmaya alıştık ki son dönemde, gerçekten belli kriz anlarında zorlanabiliyoruz. Az önce Grafik Desktop'tan SSH'a düşüp bu sıkıntıyla yüzleşince biranda afalladım. Bu...
• İşletim sistemi iadesi
  Notebook alırken benimde yaşadığım bir sorundu bu. İnsanın basireti bağlanıyor denir ya, sanki mecburmuşuz gibi Microsoft ürünlerine kuzu kuzu kabullenip kaderimizi evin yolunu tutmuştuk. İlk haft...
• Unity Lensleri
  Dürüst olmalıyım ki Unity'e alışmam kolay olmadı. Yıllarca gnome kullandıktan sonra alışkanlıkları kolay kolay kıramıyor insan. Biraz ısrarcı olup (sevgili Redial'ında baskısıyla) Mint'e geçmeyerek s...
• Ubuntu / Linux altında DNS ayarlamak
  Blogu genel bir temizlikten geçirdikten sonra tekrar kurma ve konuları ekleme noktasında en şaşırdığım konulardan birisi bu DNS ayarlamak ve bu ayarları kalıcı kalıcı hale getirmek.  Blogların kaynak ...
• Proxy üzerinden wGet kullanımı
  Bir çok sebepten ötürü proxy kullanıyoruz günümüzde. Grafik desktop üzerinde iseniz browser üzerinde kullanmak oldukça basit ve etkilidir.  Peki eğer dosya çekmeniz gerek makinanızda grafik desktop ça...
• Linux altına Subversion (SVN) kurulumu
  Başta belirteyim; Konuyu ifade eden bir logo olmadığı için pengueni tercih ettim. Konumuz olan SVN, aynı anda birçok kullanıcı tarafından kod geliştirilmesini sağlayan bir versiyonlama sistemidir. Ne ...
• [Python] Ağ üzerinde dosya kopyalayalım
  Windows makinem de, ağ üzerinde düzenli olarak almam ve belli periyodlarla kontrol etmem gereken dosyalar bulunuyor. Her dosya için periyodik ağda gezip kopyala/yapıştır/aç incele... bir noktadan ...

Hemen geçelim kuruluma ;

# root olarak sisteme bağlandıktan sonra paketi indirip kurmak için  apt-get install openssh-server yazıyoruz

# openssh’ın default kurulum ayarlarıyla çalışıp çalışmadığını görmek için netstat -tulpn yazararak sshd ve Port 22′yi arıyoruz. Varsa sorun yok, yüklenmiş ve çalışıyor demektir.

# default ayarlarla ssh bağlantısı sağlanabiliyor olması lazım. Bir deneme yapalım: ben deneme için hem putty, hem WinSCP kullanıyorum (yerine göre). WinSCP içinde puuty için local aders göstererek dahili olarak birlikte kullanma şansınız da var tabi. Oldukça esnek ve güzel bir yapısı var, tavsiye edilir

Putty : http://www.putty.org/

WinSCP : http://winscp.net/eng/download.php

WinSCP ile Login oluyoruz;

Girilen bilgiler doğruysa bağlantı aşamalarını bu şekilde görüyor olmalısınız;

Açıldıktan sonra ise hem local hemde ssh bağlantısı yaptığınız makinenin dosyalarını ister winscp de, dahili putty kullanıyorsanız isterseniz de putty’de eş zamanlı olarak aşağıdaki gibi görebilirsiniz;

# SSh bağlantısı default olarak Port 22 kullanır. Bunu herkes bildiği için bir güvenlik sıkıntısı oluşabilir. Düşünsenize port IP belli, port belli, kullanıcı adı root… Geriye sadece passwordu kırmak kalıyor. Birçok yöntemle bu password kırılabilir ve sisteminize girilebilir.

(İşini bilen biri ssh portunuzuda rahatlıkla bulabilir, bunuda unutmamak gerek tabi.)

lowlevel bir önlem dahi olsa portumuzu değiştirmeliyiz. Bunun için nano aracılığıyla etc/ssh altındaki sshd_config dosyasını açıyoruz

açılan config dosyasında port 22 ‘yi bulup istediğiniz port değerini girerek değiştiriyorsunuz. (ben 5522 yaptım)

ben portu 5522 yaptım

nanoyu kaydedip çıkıyoruz. (nano üzerinde kaydet=>ctrl+O , çık CTRL+X )

# Şimdi yaptığımız değişikliğin uygulanabilmesi için ssh-server’ı restart ediyoruz. Bunun için etc/init.d/ssh restart yazmamız yeterli

# Portun çalıştığını deneyelim ve görelim

ve bağlandı

Umarım bu yazı ihtiyaç duyan birine fayda sağlar.

Sevgiyle kalın

Hakan Müştak

Okumanızı önerdiğim benzer yayınlarım;

• SCP – Secure Copy ile dosya transferi
  O kadar görsel arayüz (gui) ile çalışmaya alıştık ki son dönemde, gerçekten belli kriz anlarında zorlanabiliyoruz. Az önce Grafik Desktop'tan SSH'a düşüp bu sıkıntıyla yüzleşince biranda afalladım. Bu...
• MaqaSQLDumper V2 – MySQL ve Web Dizini yedekleme aracı
  Geçen hafta içinde serverını baştan kurmak zorunda olan ve siteleri yayınlanan bir arkadaşıma (bizim sitelerde kendisinde) alelacele bir backup scripti yazmış ve blogumdan BURADA yayınlamıştım. Python...
• Websense filtresinden nasıl kurtulurum?
  Uzunca bir süre sonra tekrar yazmaya karar verdim.  Bugünün konusu özellikle kurumsal şirketlerde IT dışında kalan kullanıcıların başının belası olan websense ile ilgili. Günün sorusu ise "Websense'i ...