バックアップpythonスクリプト

バックアップ用のPythonスクリプトを作った。

特徴は、、、
・ファイルが更新されていたら上書きする。
・削除されているファイルはバックアップも削除
・confファイルでバックアップ場所指定可



========== backup.py ==========
# -*- coding: utf-8 -*-
conf='backup.conf'
log='backup.log'
COPY_HIDDEN_FOLDERS = False
REMOVE_NOT_EXISTS_FILES = True

import os, shutil
import codecs

def copy(ipath,odir):
    fname = os.path.basename(ipath)
    idir  = os.path.dirname(ipath)
    opath = os.path.join(odir,fname)
    if not os.path.exists(opath):
        if not os.path.isdir(odir):
            os.makedirs(odir)
            shutil.copymode(idir,odir)
        # print fname
        try:
            shutil.copy2(ipath,opath)
        except IOError:
            print( 'IOError occur at ' + ipath )
    else:
        if os.stat(ipath).st_mtime > os.stat(opath).st_mtime + 0.001:
            print ipath + u' => ' + opath
            shutil.copy2(ipath,opath)          

def copytree(idir,odir):
    if os.path.isdir(idir):
        # print idir, odir
        try:
            for sub in os.listdir(idir):
                ipath = os.path.join(idir,sub)
                if os.path.isdir(ipath):
                    if not COPY_HIDDEN_FOLDERS and sub[0] == '.':
                        print 'skip at ' + sub
                        continue
                    opath = os.path.join(odir,sub)
                else:
                    opath = odir
                copytree(ipath,opath)
        except WindowsError:
            print( 'Winodws Error occur at ' + idir )
    elif os.path.isfile(idir):
        copy(idir,odir)

def checktree(odir,idir,remove):
    for sub in os.listdir(odir):
        opath = os.path.join(odir,sub)
        ipath = os.path.join(idir,sub)
        if os.path.isdir(opath):
            if not os.path.exists(ipath):
                print 'not exists ' + ipath
                if remove:
                    shutil.rmtree( opath )
            else:
                checktree(opath,ipath,remove)
        elif os.path.isfile(opath):
            if not os.path.exists(ipath):
                print 'not exists ' + ipath
                if remove:
                    os.remove( opath )
            elif os.stat(opath).st_mtime > os.stat(ipath).st_mtime + 0.001:
                print 'modified ' + opath

for line in codecs.open(conf,'r','utf-8'):
    idir = line.split(u'=>')[0].strip()
    odir = line.split(u'=>')[1].strip()
    copytree(idir,odir)
    checktree(odir,idir,REMOVE_NOT_EXISTS_FILES)

import datetime
fpLog = open( log, 'w' )
fpLog.write( 'execute at' + str( datetime.datetime.today() ) )


========== backup.conf ==========
C:\Users\Public => E:\backup\Public
C:\Users\guest => E:\backup\guest

コメント

コメントを投稿

このブログの人気の投稿

Python SQLite スレッド間でコネクションの使いまわしは出来ない

以下のエラーが出た。 ProgrammingError: SQLite objects created in a thread can only be used in that same thread.The object was created in thread id 5052 and this is thread id 3176 SQLiteのオブジェクトは作成されたスレッドでしか使えない。とのこと。 そういうもんなのか。。。ちょっと面倒。 ■ サンプルプログラム import sqlite3 class CreateConnection(threading.Thread): connection = sqlite3.connect(':memory:') def __init__(self): threading.Thread.__init__(self) def run(self): sql = 'SELECT col1 from TEST_TABLE' self.connection.cursor().execute(sql) if __name__ == '__main__': sql = "CREATE TABLE TEST_TABLE ( col1 INTEGER );" sqlite3.connect(':memory:').cursor().execute(sql) CreateConnection().start()
続きを読む

slackでgeneralの投稿を全削除する

イメージ
最近slackも日本語化して、海外との槍とも多いことからchatworkからslackへ移行しています。 slackは概ね満足なのですが、１点不満を言うとすれば、ワークスペースという一旦大きなくくりを作らないといけないので、LINEのグループみたいなものを作る点がやや億劫です。 ですが、その点を除けば、概ね機能性は他のサービスの上位互換な気がしています。。。 Slackを仕事で暫く使用しているとると困ったことが発生しました。 それは、generalというデフォルトのチャネルに関してで、全メンバー公開のこのチャネルに色々投稿していたのですが、プロジェクトの途中に権限レベルの異なるメンバーが参加し、そのメンバには見せられない情報をgeneralに投稿してしまっていたからで、当初はgeneralにアクセス制限かければと考えたのですがどうにもそれはできない仕様になっており別の対策をする必要が発生しました。 ということで、今回は以下の対応を取りました。 1. generalの内容をエクスポート 2. generalの内容を別のプライベートチャネルにインポート 3. generalの内容を全削除 1と2はslackの機能で対応可能です。 3は対応できなかったのでPythonで削除することにしました（もちろん手動で一つ一つ削除することは可能です） なお、以下の手順は実行者がオーナーの場合を想定しています。 権限が無ければエクスポート等できない操作があります。 1.generalの内容をエクスポート 以下にアクセスして「エクスポートを開始」をクリックします。 データのエクスポート ※ 事前にワークスペースにログインしておく必要があります。 そのまま準備が完了するまで待ちます。 適当なタイミングで画面リフレッシュ（F5)すると「ダウンロード可能」の文言が現れますのでこれをクリックするとエクスポートファイルをダウンロードできます。 (参考) ワークスペースの管理 2.generalの内容を別のプライベートチャネルにインポート 以下にアクセスして「Slack」行の「インポート」ボタンをクリックします。 データのインポート 「ファイルを選択」ボタンをクリックして先ほどエクスポートしたファイルを選択し、 「インポー
続きを読む

Google location history（JSON形式）をCSVファイルにする

前回の挫折 から、今度はJSON形式で出力したGoogle locaiton historyを、まずはCSVに吐き出すことをしてみた。時間、緯度、経度、高度以外の情報はバッサリ切り捨て。 参考サイト(コード）はこれ https://github.com/Scarygami/location-history-json-converter/blob/master/location_history_json_converter.py ソース import json import datetime import csv class placetime ( object ): def __init__ ( self , je): self .time = je[ 'timestampMs' ] self .longitude = je[ 'longitudeE7' ]/ 1e7 self .latitude = je[ 'latitudeE7' ]/ 1e7 self .altitude = je[ 'altitude' ] if 'altitude' in je else None def __lt__ ( self , other): return self .time < other.time def __str__ ( self ): return "{t} {lg} {lt} {al}" .format( t = self .ftime , lg = self .longitude , lt = self .latitude , al = self .altitude) @ property def ftime ( self ): return datetime.datetime.fromtimestamp( int ( self .time)/ 1e3 ).strftime( "%Y-%m-%d %H:%M:%S" ) @ property
続きを読む