python程序同步webdav网盘(坚果云、owncloud)

原文网址:python程序同步webdav网盘(坚果云、owncloud)
)

在编写一个Django项目的时候有定时备份数据文件的需求。因为项目运行在云服务器中,担心的是服务器挂掉,所以备份的地方不能是同一台服务器。在这个项目里自己去建一个服务器来管理备份数据显得没有必要。目前网络存储提供商有许多家,我选取的方案是编写python定时程序连接支持WebDAV协议的网盘,例如坚果云和owncloud。

分为两部分:

  1. Python同步代码编写
  2. Django定时任务编写

Python同步代码编写

使用webdavclient3库来处理webDAV协议的部分。先安装:

pip install webdavclient3

然后在自己的项目的某个地方建立一个py文件。我选的是[项目目录]\utils\backup\backup.py

编写python代码:

from webdav3.client import Client
from datetime import datetime
from webdav3.exceptions import LocalResourceNotFound

import math
# invoke this function every day.
def upload():
    options = {
        'webdav_hostname': "网盘地址,如果是坚果云,不能只输入/dav/路径,似乎这个文件夹不能访问,在下面再建一个文件夹,比如backup。网址中需要有backup的地址比如https://dav.jianguoyun.com/dav/backup",
        'webdav_login': "用户名",
        'webdav_password': "密码,如果是坚果云填写应用密码",
        'disable_check': True, #有的网盘不支持check功能
    }
    client = Client(options)
        # 我选择用时间戳为备份文件命名
    file_name = str(math.floor(datetime.now().timestamp())) + '.bak'
    try:
        # 写死的路径,第一个参数是网盘地址
        client.upload('backup/' + file_name, '本地地址,绝对路径')
        # 打印结果,之后会重定向到log
        print('upload at ' + file_name)
    except LocalResourceNotFound as exception:
        print('An error happen: LocalResourceNotFound ---'  + file_name)

# 如果是直接调用文件,执行upload()
if __name__ == '__main__':
    print('run upload')
    upload()

Python的代码相对简短。只需要在服务器的命令行执行python upload.py,备份文件自动上传到网盘。然而还不完整,这个程序的目的是定期执行。接下来结合Django的定期执行接口做到每日备份。

Django定时任务编写

Django是目前很流行的python web服务框架。通过django自带的命令创建project和app(这一部分不讲)。

当项目建好后,使用python manage.py可以运行项目、数据库代码整合。开发者可以通过继承BaseCommand类来自定义命令,然后再通过django_crontab定期执行命令。或者不通过自定义命令,直接使用django_crontab定期执行函数。

创建backupCmd命令

在之前创建的app下新建management/commands目录,在该目录下新建backupCmd.py

from django.core.management.base import BaseCommand
from utils.backup.backup import upload

class Command(BaseCommand):
    def handle(self, *args, **options):
        upload()

当完成后,在项目根目录下执行python manage.py backupCmd就可以单次执行程序了。

在setting.py尾部添加:

# 运行定时函数,每天1点运行。
CRONJOBS = [
    ('0 01 * * *', 'utils.backup.backup','>> ~/test_crontab.log')
]

# 运行定时命令, 
CRONJOBS = [
    ('*/1 * * * *', 'django.core.management.call_command', ['backupCmd'], {}, '>> ~/test_crontab.log'),
]

然后执行python manage.py crontab add,定时任务加入其中。

当时间到达的时候,程序将自动运行。日志会输出到~/test_crontab.log中。

linux中的定时任务crontab的语法如下:

*  *  *  *  * command
分钟(0-59) 小时(0-23) 每个月的哪一天(1-31) 月份(1-12) 周几(0-6) shell脚本或者命令

对于使用到的网盘,希望能够付费支持一下。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,525评论 6 507
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,203评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,862评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,728评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,743评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,590评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,330评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,244评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,693评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,885评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,001评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,723评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,343评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,919评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,042评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,191评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,955评论 2 355