blog.monophile.net

コンピュータのこととかのメモ。

山本 一彰 | Takaaki Yamamoto

東京工業大学において計算機科学と応用数学を学び、 情報科学芸術大学院大学[IAMAS]においてメディア表現を専攻し修了。 2015年にコンビネータ論理を基に計算完備な計算手法 "論理珠算"を開発し、 それを含む体系である"算道"を構成した。 その成果により、 第19回 文化庁メディア芸術祭 アート部門 新人賞 (文部科学大臣賞) を2016年に受賞。 現在はインフラエンジニアとして生計をたててている。

技術

Configuration Management Ansible, Terraform, Cloud-Init
Cloud Platform GCP, AWS, Azure, OpenStack
Virtualization, Container QEMU+KVM, Xen, LXD/LXC, Docker
OS Ubuntu, Debian GNU/Linux, CentOS, FreeBSD, ...
Storage Ceph, GlusterFS, ZFS, btrfs, ...
Router Linux+Netfilter, Quagga, VyOS, Cisco IOS, YAMAHA RTX, ...
Switch Dell FTOS, AlaxalA, NETGEAR, ...
DB MySQL, MariaDB(Galera Cluster), MongoDB
Mail postfix, dovecot, RainLoop
WebApps WordPress, GitLab, MatterMost, Redmine, ...
Monitoring Nagios, Munin, Zabbix, Prometheus, Grafana
Misc Kubernetes/Istio, certbot, dnsmasq, ...

習得中

OS CoreOS(Container Linux), Windows on QEMU, ...
SQL PostgreSQL, BigQuery, ...
NoSQL CouchDB, ArangoDB, Neo4J, ...
Misc Proxmox, oVirt, MAAS, NFV, ...

投稿

OpenZFS on OS Xでバックアップ

概要

使っているMacBook Pro(15-inch, Mid 2015)のバッテリーが膨らんできたので、 Apple Storeへ持ち込みでバッテリー交換に出そうかと。 修理の前にはバックアップが必要らしいので、 ZFSでホームディレクトリのみをバックアップしてみた。 (基本的にシステムのフルバックアップは必要のない使い方をしている。)

MacOSのTimeMachineは複数HDDのTimeMachineのデータを一つのHDDへ結合したり、 別FSに移行したりすることが困難だったので、最初からZFSにしてみる。 なんせ、ZFSならばFreeBSDでもLinuxでも読めるし、 普段は外付けのUSBのHDDにバックアップしておいて、 あとでRAIDZを組んだNASにsend|receiveもできる。

OpenZFSをインストールする。

↓のページを参考にしてOpenZFSをインストールする。

ディスクの確認

diskutilなどでZFSを使用するディスクを決める。 今回はUSB接続HDD(2TB)の/dev/disk3を利用する。

$ diskutil list /dev/disk3
/dev/disk3 (external, physical):
   #:                       TYPE NAME                    SIZE       IDENTIFIER
   0:      GUID_partition_scheme                        *2.0 TB     disk3
   1:                        EFI EFI                     209.7 MB   disk3s1
   2:                  Apple_HFS usbwd00                 2.0 TB     disk3s2

プールの作成

プールの作成は既存のデータが消えるため、ディスクの指定はよく確認する。

MacOSはデフォルトの設定であればファイル名の大文字小文字を区別しないのと、 Unicodeの正規化がNFDという方法のため、下記のように作成時に指定する。 これらのオプションはプール作成後では変更不可能になる。

sudo zpool create -f -o ashift=12 -O casesensitivity=insensitive -O normalization=formD usb2tb disk3

プールが作成され、パーティションが変更されていることが確認できる。

$ diskutil list /dev/disk3
/dev/disk3 (external, physical):
   #:                       TYPE NAME                    SIZE       IDENTIFIER
   0:      GUID_partition_scheme                        *2.0 TB     disk3
   1:                        ZFS usb2tb                  2.0 TB     disk3s1
   2: 6A945A3B-1DD2-11B2-99A6-080020736631               8.4 MB     disk3s9

調整

パフォーマンスを上げたい場合は、 下記のようにして圧縮(lz4)を有効にし、atimeを無効にする。

sudo zfs set compression=lz4 atime=off usb2tb

実際のデータの圧縮率を確かめるときは↓のようにすればよい。

$ sudo zfs get compressratio
NAME                   PROPERTY       VALUE  SOURCE
usb2tb                 compressratio  1.42x  -
usb2tb/backup          compressratio  1.42x  -
usb2tb/backup/mbphome  compressratio  1.42x  -

データセットの作成

今回は usb2tb/backup/mbphome というデータセットにバックアップをするので、 下記のようにして作成する。

$ sudo zfs create -p usb2tb/backup/mbphome

下記のようにデータセットが作成され、 /Volumes/usb2tb/backup/mbphome にマウントされている事がわかる。

$ sudo zfs list
NAME                       USED  AVAIL  REFER  MOUNTPOINT
usb2tb                    2.15M  1.76T  1.14M  /Volumes/usb2tb
usb2tb/backup              832K  1.76T   416K  /Volumes/usb2tb/backup
usb2tb/backup/mbphome      416K  1.76T   416K  /Volumes/usb2tb/backup/mbphome

違う場所にマウントしたい場合は↓のように設定する。

$ sudo zfs set mountpoint=/mnt/point usb2tb/backup/mbphome

バックアップ

rsyncを使ってバックアップ。

$ sudo rsync -av $HOME/ /Volumes/usb2tb/backup/mbphome/

スナップショット

スナップショットを作成する。

$ sudo zfs snapshot usb2tb/backup/mbphome@$(date +%s)

作成されたスナップショットは↓で確認できる。

$ sudo zfs list -t snapshot
NAME                                  USED  AVAIL  REFER  MOUNTPOINT
usb2tb/backup/mbphome@1508171437      0      -   156G  /Volumes/usb2tb/backup/mbphome/.zfs/snapshot/1508171437

参考