Zeroplex 生活隨筆

將資料同步至 AWS S3

2014 年 4 月 1 日2021 年 3 月 12 日日落尚無留言

有項工作需要將 BTSync 上的資料同步上 AWS S3，並做靜態網頁使用。原本打算用來將 S3 掛載為虛擬磁碟的 s3ql 來用，但 s3ql 寫入的是 block data 而非 file，檔案同步上去要當作 static website 來用不太可能。

後來發現 AWS command line interface 的 s3 有個功能「sync」，會自動偵測要同步的項目。於是可以寫成：

$ aws s3 sync btsync/ s3://target-bucket

以上已可以將有異動的資料上傳到 AWS S3 上，但若 BTSync 若有檔案刪除，S3 上的資料仍會保留。若要刪除的動作也在 S3 重複一次，則要加上「–delete」參數：

$ aws s3 sync btsync/ s3://target-bucket --delete

還差一個步驟。要做 static web hosting，檔案必須讓所有人可以讀取，所以從網頁上操作的話，需要手動「Make Public」。

而 CLI 則是使用 –grants 幫檔案加上權限。參考 AWS ACL 設定，要讓所有人均可讀取，要設定成：

--grants read=uri=http://acs.amazonaws.com/groups/global/AllUsers

如此一來，上傳的檔案會自動設定為公開。

完整的 sync 指令如下：

aws s3 sync btsync/ s3://target-bucket --delete --exclude ".Sync*" --grants read=uri=http://acs.amazonaws.com/groups/global/AllUsers

最後定 crontab 自動執行，大功告成。

AWS, 資訊學習

2014 年 3 月 9 日2021 年 3 月 12 日日落尚無留言

查資料時，無意間發現 Google 有一系列的演講，整理出如何撰寫乾淨、好維護、可以測試的程式碼。

影片有很多段，已查不到播放順序，請各位自己挑選了看。

分享, 程式設計

2014 年 1 月 19 日2021 年 3 月 12 日日落尚無留言

安裝第二套作業系統並作多重開機，但把原來的開機程式蓋掉，開機選單一團亂，只好手動改。

Ubuntu 的開機選單設定放在 /boot/grub/grub.cfg，可以先用 update-grub (grub-mkconfig) 掃描現有可以開機的位置，並更新到 grub.cfg 設定檔：

$ sudo update-grub

# or
$ sudo grub-mkconfig -o /boot/grub/grub.cfg

接個編輯 grub.cfg，改成需要的樣子存檔。存檔後還需要寫入 MBR，設定才能生效：

$ sudo grub-install /dev/sda

Linux

2014 年 1 月 15 日2021 年 3 月 12 日日落尚無留言

用 grep 搜尋檔案中出現的文字，通常會這樣寫：

$ grep STR fileToSeatch

不過當要搜尋的字串有特出符號，像是「-」，就會出現錯誤訊息：

$ grep "->getVal()" *
grep: invalid option -- '>'

原因是 grep 將「-」開頭的字串視為命令選項 (command option)，去尋找「>get()」這個選項，而這個選項並不存在，所以導致錯誤。

在命令輸入前加上「–」，表示之後的參數都當作一般輸入而非選項 (end of option)：

$ grep -- "->getVal()" *

要搜尋的字串，就算沒有空白，也建議用引號括起來。像是「>」、「&」等，沒加上引號會在 bash 解析時就發生錯誤：

$ grep > *  # shoud be: grep ">" *
bash: *: ambiguous redirect

Bash, Linux

2014 年 1 月 14 日2021 年 3 月 12 日日落尚無留言

Xdebug 是一個在 PHP 上很好用的除錯工具，特別是 function calls tracing，可以很完整的列出執行流程。Xdebug 的介紹可以參考 Crboy 的文章：

要讓 Xdebug 在 PHP 開始執行時自動 trace function calls，只需要在 ini file 加上 xdebug.auto_trace = On 即可。若沒有系統權限，仍可以使用 PHP 的 ini_set() 設定 Xdebug 各項參數：

<?php

ini_set('xdebug.trace_output_dir', '/tmp/xdebug');
xdebug_start_trace();  // start tracing

// beginning of program

要注意的是，tracing 的設定會在 PHP 開始執行前便載入，所以使用 ini_set() 設定 xdebug.auto_trace 是不會起作用的：

<php

ini_set('xdebug.auto_trace', 'On');  // 沒有作用
ini_set('xdebug.trace_output_dir', '/tmp/xdebug');

// beginning of program

ps. 若 auto trace 已啟動，要記得定期清理 log，免得硬碟被吃光導致機器故障。

PHP