2018/06  更新

GCP修改了 Cloud SQL的HA機制說明

連結點我

主要就是多了一項

Master 60秒沒有回應時，將會啟動 Failover

總算是有達到基本的要求了，期待可以越來越完善

—————————–以下為原文—————————–

其實這篇算是發牢騷，一個簡單的抱怨

希望GCP能快點修改這種不成熟的HA

以往在AWS RDS上的HA機制是

當Master fail,背後的HA Server 會Switch上去

而GCP SQL 上的HA機制是

當Master fail,另一台HA Server 會跟你講

不會觸發，是的你沒看錯，HA Server不會甩你

然後官方文件跟你說觸發條件是

Failover is triggered when the zone where the master is located experiences an outage. If your master instance is experiencing issues not caused by a zone outage, a failover is not initiated.

不想貼google翻譯的話，小弟幫各位翻譯

如果你的Master在A區，Failover在B區，要A區掰掰了才會觸發

如果是A區你的Master掛了，請自求多福，看著B區那台Failover在笑你…

好吧，這就是問題，目前GCP給的回覆是無解，但會排入更新時程

請有使用SQL的朋友多保重…

另一個MA問題是，如果你的Master設定為 假設週一07:00-08:00 維護

你開了Failover與readonly的時候，你會發現這三台的MA Time

全部被鎖定跟Master相同

翻成白話文的意思，就是MA Time一到，你的DB全部會被重啟

搭配上述的HA機制….你應該保佑你公司的服務不是7*24小時…

或是程式端最好寫好一點…

三經半夜設定MA Time的，自求多福吧

這兩天卡了一個問題

Stackdriver Logging的功能在Basic版本上也是可以使用的

但因為後來發現舊LOG檔案太大

中間停止收集

然後清空，再重新啟動時發現

LOG的收集停止了

這時去確認agent的設定檔

找 pos_file的路徑

vi 這個設定檔，會看到目前取得的資料值

把這一行清空，再將agent重啟

LOG的收集就恢復正常了

本來以為是直接爬LOG連續的爬

沒想到還有存進度的值….



這個問題在AWS上遇過，但是AWS即使使用AMI啟動

也是會替換成IP開頭的hostname

而在GCP上則是會沿用上一次壓成的Image

例如我原本使用 web-01的hostname 壓成Image

在使用這個Image啟動後的server還會是web-01

造成做一個就要連線修改一次

這時拿出AWS的經驗，先找出如何呼叫instance的metadata

再使用腳本替換掉，寫了一隻shell
#!/bin/bash

name=`curl “http://metadata.google.internal/computeMetadata/v1/instance/name” -H “Metadata-Flavor: Google”`

hostnamectl set-hostname $name

systemctl restart rsyslog.service

再啟動instance時，在開機啟動碼中填入即可

如果有其他的指令需要開機啟動，可以寫成一隻boot.sh

在壓成image時放入，然後再啟動instance時

一樣使用開機啟動碼去執行

例如，開機替換hostname並拉取web 的設定檔等指令

我寫完shell之後搭配變數使用，可以下 web 就拉取web設定檔

設定 ap 就拉取 ap設定檔等

減少手動部署時間

最近新工作都是使用GCP在環境的建置上

由於摸熟了AWS的規則，切換過來發現GCP的不同

為了快速的新增這些設定，CLI的指令就比較好用

然後一行一行塞又覺得很慢，所以寫偷懶的shell

在專案內啟用google cloud shell

會出現一個shell的視窗

這時就可以執行CLI指令了，但一行一行下太麻煩

所以我用shell的方式執行

vi fw.sh

塞了兩行，如果需要大量產生FW規則的話

就以此類推，例如

#!/bin/bash

a=123.123.123.123
b=111.111.0.0/16
c=111.222.111.111
d=222.222.222.222

#設定aIP可以連接
#gcloud compute firewall-rules create allow-proxy-to-b –allow tcp:8080,tcp:8443 –source-ranges=$a –target-tags=allow-a

#開放snmp給c監控
gcloud compute firewall-rules create allow-snmp –allow udp:161 –source-ranges=$c

#開放健康檢查使用
gcloud compute firewall-rules create allow-ha-check –allow all –source-ranges=$b

#開放公司內部IP
gcloud compute firewall-rules create allow-office –allow all –source-ranges=$d –target-tags=office

之後離開

chmod +x fw.sh

sh fw.sh

就可以快速塞FW規則進GCP專案了