fluentdのバッチ版のようなツールで、データを一括転送したい時に利用します。
ref: GitHub - embulk/embulk: Embulk: Pluggable Bulk Data Loader.
自前で実装すると面倒な
といった部分をサポートしてくれている上、
ため、プラグインが豊富なので大抵のユースケースをカバーできます。
なので自前でデータ転送をスクリプトやら簡易コードで書いたりすることはできるけれど、後々の運用を考えるとEmbulkを導入した方がいいケースは多々あると思います。
続きを読むGo言語に限らずではありますが
で悩むことは多いと思います。
今回はそれの１つの方針を紹介します。
Goのエラーは基本的に例外を扱わず、常にハンドリングする前提です。なので
user, err := findUser(id) if err != nil { return User{}, err }
みたいなコードが大量に生まれます。
一方でその関数を呼び出した側ではそれがどんな種類のエラーなのか分かりません。
NotFoundだったりDB自体のエラーだったりしますが、それを外層のレイヤ（HTTPレスポンスを返すハンドラなど）でハンドリングするのは辛いです。
レイヤ毎のエラー内容を知る必要が出てくるため余計な依存が生まれてしまいますし、どこにどんなエラーが有るか把握するのが難しくなって考慮漏れも出てきます。
Goにはsingleflightという重複した関数呼び出しを抑制する仕組みがあります。
例えばキャッシュが切れた時にOriginへのアクセスが並行して走ってしまう(Cache Stampede)ケースでサーバやDBがスローダウンする問題がありますが、こういった時にsingleflightを挟むと解決できます。
通常だと10回呼び出す処理を、singleflightで抑制してみます。
続きを読む少し前にリリースされたDatadog Syntheticsですが、いつの間にかTLS証明書の期限チェックもできるようになったので紹介です。
外形監視ができるDatadogの機能です。
後ほど設定にでてきますが、世界7箇所からチェックが可能です。
ref: Simplified synthetic monitoring | Datadog
また、まだベータ版ですがDatadog SLOとも連携できます。
続きを読む先日AWSの発表で
と、コンテナの依存関係が制御できると発表がありました。
何が嬉しいかというと、サイドカー系コンテナに依存している場合アプリケーション側でそのコンテナの起動を待つ処理が必要だったのが、不要になるという点です。
こちらで以前デメリットとして指摘した点ですが、AWS側でサポートしてくれました！
まだ新しい機能なのでドキュメントも日本語対応していないため、確認する際は英語ドキュメントを参照してください。
Task Definition Parameters - Amazon Elastic Container Service
続きを読むこちらで
という対応をしました。
当時は試行錯誤の連続でしたが対応から１年程経ち、ある程度設計もfixされてきたので知見をまとめます。
