<match *.log>
  type google_cloud_storage_out
  service_account_json_key_path /etc/td-agent/client_secrets.json
  bucket_id log-hangar
  path activity/%Y_%m_%d/${hostname}_%H%M_${unique}
  unique_strategy timestamp
  unique_format %S
  format json
  compress gzip

  buffer_type memory
  buffer_chunk_limit 100m
</match>

service_account_json_key_path 名の通り、jsonキーのパス
bucket_id => bucketは現状は作成済みでなければならない
path => GCS上のファイルパス。unique_strategyを設定する場合、${unique}をパスに含まなければならない。含まない場合はローテートされるまえにバッファのフラッシュが２回起きると上書きされてしまう
unique_strategy => [increment, timestamp, chunk_id]から選択。${unique}をどう置換するかの実装を選ぶ。
- increment => 0, 1, 2, ...とカウンタが使われる
- timestamp => フォーマットに従って、バッファフラッシュ時のタイムスタンプに置換
- chunk_id => バッファのchunkのユニークIDに置換する
unique_format => timestampの場合に使われる。
format => デフォルトのfileアウトと同じ実装

再起動

よしなに.テスト時はバッファのmemory容量を10kとか低い値にするとテストしやすかった

参考にしたもの

fluent-plugin-google-cloud-storage
- PRもいくつか送っているが、そもそもこれを参考に書きなおしている
google-api-ruby-client
- sampleがなかなか参考になる。同じようにサンプルを並べていける。0.8と0.9は互換性がないらしい。サービスアカウントの認証がなかったのでちょっとハマった
gemを公開するまでの手順
- 数コマンドでクソースをパブリッシュできちゃう怖さ。
- 検索: fluent-plugin-redshiftとかたくさんある。GCS関連はまだ上述のものと私が書いたものの２つだけ。

展望

ドキュメント
ユニットテスト
ストレステスト
エラーハンドリング
コードスタイルに合わせる
英語を良くする

まとめ

fluentdがプラガブルなので、素人でもとりあえず動くプラグインはかけた。fluentdすごい

2016-01-06

slackと仲良くなる

まず、公式ドキュメントよめ

get.slack.help

公式読まない人は何をやっても使いこなせないでしょう。と自分にいいきかせ読んでみたら、とても良かったので使えそうなやつをカテゴリ別にメモしていきます。

Hipchat → Slack移行なう

もともとHipchatを使っていて、先月くらいから移行中。複数のチームを共存できるのイイ。個人(家用)と会社用でつかっています。

個人のアカウントはIFTTT連携して、Google App Scriptから前日に翌日は「なんのゴミの日なのか？」をSlackに通知するために使ったり。

本格的につかうならショートカットとスニペットは覚えなくては

Hipchat使ってた時には⌘ + tと⌘ + [, ⌘ + ]くらいしか使ってなかったのですが、公式に載ってるショートカットがなさすぎる。

それに対し、slackはチャンネル切り替えなどの基本動作だけで15個。スバラ!

設定

Display Options

✅ show times with 24-hour clock → 24時間表記(個人的にこっちがすきなので)

Advanced Options

✅ Whtn typing code with ```, Enter should not send the message → コードを入力しようとした時はEnterでメッセージを送らない。(対となる```で閉じたあとにEnterで送信は有効化される)
✅ List public and privte channels separately → 公開と非公開のチャンネルのリストを分ける

ショートカット

Slack keyboard shortcuts

Chromeとショートカットが同じ or 似ていて覚えやすいショートカット

コンテキストスイッチが少ないのでありがたい。

Chrome	Shortcut	Slack
拡大/縮小/元の縮尺	`⌘ + +` `⌘ + -` `⌘ + 0`	拡大縮小元の縮尺
ブラウザフォワード/バック	`⌘ + ]` `⌘ + [`	１つ先/前に見ていたチャンネル
カレントタブのリロード	`⌘ + R`	カレントアカウントのリロード
N番目のタブを開く	`⌘ + [1-9]`	N番目のチームを開く
次/前のタブを開く	`⌘ + shift + ]` `⌘ + shift + [`	次/前のチームを開く
形式に合わせてペースト	`⌘ + shift + v`	スニペットペースト
設定を開く	`⌘ + ,`	設定を開く

あまり使わないショートカットがあるにせよ、これだけで覚えやすい。

⌘ + ,に限っては当然のごとく。

その他に積極的に使うショートカット

Shortcut	動作
`Alt + ↑` `Alt + ↓`	上/下のチャンネルを開く
`Shift + Alt + ↑` `Shift + Alt + ↓`	未読がある上/下のチャンネルを開く
`Esc`	開いているチャンネルを既読にする
`⌘ + f`	開いてるチャンネルをターゲットに検索する
`⌘ + /`	ショートカットチートシート表示
`Alt + messageをクリック`	そこから未読扱いにする。後で読む的な使い方
`⌘ + Shift + m`	自分へのメンションのリストを開く

`/`コマンド

Using slash commands

コマンド	動作
`/leave`	チャンネルから退出
`/keys`	ショートカットチートシート表示
`/who`	チャンネルにいる人をリスト表示
`/search query`	検索

searchのクエリについて

Searching in Slack

どこのだれからか

in:[channel|user]
from:[user|me]

メッセージに含む

has:[link|star|:絵文字:]

いつ

befor:
after:
on:
during:

時間指定に使えるのは

today
yesterday
week
month
year
YYYY-MM-DD

ここは少し、わかっていないところ。

まとめると覚えるのでよい。

2016-01-05

Vagrant公式ドキュメントを見るときに気をつけたい

vagrant ansible

VagrantのprovisionerにAnsible

Vagrantにはprovisionerが幾つか、用意されています。

メジャーなのはchef-clientやchef-soloかと思います。vagrant-omunibusというプラグインがあるので、実行環境を整えやすいですし。

また、簡単なプロビジョニングであればshellで済みます。

一方で、自分はよくAnsibleを使っています。最近Ansible熱があるというだけです笑

OSXの環境を整えるのもAnsibleでやったりしています。

話は戻りまして、Vagrant上にDockerのプロビジョニング環境を作るときにもprovisionerにAnsibleを使いました。

blog.matsuokah.jp

この時、公式ドキュメントを見ていて、設定項目がすくなくないか？と思ったのですがVagrantにはAnsibleとAnsible localの２種類があるため、共通のオプションは別ページとのこと。

Optionのリストだけを見ていて、説明をすっ飛ばしたので気づかなかった。。。

Ansibleの共通オプションはCommon Ansible Options - Provisioning | Vagrant by HashiCorpを見るべし。また、気をつけたいのがこのページはprovisionerのカラムからは直接飛べないので、一度Ansibleのページを開き、OPTIONSの説明の

This section lists the specific options for the Ansible (remote) provisioner. In addition to the options listed below, this provisioner supports the common options for both Ansible provisioners.

この部分のリンクを開かねばなりません。

副産物

説明がないものと思い込み、Vagrantのgithubのソースを読んでおりました。

github.com

この部分を読めば、オプションが書いてあります。また、他のprovisionerも同様です。

DocsへはPRできる模様

VagrantのDocsの右下にEdit this pageというリンクが有り、クリックするとgithub上で対応するページのドキュメントのソースに飛びます。きっと、PRを受け入れてくれるのでしょう。

https://github.com/mitchellh/vagrant/tree/master/website/docs

個人的にこういうスタンスになっている事自体が、すごいな〜と思いました。

2016-01-03

壁美人をつかったという話

使ってみた買ったもの

「C++初心者ならビルドはBazelでラクしちゃいましょう」の主役となったBazelや「100円でオフィスのデスクをスッキリさせたという報告。」でまな板たて使うというアイディアを教えてくれた、会社の先輩に年末に

「壁美人いいよ。特に賃貸だったら」

と言われ、我が家でも導入してみた。

壁美人とは

一言で言うと、画鋲や釘など大きな穴を開けずに壁にフックをつけたり、テレビを設置したりできるというもの。

画鋲でも穴がひどいと、壁紙張り替えになって敷金なくなっちゃう場合があるので。。。

パッケージがこれ

f:id:matsuokah:20160102161355j:plain

ホチキスでとめる

まさかのホチキス。家にあるので、工具も特別なものが不要なところがとてもありがたい。

試しにつけてみる

f:id:matsuokah:20160102163751p:plain

拡大してみる

f:id:matsuokah:20160102163749p:plain

比較用に画鋲も刺してみたけど、画鋲のあなは目立つ

ホチキス針は専用針

完全に憶測なのですが、ホチキスの芯はステンレス。なぜなら、文房具屋で売ってるものは鉄なのでさびやすいです。

サビで壁が赤くならないようになってるんですね〜

見た目が不格好じゃない？

自分もそう思いましたが、隠せました！

f:id:matsuokah:20160102164849p:plain

もっとリース飾りたいと言われたので、追加購入します

Genius Barとは

予約する

診断する

DFUモードによる復元

フロー

まとめ

ソース

gem

モチベーション

Google Cloud Storage (以下、GCS)にとりあえずログを置く

一応既存のものはあったが

使い方

インストール

Service Accountを登録し、認証情報(.json)をよしなに配置

td-agent.confを編集

再起動