log shipper とは何か

log shipper とは、log のソース近くで動作する軽量なエージェントで、ファイルを tail したりストリームを読み取ったりして、その行を中央ストアへ送信します。通常は障害時にバッファリングし、host や service 名などのメタデータを付与し、転送前に軽量なパースを適用できます。これはロギング pipeline の収集エッジにあたります。

なぜ重要か

多数のホストに散在する log をまとめて検索するのは不可能です。shipper はそれらを確実に集約し、そのバッファリングによって backend が一時的に到達不能でも行が失われないようにします。

関連ガイド