Graylog2サーバーへのログの送信

Graylog2サーバーをセットアップしたばかりで、メインサーバーからgraylogサーバーにすべてのログを送信したいと考えています。メインサーバーのログを有効にし、に追加*.* @logs.example.com:1337してログをグレーログサーバーに送信しています/etc/rsyslog.conf。

必要なのは、Graylog2にすべてのApacheログ、システムログ（SSHログイン、拒否されたログインの場合）、および監視する必要があるその他のログを収集させることです。

Apacheログについては、Railsログも必要です。私のサイトは、に位置している/srv/www/、その後、構造があるsitename.com/public_htmlとsitename.com/logs。サーバーには多くのサイトがあり、すべてのエラーを表示し、それらからいくつかの素晴らしいグラフを作成する簡単な方法が欲しいので、Graylog2を使用したい理由は...

あるフォルダのログ内のログファイルaccess.logとerror.log。

Railsのログはにありsitename.com/public_html/logます。これにはが含まれますproduction.log。

これは古いですが、低/中トラフィックサイトに使用するこのメソッドを書くと思っていました（トラフィックの多いサイトでうまく機能するかどうかわかりません）：

Apacheではgraylog2_access、アクセスログをGELF形式にフォーマットするというCustomLog形式を定義し、ncを介してログデータをパイプすることによりGraylog2を介してログを送信し、GELFメッセージをGraylog2の入力に送信します。

作成するカスタム形式は次のとおりです（人間が読める形式）：

{ 
 "version": "1.1",
 "host": "%V",
 "short_message": "%r",
 "timestamp": %{%s}t,
 "level": 6,
 "_user_agent": "%{User-Agent}i",
 "_source_ip": "%a",
 "_duration_usec": %D,
 "_duration_sec": %T,
 "_request_size_byte": %O,
 "_http_status": %s,
 "_http_request_path": "%U",
 "_http_request": "%U%q",
 "_http_method": "%m",
 "_http_referer": "%{Referer}i"
}

Apache構成の場合、コピー/貼り付けバージョンは次のとおりです。

LogFormat "{ \"version\": \"1.1\", \"host\": \"%V\", \"short_message\": \"%r\", \"timestamp\": %{%s}t, \"level\": 6, \"_user_agent\": \"%{User-Agent}i\", \"_source_ip\": \"%a\", \"_duration_usec\": %D, \"_duration_sec\": %T, \"_request_size_byte\": %O, \"_http_status\": %s, \"_http_request_path\": \"%U\", \"_http_request\": \"%U%q\", \"_http_method\": \"%m\", \"_http_referer\": \"%{Referer}i\" }" graylog2_access

次に、ホスト構成で：

CustomLog "|nc -u graylogserver 12201" graylog2_access

次の簡単なコマンドを使用して、ログファイルをgraylog2サーバーに送信することもできます。

tail -F -q $yourlogfile |   while read -r line ; do   echo "<7> $hostnamesendingthelog $line" | nc -w 1 -u $graylogserver 514;   done;

主にテスト目的でこれを使用して、ログ形式がgraylog2で簡単にクエリできるようになっているかどうかを判断します。実稼働環境では、rsyslogまたはsyslog-ngをセットアップする必要はありません。

たぶん、railsログファイルを追跡して、何が起こるかを確認できます。

Graylog2は、標準syslogとGraylog拡張ログ形式（別名GELF）の2つの形式のログのみを受け入れます。ディスク上の任意のログには、ログを消費し、それをユーザーにとって便利な形式に変換するためのサードパーティプロセスが必要になります。

Logstashを見てください。ほとんどの人は、ElasticSearchを使用してログファイルのインデックスを作成するツールと考えていますが、ディスク上の一連のファイルを追跡し、Graylogなどのログコンポーネントに送信できる汎用の「ログルーター」も含みます。

ここからapache2gelfスクリプトを使用できます。