[フレーム]
はてなブックマークアプリ

サクサク読めて、
アプリ限定の機能も多数!

アプリで開く

気に入った記事をブックマーク

  • 気に入った記事を保存できます
    保存した記事の一覧は、はてなブックマークで確認・編集ができます
  • 記事を読んだ感想やメモを書き残せます
  • 非公開でブックマークすることもできます
適切な情報に変更

エントリーの編集

loading...

エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。

タイトルガイドライン

このページのオーナーなので以下のアクションを実行できます

タイトル、本文などの情報を
再取得することができます
コメントを非表示にできます コメント表示の設定

ブックマークしました

ここにツイート内容が記載されます https://b.hatena.ne.jp/URLはspanで囲んでください

Twitterで共有

ONにすると、次回以降このダイアログを飛ばしてTwitterに遷移します

462users がブックマーク コメント 16

ガイドラインをご確認の上、良識あるコメントにご協力ください

0 / 0
入力したタグを追加

現在プライベートモードです 設定を変更する

おすすめタグタグについて

よく使うタグ

Fluentdとログ収集のパターン - Go ahead!

ガイドラインをご確認の上、良識あるコメントにご協力ください

0 / 0
入力したタグを追加

現在プライベートモードです 設定を変更する

おすすめタグタグについて

よく使うタグ

はてなブックマーク

はてなブックマークで
関心をシェアしよう

みんなの興味と感想が集まることで
新しい発見や、深堀りがもっと楽しく

ユーザー登録

アカウントをお持ちの方はログインページ

記事へのコメント16

  • 注目コメント
  • 新着コメント
tagomoris
突っ込みどころを見付けて突っ込みエントリを書いてやろうと思いながら読んだが、見付からなかった。くやしい。

その他
nyamadori
"いきなりFluentdを使わないパターン.JavaScript SDKを提供している解析サービスやモバイル端末などでよく使われている.ログがユーザサイドで発生する場合にはログコレクタを仕込むことは出来ないので,基本このアプロー

その他
dirablue
fluentd

その他
ya--mada
At Most Once / At Least Once / Exactly Once 。"FluentdはデフォルトAt Most Once" "v0.12からはAt Least Onceもサポートする"

その他
ariteku
"Fluentdでも欠損/重複を防ぐための対策はいくつかあり ログにユニークIDを足して,HadoopなどのETLで重複を削除する"

その他
shiumachi
"かつてOSSでマスターノードを使い到達保証を目指したプロダクトがあったが"

その他
sh19910711
"KafkaやKinesisなど信頼性のあるキューを間に置けば,ログをそれなりの期間保持しつつ,Consumerを複数用意することでストリームを分岐できる"

その他
masa_matya
ログの厳密性が求められたり、サービスと密結合している場合は使わないほうが良い。

その他
kimutansk
Exactly Onceはやはりログ収集基盤側で保証しているものはそうありませんか。このあたりはやはりアプリケーション側で対応するしかないわけですかね。

その他
wyukawa
お、図がついた

その他
tokida
Fluentdとログ収集のパターン - | 「ログを集めて保存する」と言うのは簡単だけど,ログ収集の構成にはいくつか方法があり,勉強会などでちょくちょく聞かれるので,いくつかのパターンについて書く. 「俺はも...

その他
kenjiskywalker
"一切ログの欠損も重複も許せない,しかも確実に書き込む必要がある,というケース" これで使ってるところ結構ありそう

その他
indication
主にクライアントからの情報収集の方法について

その他
sonots
図ができて大変わかりやすくなった

その他
kasumani
Fluentdとログ収集のパターン 「ログを集めて保存する」と言うのは簡単だけど,ログ収集の構成にはいくつか方法があり,勉強会などでちょくちょく聞かれるので,いくつかのパターンについて書く(TODO: 簡単なイメージ図を

その他
tagomoris
tagomoris 突っ込みどころを見付けて突っ込みエントリを書いてやろうと思いながら読んだが、見付からなかった。くやしい。

2014年08月01日 リンク

その他
yass
" ネットワーク周りのややこしい問題をログコレクタに任せられ,Fluentdであればプラグインで容易にストリームを操作できるのがメリット."

その他

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

リンクを埋め込む

以下のコードをコピーしてサイトに埋め込むことができます

プレビュー
アプリのスクリーンショット
いまの話題をアプリでチェック!
  • バナー広告なし
  • ミュート機能あり
  • ダークモード搭載
アプリをダウンロード

関連記事

usersに達しました!

さんが1番目にブックマークした記事「Fluentdとログ収集...」が注目されています。

気持ちをシェアしよう

ツイートする

Fluentdとログ収集のパターン - Go ahead!

「ログを集めて保存する」と言うのは簡単だけど,ログ収集の構成にはいくつか方法があり,勉強会などで... 「ログを集めて保存する」と言うのは簡単だけど,ログ収集の構成にはいくつか方法があり,勉強会などでちょくちょく聞かれるので,いくつかのパターンについて書く. 「俺はもうバリバリログ収集やってるぜ!」という人は多分すでに知っていることが書かれているので,タブを閉じて良い. ここではログコレクタにFluentdを想定しているが,他のログ収集プロダクトにも適用出来るはず. ただ,Fluentdはタグベースのルーティングを持ち,単体でもキューのように動作させることが可能で,既存のものより複雑な問題を解決しようとしているので,少し工夫が必要かもしれない. Fluentdそのものについては公式ドキュメントや,Fluentdとはどのようなソフトウェアなのかを参考に. クライアントから直接保存する いきなりFluentdを使わないパターン.JavaScript SDKを提供している解析サービスやモバイル端末

ブックマークしたユーザー

  • funghi_seven2025年06月03日 funghi_seven
  • techtech05212023年11月16日 techtech0521
  • zetta19852018年02月19日 zetta1985
  • Makeneko2018年02月15日 Makeneko
  • nyamadori2017年09月19日 nyamadori
  • dirablue2017年09月04日 dirablue
  • ya--mada2017年08月31日 ya--mada
  • t2y-19792017年08月04日 t2y-1979
  • snomof2017年08月02日 snomof
  • hokkun_dayo2017年07月13日 hokkun_dayo
  • i1013302017年06月21日 i101330
  • eneko9abc2017年02月18日 eneko9abc
  • uuutee2017年01月20日 uuutee
  • dex1t2016年12月26日 dex1t
  • twdthyairi0632016年08月21日 twdthyairi063
  • taketo9572016年08月17日 taketo957
  • chess-news2016年08月14日 chess-news
  • Akineko2016年08月03日 Akineko
すべてのユーザーの
詳細を表示します

ブックマークしたすべてのユーザー

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

同時期にブックマークされた記事

いま人気の記事 - 企業メディア

企業メディアをもっと読む

はてなブックマーク

公式Twitter

はてなのサービス

Copyright © 2005-2025 Hatena. All Rights Reserved.
設定を変更しましたx

AltStyle によって変換されたページ (->オリジナル) /