Amazon CloudWatch

システム事業部の阿部です。 最近、色々な案件でAWSのサービスを使うことも増えてきました。 本番障害や、テスト環境での不具合発生時にはログを検出して原因究明を行う作業の中で、CloudWatchを用いたログ抽出を行う機会も増えてきました。（私だけではないはず） 簡単ではありますが、CloudWatchのログ検索で気を付けたい/便利な検索方法を備忘録として残したいと思います。 必ず"（ダブルクォーテーション）で囲むこと AND検索はスペースでOK OR検索は?を活用 除外検索には-"ハイフン"を使おう 必ず"（ダブルクォーテーション）で囲むこと 何気なく使っていると、検索したい文字で当たり前に検…

はじめに タイトル通りの事をします。 構成としてはこのような形。 詳細は後述しますが、データ整形用にAWS Lambda（以下Lambda）が必要となります。 似たような構成を試したい方の参考となるよう、色々とメモ書きを残します。 なお、説明は上記データの流れに沿って行います。実際の構築順序とは異なることをご了承ください。構築するのであればS3から順に遡って行き、最後にAthena作るのが良いです。 目次 はじめに 目次 各種設定 Amazon CloudWatch サブスクリプションフィルタの設定 Amazon Kinesis Data Firehose Lambdaが必要な理由 AWS L…

クラウド環境上でシステムを運用する際に、システムの安定性やサービスの状態を把握することは非常に重要なポイントです。特に大規模なクラウドサービスを利用している場合、障害が発生した際には原因や影響範囲を確認し、迅速に対応しなければなりません。 また、潜在的な問題を未然に防ぐために、計画的なメンテナンスの実施も必要です。そこで役立つのが AWS Health Dashboard です。AWS Health Dashboard は AWS のサービス全体にわたるリアルタイムのステータス情報を提供し、システムに影響を与える可能性のある障害やメンテナンス情報を確認することができます。 本記事では AWS …

みなさんこんにちは。マネージドサービス部MSS課の塩野（正）です。 今年は紅葉が遅くなるという話もちらほらありますが、秋が来たような冬が来たような天気が続いているので、体調管理には気を付けたいところです。 さてさて、AWSのマネージドサービスでネットワーク監視ができるのってご存じですか。「あー、Syntheticsを使ったURL監視の話でしょ？」と思った方もいらっしゃると思いますが、今回はそちらだけではありません。CloudWatchのネットワーク監視についてわかりやすく解説していきたいと思います！ はじめに 「AWSでWebサービスを運用しているけど、ユーザーから『サイトが重い』って言われて…

はじめに Amazon CloudWatch Network Monitorは、2023年12月22日に一般提供開始されたサービスであり、AWS～オンプレミス間のネットワークがモニタリング可能となります。 自らのハイブリッドネットワーキング業務から導き出した、公式ドキュメントにも載っていないNetwork Monitorのユースケースおよび仕様についてご紹介します。 本記事でもサービス概要は触れていますが、基本的なサービス仕様は公式ドキュメントなどでご確認頂けますと幸いです。 docs.aws.amazon.com はじめに Network Monitorとは Network Monitorユ…

こんにちは。虎の穴ラボでFantiaの開発を担当している Y.K です。 虎の穴ラボは 2024年11月2日 (土) ~ 11月17日 (日) にかけて開催される技術書典17にゴールドスポンサーとして協賛を行います！ また、新刊「虎の穴ラボの薄い本 vol.8」の頒布に加え、2024年11月3日 (日)に行われるオフライン開催ではスポンサーブースとして出展を行います！！ 情報が盛り沢山のため順番にご紹介できればと思います。 技術書典17 まず、今回協賛させていただいた技術書典17は下記の日程で開催されます。 オフライン開催 期間: 2024年11月3日 (日) 11:00 ~ 17:00 会場…

こんにちは、やまぐちです。 概要 構成のちょっとした説明 早速やってみる レプリケーションテンプレートの設定 起動設定 起動後設定 CloudWatch Agent のインストール設定 MGN Agent のインストールと実行 テストインスタンスの起動 CloudWatch Agent がインストールされているか確認する まとめ 概要 今回は、AWS Application Migration Service (以降 MGN) の起動後設定を利用して、移行後のインスタンスに SSM Agent と CloudWatch Agent がインストールされるまでを確認したいと思います。 ※今回は、テ…

こんにちは。ディベロップメントサービス3課の千本松です。 少し前に、AWS Lambda（以下、Lambda）の再帰ループ検出がAmazon S3 （以下、S3）に対応しました。 AWS初心者にも使いやすいLambdaですが、意図しない無限ループで冷や汗をかいた経験がある方も多いのではないでしょうか。 今回のアップデートにより、S3を含む無限ループを自動的に検出して停止できるようになったので、実際に無限ループを発生させて動作を確認していきます。 aws.amazon.com Lambdaの再帰ループ検出とは 検出されるループの例 実際にやってみた①：S3のみでループを構成 Lambdaの準備 …

はじめに こんにちは。クックパッド SRE の @mozamimy です。先日この開発者ブログで One Experience プロジェクトについての紹介がありました。 このプロジェクトにおいて、わたしは日本版からグローバル版への移行の際の全般的なパフォーマンス周りについて取り組んでいました。 パフォーマンスと一言でいっても、その中にはネットワークやアプリケーションレイヤでのレイテンシ、MySQL などのミドルウェアでのレイテンシなど、様々な要因が関わってきます。それらの改善において、何よりも重要なのはまず観測することです。移行において取り組んだ様々な作業のうち、ここでは CloudWatch…

AWS Configは、AWSリソースの設定変更を追跡、評価、監査を行うためのサービスです。 このサービスを利用すると、リソースの設定がどのように変更されたかを詳細に把握することができ、セキュリティ、コンプライアンスの維持に役立ちます。 例えば、EC2インスタンスにアタッチされたセキュリティグループの設定が変更された場合にその変更履歴を記録し、誰がいつ変更を加えたのかを追跡することができます。 本記事では、AWSの「AWS Config」について記載します。 主な機能と利点 リソースの変更履歴の記録 設定の評価 リソースの関係性の可視化 AWS Configがサポートしているリソース AWS …

AWSにおいてリソースの識別子として使われるAmazonリソースネーム（ARN）というものがあります。私は、ARNには英数字と一部記号しか使えないものとばかり思っていました。 それでは以下の画像をご覧ください： なんと、ARNに日本語どころか絵文字まで入っているではありませんか！ これはAWS Step Functionsのステートマシンです。ステートマシン名に利用できる文字種はドキュメントに以下の通り記載されており、日本語文字などの非ASCII文字を使えるのはバグではなく、意図して許可されているようです： Names of state machines, executions, and ac…

はじめに FEモダナイゼーションチームのユウです。 8月6日、8月7日に開催された2日間の「AWS JumpStart 2024」に参加してきました。この記事は、その参加レポートです。 AWS jumpStart2024とは？ AWS JumpStartは、新卒を含むAWS初学者のエンジニアを対象とした、クラウドネイティブなテックリード人材を育成するための実践的な研修プログラムです。事前学習用動画と2日間の集中的なワークショップを通して、自走できる状態までシステムアーキテクチャ設計やAWSの実践的な知識を獲得できる場として知られています。 AWS JumpStartの対象者 AWSについて聞い…

いつも業務では Locust を使っていて、最近 Twitter やはてブで k6 をよく見るので n 番煎じですが勉強がてら入門してみます。 k6.io grafana.com k6 のインストール ふだん macOS を利用しているので brew でインストールします。すんなりインストールできました。k6 は Go で書かれているのでバイナリでのインストールも可能です。 brew install k6 github.com スクリプトの作成 Get started に沿って進めていきます。k6 new すると script.js が生成されました。コメントが含まれていましたが省略しています…

マネージドサービス部 佐竹です。 2024年9月にサポートの終了等が発表された AWS サービスをまとめました。都合2024年10月初旬にアナウンスのあったサービスも含まれております。 はじめに サポートの終了等が発表された AWS サービス AWS RoboMaker 2025年9月10日に終了 AWS App Mesh 2026年9月30日に終了 AWS WAF Classic 2025年9月30日に終了 WafCharm に関する補足 Amazon FSx File Gateway 新規顧客の受け入れを停止 Amazon Monitron 新規顧客の受け入れを停止 Amazon Look…