omuronの備忘録

個人的な備忘録

「JAWS-UG朝会 #29」 #jawsug_asa 受講メモ

JAWS-UG朝会 #29

jawsug-asa.connpass.com

久しぶりの早起きです。

セッション

セッション② AWS Service Namespace を流行らせたい

クラスメソッド株式会社 千葉幸宏(チバユキ)さん

AWS サービスあるある

  • その1:多い
    • 223個...
  • その2:AWS or Amazon ?
    • AWS は他のサービスと使うもの
    • Amazon は単独で使うもの
  • その3:何をもってサービス?
    • マネコン?製品ページ?ドキュメント?

AWS Service Namespace

  • 基準が明確
    • リファレンスで定義
    • AWS / Amazon もつかない
    • 数は301個で多い
  • サービス名前空間
    • ARN に登場する aws::iam とか
    • IAM JSON ポリシーの Action / Condition
    • サービスプレフィックス ec2:CreateVpc
    • AWS CLI のコマンド名になっていることが多い aws sts ...

チバユキさん、話し方も非常に聞きやすく上手でブログも面白い!

セッション① 数年間、レイクハウスを設計運用してみた

野口達也さん

データレイク

  • データ分析基盤:データを一元的に保管され、データ加工ツールや分析ツール(AI/BI)が統合されている基盤
  • レークハウスアーキテクチャ:データレイク+DWH
    • (Raw Data) S3 -> EMR -> Redshift -> RDS (Processed Data)
    • Redshift + S3 や Lake Formation

よくある課題

  • 利用されない
    • ヒアリングして、機能要件/非機能要件を明らかにする
    • 運用後も活用候補の人にヒアリング、並走支援
  • 統合基盤のはずがサイロ化
    • 解はない
    • Redshift + S3 の基本を推奨
      • Redshift は高機能なのでサイロ化を防ぎやすい

データレイク構築中なので勉強になりました。

LT① Amazon Interactive Video Service(IVS)を触ってみた

クラスメソッド株式会社 あしさん

LT② AWSアカウントの共通設定をCDK ConstructHubで公開しました

小笠原寛明さん / 富松広太さん

  • タイトルに公開とありますが間に合いませんでした
  • Construct Hub:CDK の Package を公開検索できるサービス
    • 例:cdk-events-notify とか公開されている
  • 公開条件
    • 公開していいライセンス:Apache, MIT...
    • npm のタグに cdk
    • npm に公開
    • jsii でコンパイル
  • projen
    • 設定系のファイルを一括作成
    • github actions の設定を自動生成
    • PR のタイトルを特定文字列にする必要あり

LT③ CloudFormationのテンプレートをdrawioファイルから作ってみた

文沢健人さん

所感

興味のある話題が多い会でした。
データレイク頑張って作って、そのあたりの話をできるようになりたい。
AWS アーキテクチャ図は、必ず作っており、Draw.io 使ってるので、変換できるようになると非常に便利そうと思いました。