- 1. 流れ
- 2. 手順
- 2.1. 1. Site24x7でIDを表示(30秒)
- 2.2. Snowflakeの外部関数からLambda関数を実行する
- 2.3. AWS Lambdaで現在日時(処理年月日時)を取得したい
- 2.4. Python & AWS(Lambda/API Gateway)によるLINE Bot作成
- 2.5. CodeCommitへpushと同時にLambda関数に反映 前編
- 2.6. サーバレスとAWS Lambdaについてまとめてみた
- 2.7. cdk-nag(python)で特定ルールを対象外(サプレス)とする方法
- 2.8. Brefを使いPHPのコードをLabmdaにデプロイする
- 2.9. 【AWS】作成から一定期間経過したSnapshotを自動削除する仕組みを導入してみた
- 2.10. AWS CDK初心者が爆速でLambda Layerにpythonライブラリを入れた裏技
- 2.11. 【初心者】【Lambda】ログについて確認し原因をしっかり追究してみた
- 2.12. 【Lambda】SAMではまったこと【Node.js】
- 2.13. 【C++】 Lambda関数のimmutableとは?
- 2.14. Python メモ:for文で動的にlambda式を使う
- 2.15. Github Actionsでarm64のパッケージを作る
- 2.16. LambdaでWebページを返す
cdkでLambda Layerを作成するときは、zip化しないでOK
# はじめに
レイヤーを使うLambdaを、cdk(python)で作成したいことってありますよね。
そのとき、ちょっとはまったので共有します。# 内容
cdkでの文法などは
https://medium.com/geekculture/deploying-aws-lambda-layers-with-python-8b15e24bdad2
ここなど参考にどうぞ。問題は、cdkで作成したディレクトリ直下に配置するlayerを格納するディレクトリ(ここではlambda-layersとします)についてです。
一般的にLambdaのレイヤーには、zipで固めたファイルをインポートしますが、**zip化はcdkがやってくれる**のでやる必要はありません!というよりむしろ、**やってはいけません**!!
(これをやってしまい、エラーが発生していました・・・)lambda-layersにいる状態で
“`bash
$ mkdir python
$ pip install -t python requests
“`
これでOKです。安心して、cdk deployしましょう(裏でcdk君
3分でAWS Lambda Function URLをSAM使ってデプロイする
## これは何
[SAM(Serverless Application Model)](https://aws.amazon.com/jp/serverless/sam/) を使って関数URLを設定したLambdaをデプロイします。
関数URLだけ使いたい(APIGatewayは使いたくない)というケースでテンプレの参考になればと思いました。
内容は比較的薄いです。経緯
10000000年程前にAWS Lambda Function URLが提供されました。[記事](https://aws.amazon.com/jp/blogs/news/announcing-aws-lambda-function-urls-built-in-https-endpoints-for-single-function-microservices/)
これはLambdaをHTTPで直接起動できる機能です。今まではAPI Gatewayを経由しないといけなかったのですがLambda単体でできるようになって便利になりました。こ
[AWS.5] DynamoDB プログラミング概要
# 1. 概要
AWS SDKは、アプリケーションから DynamoDBへアクセスするためのインタフェースを三つ用意しています。
* 低レベルインタフェース
* ドキュメントインタフェース
* 高レベルインタフェース
プログラミング言語によって利用できるインタフェースは異なりますが、.NET では3種すべてを利用可能です。
:::note info
AWS DynamoDB プログラミングのオンラインマニュアルの図では「高レベルインタフェース(High-Level Interface)」と記述されていますが、解説上は「オブジェクト永続性インタフェース」とされています。
:::
:::note info
AWS DynamoDB プログラミングのオンラインマニュアルでは、「ドキュメントインタフェース」と「オブジェクト永続性AWS Lambda から自社 API サーバーへのリクエストに Amazon Cognito による認証機構を実装する
AWS Lambda (以降、Lambda) から自社 API サーバー (以降、API サーバー) へのリクエストに Amazon Cognito (以降、Cognito) による認証を実装した際の話をまとめました。
Cognito の OAuth 2.0 サービスのうち、Client Credentials Grant を使用することで Lambda を認証できるようにしています。これは M2M (Machine to Machine) 認証と呼ばれるものを Cognito で実装した例です。
Cognito を使用する例については情報が少ない気がしたので、ワード検索時の一助になればと思い記事にしました。## この実装に至った背景
今回の最終的な要件は、Lambda から API サーバーへのリクエストに Cognito による M2M 認証機構を実装することです。上記要件に至った背景を記載します。
長めなので具体的な実装だけ知りたい方は [実装内容](#実装内容) までスクロールしてください。### リリースフローの自動化を推進
現在弊社では開発及び運用で必要になEC2, RDS, LambdaなどAWSのサービスを監視して一画面で全ステータスをチェックする
SaaSのSite24x7で実現する方法を共有します。
以下はサインアップ後の手順です。流れ
- Site24x7でIDを表示(30秒)
- AWS IAMでロールを作成(2分)
- Site24x7にAWSを連携(1分~)
- しきい値を設定(1分~)
手順
1. Site24x7でIDを表示(30秒)
ホーム画面で「監視の追加」をクリックします。
Snowflakeの外部関数からLambda関数を実行する
## <はじめに>
**API統合**を使うことで、Snowflakeの**外部関数**からAWSのLambda関数を呼び出すことができます。SnowflakeからAPI Gatewayを経由してLambda関数を呼び出し、関数の実行結果をSnowflakeに返します。
今後のSnowflakeの運用を踏まえ、API統合によるLambda関数の実行を検証してみました。
今回の検証では、LambdaのPythonプログラムからAmazon Comprehendを呼び出し、外部関数の引数に対して感情分析させました。## <アーキテクチャ>
Snowflakeの外部関数でLambda関数を呼び出し、Comprehendの感情分析を行う処理フローは以下①~⑧になります。
①SnowflakeでSQLから**外部関数**を実行する。
②外部関数から**API Gateway**が呼び出され、関数の引数が連携される。
③API Gatewayが**Lambda関数**を呼び出す。
④Lambda関数がPythonのコードを実行し、**Comprehend**に引数を渡す。
⑤CompreAWS Lambdaで現在日時(処理年月日時)を取得したい
# 経緯
Lambdaで処理年月日時を取得する際につまづいたので記述する。# datetimeモジュールのオブジェクト
– datetime :日付と時刻を扱う
– date:日付を扱う
– time:時刻を扱う
– timedelta:時間差を扱う# 間違った例 1
~~~python:Python
from datetime import datetime
# 処理年月日を取得
processingDate = datetime.datetime.today()
# エラー文
AttributeError: type object ‘datetime.datetime’ has no attribute ‘datetime’
~~~
そもそも
– from — import ~~~文を理解してなかった
– モジュールとオブジェクトの概念もよくわかってなかったため適当に書いてた(笑)
※from datetime import datetimeと書いたら ___メソッドの先頭は省略できる。(むしろ省略しないと怒られる)___
_Python & AWS(Lambda/API Gateway)によるLINE Bot作成
# Python & AWS(Lambda/API Gateway)によるLINE Bot作成
LINEは日本人口の70~80%が利用しており、生活に必要不可欠な通信インフラと言っても差し支えないほど、若い世代から高齢の世代まで日常的に利用している。その中でサービスを展開している企業やお店が、LINE公式アカウントを通じて、顧客とコミュニケーションを可能にするサービスがMessaging APIである。今回は、LINE Messaging APIを用いて、LINE公式アカウントとAWS上に作成したWebアプリと連携することで、LINE Botを作成する方法を紹介する。## 1. LINE Developersにログインして、Messaging API用のチャネルを作成する
下記LINE Developersのサイトのコンソールにアクセスして、自身のLINEアカウントなどでログインする。https://developers.line.biz/ja/
次に、コンソール画面からLINEアプリ作成のため、Messaging API用のチャネルを作成する。
1. Create a
CodeCommitへpushと同時にLambda関数に反映 前編
## はじめに
初めまして、株式会社ジールの山崎 です。
AWSを使ったデータ分析基盤関係の業務に従事しております。
その中で得たノウハウをQiitaをとおして発信していきたいと思います。今回の記事は
CodeCommitでバージョン管理しているLambda関数のソースコードを、CodeCommit・Lambda・S3を使用して、CodeCommitへpushすると同時にその内容をLambda関数へ反映する方法を紹介する記事の前半パートです。前半パートの内容は
前準備とCodeCommitへpushした情報から更新種別を仕分けをする処理(言語:python)までとなっております。
***
**因みに**
CodeCommit・CodePipeline・CodeBuild(通称:Code三兄弟)を用いた方法は下記サイトが参考になります。
[【aws】CodeCommitにpushするだけでlambda関数をデプロイするパイプラインを作る【CodePipeline】](https://ishidalog.com/?p=475)
***
## 利用環境
– Windows 1サーバレスとAWS Lambdaについてまとめてみた
# はじめに
このブログはサーバレスとAWS Lambaについて自身が学習した内容のまとめ記事となります。
自身が理解しやすいように平易な表現を使って構成しているため、著しく正確性に欠ける情報がありましたらご指摘いただけると筆者は大変喜びます。# サーバレスについて
釈迦に説法かもですが、Lambdaを理解する前にサーバレスについて大きくまとめました。
サーバレスという言葉で調べると「Google Cloud Functions」や「Azure Functions」など各社類似したサービスや説明がありますが、本記事では「AWSにおける」を枕詞として読み進めてください。## サーバレスとは
アプリ開発者がサーバーを意識せずにアプリを開発・運用できることを指します。
サーバレスでは、サーバーの構築・保守・負荷対策までをサーバーレスの提供会社が担います。実際にはサーバ自体は存在するため、サーバレスという言葉は「アプリ開発者」目線に立った表現という理解でいるとわかりやすいと思います。## 従来通りサーバを所有すると
通常アプリの開発・運用にはサーバを用意し、必要に応じたOSやcdk-nag(python)で特定ルールを対象外(サプレス)とする方法
# はじめに
皆様、AWS CDK(以後、cdk)はご利用されているでしょうか。
AWS公式が出しているIaCということでリソースのアップデートも早く、便利ですよね。
そのcdkのチェックツールとして**cdk-nag**というツールがあります。cdkで作成するリソースがAWSのベストプラクティスなどのルールに則っているかをチェックしてくれるツールです。
(例:S3のバケットはSSEの暗号化がされていること)https://aws.amazon.com/jp/blogs/news/manage-application-security-and-compliance-with-the-aws-cloud-development-kit-and-cdk-nag/
このcdk-nagはcdk deployコマンドを打つと自動でチェックしてくれますが、どうしても**特定のルールはチェック外にしたい**ということがあると思います。そんなとき、python版のcdk-nagだとどのように記載すればよいかを調査しました。
# やりたいこと
– python版のcdk-nagで、IAM4のルーBrefを使いPHPのコードをLabmdaにデプロイする
# はじめに
はじめまして!
ジョージと申します。
先日PHPで書かれた業務委託先のサブシステムを既存サーバーからLambdaに移行する作業を行いました。
その時にPHPでLambdaにデプロイしている記事が少ないように感じたため、今回の記事を書こうと思いました。# 前提
今回は[bref](https://bref.sh/docs/)というライブラリを使用するため以下の公式ページの手順を事前に行う
– [イントール手順公式ドキュメント](https://bref.sh/docs/installation.html)
– サーバーレスをインストールする
– AWSのアクセスキーを作成する
– Brefをインストールする# 初期化
次のコマンドを打ってファイルを作成する
“`cmd
vendor/bin/bref init
“`以下のように聞かれるため今回は「0」をコマンドで打つ
“`cmd
What kind of lambda do you want to create? (you will be able to add more functions【AWS】作成から一定期間経過したSnapshotを自動削除する仕組みを導入してみた
# 前提
メンテナンス時など、バックアップを取る際にスナップショットを手動で取得している。# 課題
メンテナンスが問題なく完了した後、不必要になったスナップショットの削除を行う運用ルールがなく、無駄なコストが発生していた。# 目的
スナップショット作成から一定期間経過したものは削除する仕組みをLambdaに関数登録し、トリガーとしてCloudWatch Eventsで日時実行する。
原則AMIに登録されているスナップショットの削除は行わない。# ソース
~~~powershell:auto_delete_snapshot.py
import boto3
from datetime import datetime, timedelta
import dateutil.tz########## 変数定義 ##########
# AWSアカウントID
acountId = “xxxxxxxxxx”
# 何日前以前を削除対象とするか指定 default=7
days = 7########## 削除処理 ##########
def lambda_handler(evenAWS CDK初心者が爆速でLambda Layerにpythonライブラリを入れた裏技
# はじめに
AWS CDKについて初心者用にまとめた記事はこちらhttps://qiita.com/besmero628/items/dbab08287a8bc2d1893a
# 概要
最近AWSCDKを使用してpythonベースのlambdaを書いたのですが、pandasやらboto3やら使用する必要がありました。もちろん素のpythonには入っていないライブラリなのでlambdaにパッケージごと入れる必要があるのですが、いちいちzipで固めて入れるのはめんどくさい。。。
AWSCDKをpythonで書き進めている記事もネットには少なくどうしたものかと思っていたのですが、色々調べていくうちに先人の知恵を借りられそうだったのでメモしておきます。
# 手順
:::note info
cdk languageはpythonを選択しています。
:::
## ① lambdaの作成
手始めにlambdaを作成します。
“`python:stack.py
from aws_cdk import(
aws_lambda as _lambda
Stack
)class
【初心者】【Lambda】ログについて確認し原因をしっかり追究してみた
# はじめに
どうもAWS初心者です。
今回Lambdaについて学習を行いました。
S3を利用して画像のリサイズを行う事を目標に関数を作成しました。
S3バケットを2つ用意し1つ目のバケットに画像をアップロードした際に、2つ目のバケットにリサイズした画像を上げるといった動きです。
作成しテストまでは上手くいったのですが、実際に適当な画像を上げた際に動作しませんでした。
その事について記事にしてみようかと思います。# 原因の予測
テストで使用したファイルと同じ拡張子のファイルを利用しました。
2つのファイルの違いはサイズであり、そこに原因があると思い、サイズの小さいファイルをアップロードしてみたら成功しました。
なのでファイルが大きいことが原因だと考えました。# 原因の解明
クラウドウォッチのログを確認することで原因の解明をしようと思いました。
しかしログを見てもエラーはありませんでした。
エラーとしては出ていなかったのですが1つ1つよく見ていく中で原因が分かりました。
![スクリーンショット 2022-10-29 21.36.01.png](https://qiita-imag【Lambda】SAMではまったこと【Node.js】
SAMを触ってみてはまったことなどをメモします。
## Roleのエラー 1
`sam init`でHello Worldプロジェクトを作成し、
`sam build` と `sam deploy`がうまくいくところまで確認できた後、
template.yamlにRoleを追加したらエラーになりました。“`yaml
Resources:
HelloWorldFunction:
Type: AWS::Serverless::Function
Properties:
Role: “arn:aws:iam::xxxxxxxxxx:role/xxxxxxxxxx” # ここを追加
CodeUri: hello-world/
Handler: app.lambdaHandler
Runtime: nodejs16.x
Timeout: 120
Architectures:
“`buildはできましたがdeployでエラーです。
“`
Waiting for changeset to b【C++】 Lambda関数のimmutableとは?
# Lambda関数のImmutableについて
公式ドキュメントでLambda関数はdefaultで引数がImmutable(不変)と書いてあったがよく分からなかったので、実際に試してみました。* []の中の値がキャプチャと呼ばれていて、以下のようなCopyキャプチャは変数を変更不可能(Const)らしいですね。
“`
int x = 100;
auto hoge = [x]() {
x = 3; // compilation error
};
hoge();
“`* ()の中の値がパラメーターと呼ばれていて、普通の関数同様に変数xに値を代入できます。
“`
auto hoge = [](int x) {
x = 3;
};
int num = 100;
hoge(num);
“`* 普通の関数同様にconstをつければちゃんとerrorを吐いてくれます。
“`
auto hoge = [](const int x) {
x = 3; //compPython メモ:for文で動的にlambda式を使う
# はじめに
メンテナンスツール(スクリプト)を数々作成したため、いちいちスクリプトファイルを選んで実行するのは面倒でした。そこで、TkinterによるSelect Launcherを作り、選択実行できるようにしました。
ボタンを作るたびに、その数分tk.Button宣言を記述していては、長々としたコードになってしまうので、lambda式を使用してコード量を減らします。
この時のlambda式の記述の仕方をメモに残しておきます。## lambda式
Python 公式ドキュメント
https://docs.python.org/ja/3/reference/expressions.html
> 6.14. ラムダ (lambda)
“`
lambda_expr ::= “lambda” [parameter_list] “:” expression
“`
>ラムダ式 (ラムダ形式とも呼ばれます) は無名関数を作成するのに使います。 式 lambda parameters: expression は関数オブジェクトになります。 この無名オブジェクトは以下に定義されているGithub Actionsでarm64のパッケージを作る
# 背景・目的
+ Graviton2プロセッサを搭載したAWS Lambdaだと、[パフォーマンス上のメリットがある](https://aws.amazon.com/jp/blogs/news/aws-lambda-functions-powered-by-aws-graviton2-processor-run-your-functions-on-arm-and-get-up-to-34-better-price-performance/)
+ numpyなど、プラットフォーム専用にビルドが必要なライブラリを使う場合に、arm64用のnumpyを用意する必要があった
+ これを解決するために、結構苦戦したので、備忘しておく# 問題
+ Github Actionsだとamd64(x86_64)のCPUアーキテクチャのマシンで実行される
+ Github Actions上でarm64のdocker イメージを実行すると、`exec /usr/bin/bash: exec format error`のようなエラーが発生する
+ arm64のためのパッケージを作れなかった・・LambdaでWebページを返す
# はじめに
LambdaとDynamoDBを使用すればIOT用のグラフページを作成できるのではと思ったのでその備忘録。
この記事では図中の「グラフページ表示」部分を実施。
前回:https://qiita.com/aikawa_YO/items/79e8ef768b03e3f73315![Lambda-DB.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/195542/82933046-6bbe-6525-d7a2-d8d23116a3ec.png)
# HTMLの中身
imgタグのsrcには前回のグラフ画像を返してくれるLambda関数URLを指定してください。“`python
import jsondef lambda_handler(event, context):
return {
‘statusCode’: 200,
‘isBase64Encoded’: False,
“headers”: {“Content-Type”:関連する記事
OTHERカテゴリの最新記事
-
- 2024.09.19
JavaScript関連のことを調べてみた
-
- 2024.09.19
JAVA関連のことを調べてみた
-
- 2024.09.19
iOS関連のことを調べてみた
-
- 2024.09.19
Rails関連のことを調べてみた
-
- 2024.09.19
Lambda関連のことを調べてみた
-
- 2024.09.19
Python関連のことを調べてみた