- 1. AWS Lambda LayersへZenpyをデプロイしてみる
- 2. lambda_handlerの引数eventの中身を知る方法
- 3. API Gateway 開発者に読んでほしい、意味がわかると便利な実行ログ
- 4. 【AWS Lambda】推しを広めるTwitterBotをほぼ無料で運用した
- 5. Apex UpでNode.js × expressをAWS Lambda, API Gatewayに速攻デプロイしてみる
- 6. AWS Chaliceの開発環境をdockerで構築し、超高速でサーバーレスアプリケーションをデプロイしてみた
- 7. 白いマスクから怪人マスクへ、AWSでサーバレスLINE写真処理アプリの開発記
- 8. AWSSAAに落ちた時の悔しさを書く
- 9. WebアプリへのLINEログイン実装で少しハマったところ
- 10. 初めてのAWS Lambda〜自作関数を動かす
- 11. Java Lambda で巨大 JSON を扱う
- 12. StreamAPIについてまとめてみた
- 13. AWS SAM CLIの設定切替
- 14. ALB + Lambdaでお手軽3分ベーシック認証
- 15. AWS Lambdaの書き方まとめ
- 16. Java Lambda の入出力型を試してみた〜Stream 編〜
- 17. Java Lambda の入出力型を試してみた〜POJO 編〜
- 18. Java Lambda の入出力型を試してみた〜Map 編〜
- 19. メール便忘れ防止ボタンをAWS IoT ボタンで作ってみた
- 20. CDK で API Gateway Mock 統合と Lambda Authorizer を作る
AWS Lambda LayersへZenpyをデプロイしてみる
[Zendesk API](https://develop.zendesk.com/hc/en-us/categories/360000003388)をPythonから簡単に呼び出せるようにするラッパー[Zenpy](http://docs.facetoe.com.au/zenpy.html#)をAWS Lambda Layerに入れてみます。
# なぜLambda Layerを使うのか?
AWS Lambdaへプログラムをデプロイする際に関連するライブラリ群も一緒に入れる必要があります。そのため、複雑なプログラムになるとデプロイパッケージが肥大化しがちでした。
ライブラリやカスタムランタイム、その他の依存関係をまとめたZIPパッケージです。– AWS公式ドキュメント: [AWS Lambda レイヤー](https://docs.aws.amazon.com/ja_jp/lambda/latest/dg/configuration-layers.html)
# この記事で行うこと
AWS Lambda Layerへ`Zenpy`ライブラリをデプロイする。# 事前準備
*
lambda_handlerの引数eventの中身を知る方法
何かのイベントにフックしてlambdaを実行する際、eventの中身がわからくて困ったとき用メモ
“`
import json
import urllib.request
def post_slack(message):
send_data = {
“text”: message,
}
send_text = json.dumps(send_data)
request = urllib.request.Request(
‘slackのwebhookURL’,
data = send_text.encode(‘utf-8’),
method = “POST”
)
with urllib.request.urlopen(request) as response:
response_body = response.read().decode(‘utf-8’)def lambda_handler(event, context):
message =
API Gateway 開発者に読んでほしい、意味がわかると便利な実行ログ
API Gateway (REST API) では、開発やトラシューに役立つ実行ログ (Execution Logs) を出力することができます。
AWS サポートに問い合わせる際にも、この実行ログがあるとスムーズです。実行ログは、ステージから設定できます。
![スクリーンショット 2020-10-06 16.07.07.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/651869/1b6b93fc-aef5-04d6-db91-f2dc16371b81.png)設定後、API Gateway にリクエストを投げると、CloudWatch Logs に出力されます。
ロググループ名は、API-Gateway-Execution-Logs_\/\<ステージ名> です。
![スクリーンショット 2020-10-07 17.50.32.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/651869/475c6
【AWS Lambda】推しを広めるTwitterBotをほぼ無料で運用した
# 作ったモノ
## 谷崎早耶?さややん?画像bot
谷崎早耶ちゃん(さややん)の画像・動画をツイートするボットを趣味で作りました。
2019年の5月に公開して、1.5年くらい運用しています。![スクリーンショット 2020-10-06 11.18.35.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/255210/2b0b8ef5-ad11-abf2-a65c-cff437efdea8.png)
可愛いと思ったらリツイートお願いします!#谷崎早耶 Apex UpでNode.js × expressをAWS Lambda, API Gatewayに速攻デプロイしてみる
# はじめに
Node.js × expressのAPIのデプロイ先としてLambdaを使おうと思ったのですが
手取り早くデプロイして試したかったので、Apex Upを使ってみた。今回はその時の備忘録# Upとは
APIや静的ウェブサイトをLambda × API Gatewayに`up`コマンドでデプロイしてくれるツールです。# 使ってみる
Upのインストール
“`
curl -sf https://up.apex.sh/install | sh
“`プロジェクト作成
“`bash
mkdir node-up
cd node-up
npm init
entry point: (index.js) app.js # 自分はapp.jsに変更
“`expressのインストール
“`bash
npm install express
touch app.js
touch up.json # Upの設定ファイル
“`app.js
“`javascript
const express = require(‘express’)
const app = eAWS Chaliceの開発環境をdockerで構築し、超高速でサーバーレスアプリケーションをデプロイしてみた
# AWS Chaliceの開発環境をdockerで構築し、超高速でサーバーレスアプリケーションをデプロイしてみた
ChaliceもLambdaも初めてですが、
初めてのサーバーレスアプリケーションに興奮したので書きますソースコード [naokit-dev/python3_chalice_on_docker](https://github.com/naokit-dev/python3_chalice_on_docker)
## Chalice (チャリス?)
AWSが提供するPythonフレームワーク
Lambdaを使ったサーバーレスアプリケーションを簡単にデプロイできる
[Documentation — AWS Chalice](https://aws.github.io/chalice/index.html)## 環境
– macOS Catalina
– VS Code
– Docker Desktop“`
docker –version
Docker version 19.03.13, build 4484c46d9d
docker-compose –
白いマスクから怪人マスクへ、AWSでサーバレスLINE写真処理アプリの開発記
# 0.はじめに
初めまして、中国から参りましたポンです。
今は野村総合研究所で働いている新人エンジニアです。
日本語がまだ下手ですから、もし変な日本語が入りましたらご容赦ください。
どうぞよろしくお願いいたします。コロナ時期の旅行写真には、白いマスクが多すぎで、
もう我慢できないですよね?
ちょうど今は新人開発研修があって、これを研修の課題にしました。
これを解決するため、写真中の白いマスクを怪人マスクに変換するアプリケーションを開発しました。
「できるだけ作業量を減らす」というコンセプトに基づいて、
AWSの色々なサービスを活用してサーバレスLINE写真処理アプリとして開発しました。
**マスクだらけの写真にうんざりした方**も、**サーバレスに興味ある方**も、
ぜひ、この開発記をお楽しみください。# 1.なぜこのアプリを開発?
AWSSAAに落ちた時の悔しさを書く
## はじめに
##### 自分のスキル感
+ 実務4ヶ月程度(メインはバックエンド)
+ AWSたまに触るぐらい(超主要なサービスは理解していた)よーするに**AWSあんまり知らない駆け出しエンジニア**ということになります。
#####資格を取りたいと思った理由は以下の2つ
+ 昨今AWSがインフラに使われるのは主流になってきていて自分も体系的な知識をつけたいと思っていたから。
+ 資格を持っていると**AWSに関してこれぐらいの知識ありますよ〜**という明確な基準ができるから。一口に「AWS触ったことがある」と言ってもどのサービスなのか、どれぐらいの知識があるのかなど、線引きがしづらいと思っていた。
そこで資格の勉強をしてみようと思いました。## 勉強したこと
勉強期間は**1ヶ月ちょっと**です。
基本的に勉強したのは下記の2つのみです[この1冊で合格!AWS認定ソリューションアーキテクトアソシエイト テキスト&問題集](https://www.amazon.co.jp/%E3%81%93%E3%81%AE1%E5%86%8A%E3%81%A7
WebアプリへのLINEログイン実装で少しハマったところ
WebサイトへLambda+Node.js+APIGateWayを含めて、LINEログイン機能を実装しようとした。
参考にしたサイトが
**「WebアプリにLINEログイン機能を組み込む」**
[URL] http://xp-cloud.jp/blog/2019/11/27/6116/非常に分かり易くて参考になったが、一部どうしても動かない(LINE認証画面が出てこない)為、エラーメッセージを眺めてみると、「stateが無い」といったことを言われているので、あらためて、LINE公式を確認すると
“`
“queryStringParameters”: {
“error”: “invalid_request”,
“error_description”: “‘state’ is not specified.”
},
“`stateというパラメータは「必須」ということだった。
![20201006-1.JPG](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/509691/bef57cfc-93b9
初めてのAWS Lambda〜自作関数を動かす
# 前回の記事
[初めてのAWS Lambda〜Hello World](https://qiita.com/johnny1204/items/ef37459d96d74b0e62df)# 今回の目標
Lambdaで自作関数を作成して、Slackに通知を送る# 前準備
Slack通知を行いたいワークスペースにIncoming Webhookを追加し、Webhook URLを取得する
![slack_webhook.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/236230/a6808192-8800-1ba3-a43e-ca3cd6b6bb20.png)# 関数の作成
## AWSコンソール
今回は関数を自作するので、「一から作成」を選択し、関数名を入力。
言語はお好きなものを選択。今回はNode.jsにしてみた![lambda.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/236230/0a788c58
Java Lambda で巨大 JSON を扱う
InputStream を Lambda の入力にする記事を書きました。
Java Lambda の入出力型を試してみた〜Stream 編〜
https://qiita.com/kazfuku/items/6f0f55ffa3a88d76cfaaInputStream を使用した場合のメリットとして、巨大な JSON を扱えると書いてます。そこで、実際のところどうなのかを検証してみました。
## テストデータ
まず、巨大 JSON を用意しました。name と text を持った object が 6000 個含まれるデータで、Lambda の入力サイズ上限 6MB に近い、約 5.9MB です。“`Json
{
“data”:[
{
“name”:”vrZPwIw3T7″,”text”:”Ku7aQqW3WzUeiRdXnNB26iVElWdOUj8mQhvHksvN1sMmQ2fT3M8navvbTJuspda2q0bY3FWvsDoguE33tTNtoxuiHjdkUIHmylIezYGitmhJ2bbgcHhcHPzGr4eg3Ger9Ei
StreamAPIについてまとめてみた
## StreamAPIとは
> Stream APIは名前の通り、ストリーム(Stream)という流れてくるデータやイベントを処理するためのAPI群です。
> Java SE8で追加された
> StreamはListやMapなどのデータ集合をもとに生成し、0回以上の中間操作と、1回の終端操作を実行することで結果を得る。## StreamAPIの使い方
ざっくりと概要を掴んだ上で実際にソースを見てstreamを使用した処理と使用していない処理を比べて見ます。
サンプルとしてListを加工して一件づつ処理を行うコードを記載します。
※ラムダ式については詳しく記載しません。詳しくはこちらの記事を参照してください
[Javaラムダ式についてまとめてみた](https://qiita.com/yqxxnaxr1109/items/4045a7925340088bd7e3)“`java:streamなし
ListintegerList = Arrays.asList(1, 2, 3, 4, 5);
for (Integer i : integerList)
AWS SAM CLIの設定切替
# 経緯
新規プロダクトサービスの一環で、AWS SAMでServerlessを使ったんですが、今後の開発環境どうしよう?となりまして。
基本的なテストはローカルでいいにしてもステージング的な環境は欲しいし、複数のリリース先ってどうやって管理するん?
sam deployの設定をお手軽に切り替える、そんな機能ないの?
ドキュメントやhelp(当時sam –version 1.2.0)見てもそれっぽいものは見つからなかったんですが、AWS SAMのissue探してみたらあっさりありまして。https://github.com/aws/aws-sam-cli/issues/1615
Release 1.3.0 – Support for Multi Config
https://github.com/aws/aws-sam-cli/releases/tag/v1.3.0**ついこないだリリースされてた。**
※気づいた時点でちょうど1週間前しかしまだあんまり情報ないようなので、とりあえずざっくり情報書いておきます。
あんまり詳しいわけではないので、間違ってたらごめんね!(
ALB + Lambdaでお手軽3分ベーシック認証
## 概要
ALBのリスナールールの変更とLambdaの追加でベーシック認証を行います。
ベーシック認証の処理の流れとしては以下となります。
– ALBで`Authorization`ヘッダーを検証する
– 認証OKであれば、正規のターゲットグループに転送する
– 認証NGであれば、Lambdaをターゲットとするターゲットグループに転送する
– Lambdaではベーシック認証を要求するレスポンスを返す(なお、ALBからのヘルスチェックに対しては`200`を返すようにします)## 1. Lambda関数の作成
まず、ALBが存在するリージョンで、Lambda関数を作成します。
– `一から作成`を選択
– 関数名を入力(今回は`BasicAuth`とします)
– ランタイムは`Node.js 12.x`を選択
– 実行ロールは`基本的な Lambda アクセス権限で新しいロールを作成`を選択
– VPCは特に何も選択しない
– `関数の作成`ボタンを押下![Lambda関数の作成](https://qiita-image-store.s3.ap-northeast-1.
AWS Lambdaの書き方まとめ
AWS Lambda使って○○がしたいときってありますよね。
そんなときLambdaやプログラミング言語のスキルが低い私はけっこう苦戦したので、攻略方法を自分のためにも世のためにもまとめます。
なおこの記事で扱う言語はPythonのみです。
# 基本
## 何をしたいのかを整理するまずLambdaで何をどうしたいのかを整理します。
(他のサービスで実現できないかを考えておくことが前提)以下、例を挙げていきます。
– **RDSのスナップショットを2時間おきに取りたい**
自動スナップショットは1日1回しかバックアップを取得してくれないため作成する。必要なことは、RDSインスタンスの一覧を取得して、タグのついた対象のRDSインスタンス名を取得、スナップショットを実行する。もしくはRDS名を指定してスナップショットを実行する。
– **EBSをスナップショットしたら別リージョンにコピーしたい**
EBSのスナップショットはAmazon Data Lifecycle Manager (DLM)を用いれば自動化できるが、リージョンコピーまではできないため作成する。必要なこ
Java Lambda の入出力型を試してみた〜Stream 編〜
Java Lambda の入出力の型には、いろんなパターンが使えます。
* Map 方式
* POJO 方式
* InputStream/OutputStream 方式公式ドキュメントでは [ここ](https://docs.aws.amazon.com/ja_jp/lambda/latest/dg/java-handler.html#java-handler-types) に書かれています。
[POJO 編](https://qiita.com/kazfuku/items/095b4fb9c37638f57457) では、POJO クラスを使用して JSON を扱う方法を紹介しました。
最後に、InputStream/OutputStream を使った Stream 編です。
前回の POJO 編に手を加えて、Jackson を使って自前で Parse、Generate するコードになります。
“`Java
import com.amazonaws.services.lambda.runtime.Context;
import com.amazonaws.servic
Java Lambda の入出力型を試してみた〜POJO 編〜
Java Lambda の入出力の型には、いろんなパターンが使えます。
* Map 方式
* POJO 方式
* InputStream/OutputStream 方式公式ドキュメントでは [ここ](https://docs.aws.amazon.com/ja_jp/lambda/latest/dg/java-handler.html#java-handler-types) に書かれています。
[Map 編](https://qiita.com/kazfuku/items/6b2e9131eb5e6e175922) では、Map 型を使用して JSON を扱う方法を紹介しました。
Map 方式のコードをみてみると、Object 型から String/Integer/Long 型などへのキャストが多数現れます。
“`Java
public class MapFunction implements RequestHandler
Java Lambda の入出力型を試してみた〜Map 編〜
Java Lambda の入出力の型には、いろんなパターンが使えます。
* Map 方式
* POJO 方式
* InputStream/OutputStream 方式公式ドキュメントでは [ここ](https://docs.aws.amazon.com/ja_jp/lambda/latest/dg/java-handler.html#java-handler-types) に書かれています。
まずは、Map 方式から。
Lambda 関数に渡す入力 JSON はこれです。
“`Json
{
“name”: “orange juice”,
“price”: 1000,
“releaseDate”: 1601606387939,
“rate”: 4.5,
“rawMaterial”: [“orange”, “fragrance”],
“size”: {
“height”: 10,
“width”: 20,
“depth”: 30
}
}
“`以下のコードでは、この入
メール便忘れ防止ボタンをAWS IoT ボタンで作ってみた
#若手ならではのメール便担当
僕の会社では若手の仕事として「メール便」というものがあります。
会社からの送付・受取を毎週9時・11時・15時に行うというもので、これがまた結構責任重大。
__ヤッベェェェ忘れてた郵送物を送り損ねた!__なんてことがあったら普通に先輩に迷惑が掛かります。僕自身も数回メール便を忘れた実績があり、リマインダーをつけてもアラームを消してそのまま忘れることも(ひどい)。
どうにかメール便忘れを防ぐ仕組みを作りたいと思い、AWS IoTボタンを使って実装してみました。
こいつです#完成デモ
##メール便処理したらボタンを押す
送付したい郵便物をためておくメール便ボックスみたいなものがあり、そこに設置します。
メール便担当はちゃんとメール便を処理したよ!というときにボタンをポチーと押す、という
CDK で API Gateway Mock 統合と Lambda Authorizer を作る
CDK(TypeScript) で API Gateway(REST API) の Mock 統合と、Lambda Authorizer を作ってみました。
ソースコード全体はこちらです。
https://github.com/kazfuku/apigateway-java-lambda-authorizer/blob/master/lib/apigateway-java-lambda-authorizer-stack.ts## Mock 統合
Mock 統合はこの部分です。“`TypeScript
const mockIntegration = new apigateway.MockIntegration({
requestTemplates: {
‘application/json’: ‘{“statusCode”: 200}’
},
integrationResponses: [
{
statusCode: ‘200’,
responseTemplates: {
‘application/json’: