- 1. 画像の動的リサイズ方法を検討した
- 2. ent. の使い方についてかんたんにまとめてみた
- 3. Goにおける「俺的」クリーンアーキテクチャ構成
- 4. 【OpenSSL】localhost を https 化する 自己証明書の作成方法
- 5. 反省会～その①
- 6. GoのORM「Gen」を使ってみた
- 7. 写経から初の練習問題へ
- 8. [Go] VSCodeでジャンプできなかった時にやったことのメモ
- 9. Golangの環境構築って、いつの間にか変更されていたんですね
- 10. gRPCを使用した例
- 11. 【GO】ある構造体のポイント型に定義されたメソッドは、nilポインタからでも実行できる話
- 12. S3・SQS・Lambdaで自動マスタリングアプリを作る
- 13. Go の net/http(とecho) で HTTP リクエストを見てみる
- 14. HackTheBox Gobox WriteUp
- 15. Goで重複削除したスライスを作成する
- 16. Go + Amazon Bedrock Claude 3 使ってみる
- 17. 【Go言語】指定したパスがファイルなのかディレクトリなのかを判別する関数
- 18. 【Go, AWS】低予算APIサーバー構築を最初から最後まで【Golang, Lambda, DynamoDB, API Gateway, Cognito】
- 19. ログファイルが邪魔でテストが実行できない
- 20. A Tour of GoでExercise: rot13Readerをやってみた
画像の動的リサイズ方法を検討した
# 結論
https://www.libvips.org/
速度・省リソースの観点ではこれが良い。
# 背景
10年もののシステムを運用しています。
画像を扱うサービスなのですが、画像ファイルが相当数になって、ファイルサイズの合計が peta byte にとどこうとしています。
ここまでくると、Storageの費用がかなり目立ちます。画像の表示速度が遅くなることはビジネス要件として許容しにくく、ストレージを低速なものに変えにくいです。
一番量が多い画像の種別は大きさ違いで同じものを扱っている画像でした。
（メインのドメインの画像を大きさごとに物理的に３種類）なので、
その種別の画像は１枚のみ管理して他の大きさの画像を削除して１種類のみ管理することで、ストレージのディスクサイズを減らすことで費用削減効果が期待できました。
(細かい話は割愛)１種類のみ管理するために他の大きさの画像は動的に生成することでそれが実現できます。
(他にも色々対策ありそうですが、細かい話は割愛)つまり、
画像の大きさを動的に生成する必要がありました。動的リサイズ: https://e
ent. の使い方についてかんたんにまとめてみた
# はじめに
APIサーバを作成するにあたって、「`ent.`がモダンで使いやすそうだな」と思い学習した内容を書いていきます。
[Quick Introduction](https://entgo.io/ja/docs/getting-started/)から、極力コードを省いた、`ent.`の使用フローについて、`Atlas`によるマイグレーションついてわからなかったことを書きました。
# 使い方の流れ
1. Goモジュールの作成
2. スキーマの作成・定義
3. アセットの生成
4. スキーマのマイグレーション## Goモジュールの作成
“`bash
go mod init example
“`## スキーマの作成・定義
以下のコマンドで、Userスキーマを自動生成できる。
複数生成する場合も、引数を追加することで可能。
“`bash
go run -mod=mod entgo.io/ent/cmd/ent new User
“``entdemo/ent/schema/` 配下に `user.go` ファイルが作成される。
内部の`User.Fi
Goにおける「俺的」クリーンアーキテクチャ構成
# はじめに
こんにちは、mizukoです！親の顔より見たGoのクリーンアーキテクチャ構成について、自分はこうしているよ！というのをアウトプットしていきます！
Goのディレクトリ構成に悩んでいる人の参考になりましたら幸いです！# 構成
まず全体像です。“`
.
├── .devcontainer
├── .env
├── .gitignore
├── Makefile
├── compose.yml
├── config
│ ├── config.go
├── docker
│ ├── golang
│ │ └── Dockerfile
│ └── postgres
│ ├── Dockerfile
│ └── pg_hba.conf
├── domain
│ ├── model
│ │ ├── category.go
│ │ ├── memo.go
│ │ └── user.go
│ └── repository
│ ├── category
│ │ └── cate
【OpenSSL】localhost を https 化する 自己証明書の作成方法
自己証明書（通称オレオレ証明書）の作成方法です :smiley:
## 1. CA用の秘密鍵を生成
このコマンドは、2048ビットのRSA秘密鍵を生成し、`localCA.key` というファイルに保存します。“`bash
$ openssl genrsa -out localCA.key 2048
“`
– openssl genrsa: RSA 秘密鍵を生成するコマンド
– -out: 生成した秘密鍵の出力ファイル名 (例: localCA.key)
– 2048: 秘密鍵の長さ (ビット単位) (例: 2048ビット)## 2. 秘密鍵と識別情報から証明書署名要求 (CSR) の作成
このコマンドは、以下の情報を設定した CSR を生成し、`localCA.csr` というファイルに保存します。“`bash
$ openssl req -batch -new -key localCA.key -out localCA.csr \
-subj “/C=jp/ST=Osaka/L=Osaka-shi/O=\”Example Inc\”/OU=Foo/CN=
反省会～その①
プログラミングをして、ハイ終わり。
では勿体ないと思っています。
学校の勉強同様、何が間違ったのか、何で間違ったのか検証しようと思います。—
お題はこちら。https://qiita.com/NothingMyself37/items/27b87c6e2b9e88055673
—
> – importするのは1つだけだから、()で括らなくて良い
> – 1日24時間を定義していない
> – 定数と変数の違いを、きちんと理解して使い分けしていない
> – 単位を表示させていない
> – 当然ながら、計算式が合っていないので不正解では、1つずつ検証していきましょう。
—
> – importするのは1つだけだから、()で括らなくて良い
こちらについては、初めてコメントを頂きました。
ありがとうございます。“`
その通りではあるんですが、常にカッコを付けるのは今後インポート対象が増えるときに出る差分が少ないというメリットはあるので一長一短かなと思います。
“`言われて、たしかに、と思いました。
模範解答=絶対解ではない、ということを教えてくださり
GoのORM「Gen」を使ってみた
# はじめに
こんにちは、mizukoです！みんさんはGoのORMは何を使っていますか？
私はしばらくGormを使っていたのですが、結局難しい表現をしようとするとガッツリSQLを書く必要があり、「あれ？ORMとは…？」となる事が多々あります。
そもそもGo自体はORMを使わず標準パッケージを使う派閥がいるらしいですし、私自身が元々NodeやLaravel、Rails出身で、ORMならできて当たり前と思ってしまっている節があるのも原因かと思いますが…😢そこで今回はGenを試しに使ってみた所感を記載していきたいと思います。
# Genとは
[Gen](https://gorm.io/gen/index.html)とは、Gormプロジェクトの一部として開発されており、データベーススキーマからGoのコードを自動生成することで、型安全で高性能なデータアクセスを実現してくれるORMです。
あくまでGormプロジェクトの一部であり、**GormでできないことはGenでもできない**と思って頂いて良いと思います。# 導入
[ドキュメント](https://gorm.io/gen/
写経から初の練習問題へ
Golangの勉強を始めるにあたって、昨年友人から頂いた書籍を使っていきます。
https://amzn.asia/d/4NaB7sH
「入門Goプログラミング」という書籍です。
火星探査機を構築しながら学べるので、夢がありますね(・ω・`)基本的には、写経をしていきます。
そして、練習問題を解いていきます。—
昨日解いた問題は、下記の通りです。
>「マラカンドラ(火星の別名)」に28日で到着するには、どれだけの速度(km/時)で宇宙船を飛ばせば良いのかを調べるプログラムを書きましょう。距離は、56,000,000km と仮定します。
私の解答は、こちら。
“`
package mainimport (
“fmt”
)func main() {
const distance = 56000000
var speed = distance / 28
fmt.Println(speed)
}
“`模範解答は、こちら。
“`
package mainimport “fmt”
func main() {
const hoursPerDay
[Go] VSCodeでジャンプできなかった時にやったことのメモ
# はじめに
時々、「別のリポジトリであれば定義元や利用先にコードジャンプできるのに、このリポジトリだとなぜかできない。」みたいなことがありました。
Goの拡張やインストール済みだし、最新だし、なぜ？という感じでした。# 対処したこと
VSCodeが使用するGoバージョンを変えました。なぜか問題のあるリポジトリでは、スクショのようにtoolchainのものになっていたため、対象バージョンを選択してダウンロードして、それを使うようにしたら、ジャンプできるようになりました！
Golangの環境構築って、いつの間にか変更されていたんですね
はじめまして。
さっとんと申します(・ω・`)
Golangは、2019年～2020年にかけて、ほんの少し齧ったことがある程度のレベルです。
なので、**初心者よりたちが悪い**です。—
当時と比較しながら、記事を執筆していこうと思います。
当時のGolangの環境構築は、
“`
1. 公式サイトからインストーラをダウンロード
2. インストーラを実行
3. システムの詳細設定から、環境変数を追加
4. VScodeをインストール
5. インストーラを実行
6. Golangの拡張機能を追加
“`
をしていました。—
先日、久々にGolangを勉強しようと思い環境構築をしました。
手順は、**ほぼ**上記の通りでした。
ほぼと記載したのは、3.の工程が不要で、自動で追加されていたからでした。試しにHello Worldを表示させようとデバッグしたら、VScodeでエラーが表示されました。
見たことのないエラーって、焦りますよね(;´･ω･)—
自力で解決することはできず、Google先生に尋ねました。
すると、まず下記のサイトを教えてくれました。
gRPCを使用した例
## はじめに
gRPCをGo言語で使用する基本的な例を提供します。
例では、簡単なgRPCサービスを定義し、そのサービスを実装したサーバーとクライアントを作成します。## 一般的な流れ
### Step 1: Protocol Buffers (protobuf) の定義まず、`.proto` ファイルを作成して、gRPCサービスとメッセージ形式を定義します。`helloworld.proto` という名前のファイルを作成し、以下の内容を記述します。
“`proto
syntax = “proto3”;package helloworld;
// The greeting service definition.
service Greeter {
// Sends a greeting
rpc SayHello (HelloRequest) returns (HelloReply) {}
}// The request message containing the user’s name.
message HelloRequest {
string
【GO】ある構造体のポイント型に定義されたメソッドは、nilポインタからでも実行できる話
# 結論
“`go
type Dog struct {
Name string
}func (d *Dog) Speak() {
fmt.Printf(“Woof”)
}func main() {
var nilPoint *Dog
nilPoint.Speak()
}
“`
上記のコード動くと思いますか？
.
.
.
タイトルがネタバレになってる感すごいですが、動きます。
ちゃんと`Woof`が出力されます。
ポインタレシーバに対するメソッド呼び出しは、nilポインタに対してでも正常に行えます。
あまり業務で使う機会はないと思いますが、初めて知った時結構びっくりしたので備忘録として残しておきます。
# 余談
当然ですが、構造体のプロパティを参照している場合panicが発生します。
“`go
type Dog struct {
Name string
}func (d *Dog) Speak() {
fmt.Printf(“Woof, I am %s\n”, d.Name)
}func main() {
var nilPoint *Dog
nilP
S3・SQS・Lambdaで自動マスタリングアプリを作る
# 概要
今回は、AWSのSQS・Lambdaを練習も兼ねて触ってみようということで自動マスタリングアプリを開発しました。
ちなみにマスタリングとは、音楽制作の最終工程であり、最終的に配信やCDプレスするために音質を整える作業のことです。※ファイルをS3にアップロード・ダウンロードするUI等は実装しません。
# 音圧爆上げくんとは
AIを使用したマスタリングを、オンラインで自動的に行なってくれるサービスです。
以前は有料機能もあったようですが、2024年3月17日現在は無料で使えます。APIが提供されており、今回使用させていただきました。
https://bakuage.com/
https://qiita.com/bakuage/items/5e383be930477ca6f148
実装には、こちらのチュートリアルが役立ちます。
https://github.com/ai-mastering/tutorial-go
# 成果物
今回開発したアプリの使い方の説明です。
### 1. 音声ファイルをS3バケットに配置する
Go の net/http(とecho) で HTTP リクエストを見てみる
## Go で HTTP リクエストを見てみよう!
Go で HTTP リクエストを見てみる。
HTTP リクエストとは、**クライアント => サーバ** に送られるもので、クライアントの情報が書いてある。サーバはこれを頼りに情報を送り返す。例
“`HTTPResponse
GET /req-header HTTP/1.1 # メソッド URI HTTPバージョン
Accept-Encoding: gzip, deflate, br # ヘッダ
Accept-Language: ja
Host: localhost:8080
# 空行
# あればボディ
“`まずは復習。シンプルに `hello!` と返すサーバを立ててみる。
“`go
func main(){
http.HandleFunc(“/simple”, simple)
http.ListenAndServe(“:8080”, nil)
HackTheBox Gobox WriteUp
今回はHackTheBoxのMediumマシン「Gobox」のWriteUpです！
名前からして、Go言語が使用されていそうですが、どのようなマシンなのでしょうか！※ 2024/03/14 に行われました Security Days のオープンセッションにて攻略したマシンとなります！セッションへの参加ありがとうございました！
グラフはよくあるMediumの感じですね。
評価はなんと★5！これは期待できます！攻略目指して頑張ります～！HackTheBoxってなに？という方はこちらの記事を見てみてください。一緒にハッキングしましょう！
https://qiita.com/WhizOwl/items/165783694cb4791cff34
また、HackTheBoxで学習する上で役にたつサイトやツールをまとめている記事もあるので、合
Goで重複削除したスライスを作成する
Go の slice で、重複をする項目を除外したい時があり、その実装をしたので方法を書き留めます。
# int 型のスライスで重複している値を削除する
map を用いて重複の削除を行います。
map の key に slice の値を設定し、value に bool を設定します。
同じ key の場合は上書きで値が更新されるため、一度 true を設定することで、それ以後重複を除いた新たな slice に追加しなければ、重複除外が可能です。“`golang
package mainimport “fmt”
func deleteDuplicate(slice []int64) []int64 {
uniqueCheck := make(map[int64]bool)
newSlice := []int64{}for _, i := range slice {
// 重複している場合uniqueCheck[i]の値はtrueのためスキップされる
if !uniqueCheck[i] {
uniqueCheck[i] = true
//
Go + Amazon Bedrock Claude 3 使ってみる
Claude3がどうもGPTより良いと評判になっているので気になって使ってみる事にしました。Goで書いてみたので備忘録も兼ねて残します！
https://aws.amazon.com/jp/about-aws/whats-new/2024/03/anthropics-claude-3-sonnet-model-amazon-bedrock/
## やってみる
Bedrock + Claude3-sonnetが使用可能であり、必要なアクセス権も付与済みである事を前提とします。まず、`.env`を準備します。私の場合は`us-east-1`に`Claude3-sonnet`を準備しました。
“`.env
AWS_ACCESS_KEY_ID=<アクセスキーID>
AWS_SECRET_ACCESS_KEY=<シークレットキー>
AWS_DEFAULT_REGION=us-east-1
“`### 通常のメッセージ
以下は通常のメッセージAPIです。
[GoのSDKの情報](https://docs.aws.amazon.com/ja_jp/code-library/lat
【Go言語】指定したパスがファイルなのかディレクトリなのかを判別する関数
### ファイルの存在確認
“`go
func IsFile(path string) bool {
info, err := os.Stat(path)
if err != nil {
return false
}
return !info.IsDir()
}
“`1. `os.Stat(path)`を使って、指定したパスの情報を取得
2. エラーが発生した場合（`err != nil`）、指定したパスにファイルまたはディレクトリが存在しないため、`false`を返却
3. `!info.IsDir()`が`true`の場合、指定したパスはファイルであるため、`true`を返却### ディレクトリの存在確認
“`go
func IsDir(path string) bool {
info, err := os.Stat(path)
if err != nil {
return false
}
return info.IsDir()
}
“`1. `os.Stat(
【Go, AWS】低予算APIサーバー構築を最初から最後まで【Golang, Lambda, DynamoDB, API Gateway, Cognito】
:::note
* `Go` -> `Python`差し替え編
* クライアント（`Vue.js`）編執筆中です。
::::::note warn
価格・安全性など重要事項は随時ご自分で調べ、自己責任で作業をしてください。
筆者はいかなる損害について責任を負いかねます。
:::## はじめに
低予算（規模が十分小さければ無料）で[REST APIサーバー](https://qiita.com/masato44gm/items/dffb8281536ad321fb08)を作りましょう。DBあるよ！
## 概要
まず、低予算で推奨されるのが [**サーバーレス**](https://business.ntt-east.co.jp/content/cloudsolution/column-414.html) です。
厳密性を無視して簡単に言うと、 **常時待機するのではなく、必要な時だけ動作するサーバー** というイメージです。低予算でいける理由がこれでわかりますね。思ったよりやること、というよりかは扱わないといけない機能が多いです。
をやったのでメモです。# 解答
https://go.dev/play/p/-rVIDII1EaL# やったこと
やったことは下記です1. 状況把握
1. Readメソッドの返り値とReadメソッド中で変換するための文字列を取得する
1. Readメソッド内でROT13の処理をする## 1. 状況把握
“Lbh penpxrq gur pbqr!”をROT13という変換方法を利用して文字列変換したものを出力する。
初期状態として下記が与えられている。このまま実行するとrot13Readerにio.Reader(Readメソッド)がないと言われます。“`
package mainimport (
“io”
“os”
“strings”
)type rot13Reader struct {
r io.Reader
}
