Go関連のことを調べてみた2022年03月06日

AWS App RunnerでGolangのサーバーをサクッと立ててみる

# AWS App Runnerとは？
コンテナ化されたWebアプリを簡単にデプロイすることができるサービスです。(裏側ではFargateが使われているらしい)
２０２１年の５月に登場したサービスなので比較的新しいサービスっぽいです。

コンテナを動作させる手段としてはAmazon ECSがありますが、それよりもサクッとサーバーを立てたい時に重宝しそうです。

# 料金体系(@東京リージョン)
以下の３つの要素から構成されます。
1. プロビジョニングされるメモリ ・・・　0.009USD/GB
2. アクティブなコンテナインスタンスのCPUとメモリ・・・0.081 USD/vCPU + 0.009USD/GB
3. ビルド料金・・・0.005 USD/ビルド時間 (分)

1vCPU・メモリ２GB・ビルドなしで１ヶ月アクティブに運用すると、**約７０ドル**のコストがかかります。

# 2022年2月のアップデートでVPCのトラフィックがサポートに
リリースノートによるとApp RunnerがVPCのリソースにアクセス可能となったそうです。
https://docs.aws.amaz

【Golang】gqlgen、gin、GORMを使ったプロジェクトテンプレート

# はじめに

Goの学習のためgin、gqlgen、GORMを使ってGraphQLのAPIを作成しました。
備忘のためにプロジェクトのテンプレートとその説明を残します。

作成したテンプレートは以下に公開しています。

https://github.com/Ruketa/go-gqlgen-gin-template

# 環境
– Golang バージョン 1.17
– 使用ライブラリ、FW
– Gin : Web Framework : https://github.com/gin-gonic/gin
– Gorm : ORM library : https://github.com/go-gorm/gorm
– Gorm PostgreSQL Driver : https://github.com/go-gorm/postgres
– INI : INI file package : https://pkg.go.dev/gopkg.in/ini.v1
– gqlgen : GraphQL library : https://github

GolangのValidationチェック(go-playground編)

#初めに
GolangでのValidationチェックを実施する記事です。

#サンプルコード
“`go:main.go
package main

import (
“fmt”

“github.com/go-playground/validator/v10”
)

// User contains user information
type User struct {
FirstName string `validate:”required”`
LastName string `validate:”required”`
Age uint8 `validate:”gte=0,lte=130″`
Email string `validate:”required,email”`
FavouriteColor string `validate:”iscolor”` // alias for ‘hexcolor|rgb|rgba|hsl|hsl

[Golang] ユニットテストにおける正しい後処理の書き方：t.Cleanup()

ユニットテストの**後処理**を行う場合、

`defer`は**並列**で動いている**サブテストの終了を待たずに実行**されてしまう問題がある。

全てのサブテストが終了してから後処理を行たいなら `t.Cleanup()` を使おう。

## **`Defer`による後処理の例**

“`go
package main

import (
“log”
“testing”
)

func TestDefer(t *testing.T) {
tcs := map[string]string{
“A”: “1”,
“B”: “2”,
“C”: “3”,
}

defer log.Printf(“End”)

for tn, tc := range tcs {
tc := tc
t.Run(tn, func(t *testing.T) {
t.Parallel()
log.Println(tc)
})
}
}
“`

そのログの抜粋：

“`bash
2009/11/10 23:00:00 End
2009/11/10 23:00:

Go言語 + Windows Terminalで、任意の文字にハイパーリンクを埋め込むエスケープシーケンス

# 結論

“`golang
package main
import (
“fmt”
)
func main() {
fmt.Println(“\033]8;;https://www.google.com/\aGoogle\033]8;;\aへリンク”)\\->Googleへリンク
}
“`

# 参考
[ターミナルエミュレータ内でクリッカブルなリンクを作る方法](https://qiita.com/aosho235/items/335fc2f4b002a8251a2f)
[How to add hyperlinks to a terminal [ Node.js ]](https://stackoverflow.com/questions/69314689/how-to-add-hyperlinks-to-a-terminal-node-js)
[Explicit hyperlinks and context information for your terminal](https://www.uninformativ.de/blog/postings/2018-04-14

Google Compute Engine の startup script で $ go install と インストールされたバイナリを実行する方法

## TL;DR

“`bash
metadata_startup_script = <<-EOF #!/bin/bash TARGET_REPOSITORY_URL=github.com/... # ここは適宜差し替えてください TARGET_BIN_NAME=... # ここも mkdir /home/user export HOME=/home/user cd /usr/local/src wget https://go.dev/dl/go1.17.7.linux-amd64.tar.gz > /dev/null 2>&1
tar -C /usr/local/ -xzf go*.tar.gz > /dev/null 2>&1
GOCACHE=/usr/local/go/cache GOBIN=/usr/local/go/bin GOPATH=/usr/local/go /usr/local/go/bin/go install -v ${TARGET_REPOSITORY_URL}@latest
/us

Goの静的解析ツールblahbrah

Goの静的解析ツールを作ったので紹介したいと思います。

## 作ったもの
– [blahbrah](https://github.com/granddaifuku/blahbrah)

### 何ができるのか
– タイトルにもある通り、Goの静的解析をしてくれます
– Brace( “{” や “}” )の前後にある空白行を検知することができます

次のコードを例に取ります。
突っ込み所はとてもありますが、一番気になる(?)のは、**レビューで指摘されそうな**、12行目や20行目に存在する空白行ではないでしょうか。
“`main.go
1 package main
2
3 import “fmt”
4
5 type cat struct {
6 name string
7 age int
8 }
9
10 func newCat(name string, age int) cat {
11 return cat{
12
13 name: name,
14 age: age,
15 }
16 }
17
18 func foo(a, b int) int

0-1ナップサック　アルゴリズム

# 何が書いてあるか。
0-1ナップサック問題[^1]のアルゴリズムのGo言語実装サンプル
[^1]: 重量を越えないような物の組み合わせのうち、価値が最大になるようにな組み合わせを求める問題。

“`go
package main
import (
“fmt”
“math”
)
type Kingyo struct {
weight int
kati int
}
func main(){
var N,x int
fmt.Scanf(“%d %d”, &N,&x)

kingyo:=make([]Kingyo,N)
for i:=0;i

Go の API をフロントサイドから呼び出す

API 側に
“`go
http.Handle(“/”, http.FileServer(http.Dir(“static”)))
“`
“static” フォルダに html などを入れる。

## 詳しく
main.go に
“`go
http.Handle(“/”, http.FileServer(http.Dir(“static”)))
log.Fatal(http.ListenAndServe(“:8080”, nil))
“`
と書いた場合。(main.go があるフォルダ)/static に index.html を入れる。
“`
go run main.go
“`
などで実行すると、localhost:8080/ で index.html が表示される。
localhost:8080/test.html とかで static/test.html が表示される。

“static” フォルダは別フォルダにしても動く。”../test” とかでも問題ない。
“/” を “/top” にして localhost:8080/top にアクセスすると not foun

Go言語のモジュール実装

モジュールの実装方法と実装したモジュールを利用したmainモジュールを実行するところをできるだけ簡略化して紹介します。

## モジュール用の作成

### モジュール用のディレクトリを生成

“`sh
mkdir greetings
cd greetings
“`

### モジュールの初期化

[go mod init](https://go.dev/ref/mod#go-mod-init)コマンドで現在のディレクトリをルートとする新しいモジュールを初期化(go.modファイルを生成)します。
※go.modファイルはまだ存在していてはなりません。

“`sh
go mod init example.com/greetings
# go: creating new go.mod: module example.com/greetings
“`

### モジュールの実装

“`go
package greetings

import “fmt”

// 大文字から始まる関数はpublic扱いになるので、Hello関数はimportしたモジュールから参照できます。
func

golang-migrateチュートリアル(migration編)

#初めに
　golang-migrateのチュートリアルです。

#環境
PC：Mac(CPUはintel製)
Go：1.17.6 ←Goのver大事。versionは1.16以降をインストールしてください。
開発エディタ：Visual Studio Code

#ディレクトリ構成
“`shell:ディレクトリ構成
~/go/src/test $ tree
.
├── db
│ └── migrations
│ ├── 000001_create_users_table.down.sql
│ └── 000001_create_users_table.up.sql
├── docker-compose.yml
└── go.mod
2 directories, 4 files
“`

#go-migrateのインストール
“`shell:golang-migrateのインストール
brew install golang-migrate
“`

#事前準備
①DB用意
postgressを用意し、exampleという名のDBを作成する。
②環境依存情報

Herokuでスクレイピングしようとしてハマったこと

## 初めに
Herokuでスクレイピングしてハマったことをまとめてみました。
記事ではGoとagoutiを使用していますが、Pythonとかにも当てはまると思います。
## invalid session id  エラーが多発
### 下記エラーが発生
“`
failed to retrieve page HTML: request unsuccessful: invalid session id
failed to retrieve page title: request unsuccessful: invalid session id
“`
### 対策
Chromeのオプションに`–disable-gpu`と`–disable-dev-shm-usage`を指定したら解消しました。
“`golang
options := agouti.ChromeOptions(
“args”, []string{
“–headless”,
“–disable-gpu”,
“–disable-dev-shm-usage”,
})
driver := agout

Golangによるパスワードの保存

パスワードの保存方法として、

平文のパスワードを単方向ハッシュにかけて保存するのが一般的です。

ハッシュアルゴリズムには`SHA-256`、`SHA-1`、`MD5`等があります。

Golang は `crypto` パッケージで簡単に実装することが可能です。

以下、　`sha256` によるの実装例です。

“`go
//import “crypto/sha256”
h := sha256.New()
io.WriteString(h, “my password”)
fmt.Printf(“% x”, h.Sum(nil))
“`

# より良い方法

大抵の場合は、暗号化時に使用されたハッシュアルゴリズムが上記のような公開されているものであることが原因で、かつ技術の進歩によりパソコンの計算力も上がり、ハッカーが`rainbow table`を使用することで上記の方法でハッシュされたパスワードをクラックすることが（時間的に）難しく無くなってきたのが現状です。

> `rainbow table` ：ハッシュ結果（ダイジェスト）のデータベース

直接的な解決方法の一つは、自

Golang-構造体にあるパスワードなどのセキュリティ情報をログに出力しないようにする方法

構造体をログに出力する際に、パスワードとかのようなセキュリティ情報を出力したくない場合は、方法の一つは `構造体の埋め込み（Embedded）` 特性を利用することです。

構造体の埋め込みの形は、次のような形になります。

“`go
type 埋め込み構造体名 struct {
フィールド名 型名
フィールド名 型名
}

type 構造体名 struct {
埋め込み構造体名
フィールド名 型名
}
“`

以下のような例で説明しますと、

`RequestSanitized.Password` は `Request.Password` を上書きすることになります。

`Password`　を出力したくなければ、あえて`RequestSanitized.Password` を空値にすれば良いです。

“`go
type Request struct {
Name string `json:”user”`
Password string `json:”password”`
}

type RequestSanitized struct {
Requ

Go言語のerrorにエラー情報を付けて分岐する。

# この文章について

Go言語の`error`はシンプルで`errors.New(“エラーメッセージ”)`で生成することができます。その一方で、エラー内容に応じて分岐するには工夫が必要です。本記事ではGo言語の`error`でエラー内容に応じて分岐する方法を記載します。

例えば、ユーザ情報を取得するREST APIを作ったときに、

– ユーザが見つからないエラーの場合は、404レスポンス
– データベース接続時に不測のエラーがあった場合は、500レスポンス

としたいと思います。JavaやC#等であれば例外クラスのどれをキャッチしたかで判断できます。しなしながら、Go言語ではどちらの場合であってもシンプルな`error`とだけ変えるので判断できません。そこで判断できるように工夫をしましょう。

# 方法1：Sentinel Error

「Sentinel Error」という単語の和訳が分かりませんので、ここでは「Sentinel Error」と書きます。（知っている方がいましたら教えてください。）

これは`errors.New(エラーメッセージ)`をあらかじめ定義しておき、

Goでcrontabのようなツールを作ってデーモン化してみた

## crontabにGoを動かす処理を登録してみたが動かず
普段業務ではタスクスケジューラにcrontabを使用している。そのためGoでバッチ処理を管理するときも当然のようにcrontabで管理するものだと思っていたが、なぜかcrontabが動作せず、エラーログも残らないという現象に直面。

調べてみても、Goをcrontabで実行しようとする人がおらず、代わりにGoのタスクスケジュールライブラリの紹介記事をいくつか発見したため、こちらで実装してみることにした。

## gocronを使用してタスクスケジューリングを行う
Goのタスクスケジュールライブラリはいくつか存在するようだが、
こちらで無限ループなどにして待ち状態を実装する必要がなさそうだったため、今回はgocronを採用。

Goのバージョンは1.17.6

“`main.go
package main

import (
“fmt”
“path/filepath”

//”github.com/jasonlvhit/gocron”
“github.com/go-co-op/gocron”
“gith

aws-sdk-goでcredentialを指定するには

# 結論
`Credentials`を指定して、静的な値を入れる。

> You can hard-code credentials in your application by passing the access keys to a configuration instance, as shown in the following snippet.

“`:go
aws.Config{
Region: aws.String(cfg.Region),
Credentials: credentials.NewStaticCredentials(
“AWS_ACCESS_KEY_ID”,
“AWS_SECRET_ACCESS_KEY”,
“TOKEN”,)
}
“`

# 経緯
アプリケーションをデプロイする際に、dockerコンテナの環境変数と本番環境の環境変数が被っていた。
この環境変数は、ElasticSearchを使うにあたって必要だったので命名を変更。
`AWS_ACCESS_KEY_ID` => `ES_A_K_ID`
`AWS_SECRET_ACCESS

wails v2でvueテンプレートを作った手順

# 要約

wails v2でvueを使えるテンプレートを作った。[これ](https://github.com/woogea/wails_vue_template)
これはその時の作業記録

# 動機

マルチプラットフォーム対応のデスクトップアプリケーションをgoで作りたかった。
できるだけ一つのプラットフォームで開発して、他は最低限の確認すればOKとしたかったため、ブラウザエンジン組み込み型にすることにした。
フロントのフレームワークはvueを使いたかったけど、v2には公式テンプレートが用意されていない。
すでにテンプレートを[作ってくれている人はいる](https://github.com/misitebao/wails-template-vue)けど、viteを使っていて慣れなかったのでnpmを使ったものを作ることにした。
あと、wailsの仕組みを理解するのにもいいかなと思った。

# wails

比較的アクティブで、構成がシンプルで何をやっているかわかりそうな[wails](https://github.com/wailsapp/wails)を選択した。
v2がbeta

Go言語のDB接続処理

Go言語の公式の[DB処理チュートリアル](https://go.dev/doc/tutorial/database-access)を元にしていますが、DBをMySQLからSqlite3に変更、データの追加にトランザクションを利用するように変更しています。

## 構成

– Sqlite3 3.36.0
– go 1.17
– github.com/mattn/go-sqlite3 v1.14.11

## DDLとDML

※Sqlite3の使い方については本件の本質ではないので割愛します。

### DDL

“`sql
CREATE TABLE album (
id INTEGER PRIMARY KEY AUTOINCREMENT,
title VARCHAR(128) NOT NULL,
artist VARCHAR(255) NOT NULL,
price DECIMAL(5,2) NOT NULL
);
“`

### DML

“`sql
INSERT INTO album
(id, title,

Goでテストしてカバレッジ計測

### はじめに

:::note warn
こちらはzennの記事の転載となります。
:::

平下CTO@sweeepです。Go言語でのテスト方法やカバレッジ計測などをこちらをサンプルに解説します。→ [GoでファイルのValidation方法など](https://zenn.dev/hirac/articles/dc537f0786cae9)
本記事の内容です。
* Goのテスト
* テストのsetup/teardown
* カバレッジ計測
* テスト実行結果

### Goのテスト

まずxxx_test.goというファイルを作成し、testingとassertをimportします（packageはテスト対象と同じ）。
“`Go:utils/file/file_test.go
package file

import (
“testing”
“github.com/stretchr/testify/assert”
)
“`

関数名にはTestXXXと先頭に[Test]をつけます。
“`Go:utils/file/file_test.go
func TestChec