Node.js関連のことを調べてみた2022年07月02日

【CircleCI】config.yml 入門

# 概要
今更ながら実務にてcircleCIを使ってCI環境を1から構築するという経験をしました。
その中でこれがcircleCIの基本なのかと思う部分もありましたので、備忘として残そうと思います。
これからcircleCIを導入する方、設定値の概念がわからずどうすればいいのかわからないという方に参考になればと思います。

# CircleCIとは
Saas型のCI/CDサービスです。Saas型であるという点が特徴です。
CircleCIはクラウド上のコンテナを実行環境として使用することができます。
基本的にはコンテナ(docker)を使って実行環境を整えていくことが多いのではと思います。

# config.yml
CI/CDの設定は全て`.circleci/config.yml` に記載します。
`.circleci`ディレクトリは対象Gitリポジトリのトップに置きます。

# はじめに
まずはとにかく簡単な記述でもいいので動かしてみます。
下記のようなconfig.ymlを作成しました。

“`yml
version: 2.1

jobs:
build:
docke

スマホでBLEをNodeJSチャレンジ(失敗)

AndroidスマホにてWebBluetoothでは実施済みだが、登録機器にアプリ立ち上がり時に自動接続を試したいことから、WebBluetooth<->ネイティブで実現できる自動接続を模索
スマホにNodeJS立ち上げてなんとかできないか？検証メモ

### 利用スマホ

* Pixel3 Android os 12
https://ja.wikipedia.org/wiki/Pixel_3

* A20 Android os 11
https://www.galaxymobile.jp/galaxy-a20/

### × Servers UltimateアプリでNodeJSサーバー

NodeJSサーバーが実行できるとのことで試す
Nodeサーバーがうまく立ち上がらず断念
ディレクトリのアクセスがAndroidOSで難しくなったせいなのか？？？
原因は解明の前に次の方法へ

#### 参考URL

https://play.google.com/store/apps/details?id=com.icecoldapps.serversultimate&hl=ja&gl=US

mermaid.cliがWindowsでエラーを吐く場合の対処

mermaid.jsでsvgを作りたいと思って

“`shell
$ npm install -g mermaid.cli
$ mmdc -i diagram.md -o diagram.svg
“`

で起動したところ、

“`shell
node:internal/error:465
ErrorCaptureStackTrace(err);
^

Error: spawn EPERM
at ChildProcess.spawn (略)
at Object.spawn (略)
at Lancher.launch (略) {
errno: -4048,
code: ‘EPERM’,
syscall: ‘spawn’
}
“`
のエラーが。

不思議に思って、puppeteerの下にインストールされるChromiumを単独起動してみると、
Chromium上には「Google APIキーが欠落しています。Chromiumの一部の機能は無効になります」表示と、
consoleには「Failed to load resource: net::ERR_FAIL

C++ で作った Node.js 用アドオンから任意のタイミングで JavaScript の関数を呼び出すクラスを作ってみた

こんにちは、wattak777 です。

# はじめに

筆者は C/C++ 畑の経験が長かったためか、Node.js でプログラムを組んでいると「C や C++ でやった方が早く作れるのになぁ」と C++ のアドオンで実装することがしばしばあります。

この時、C++ から JavaScript の関数を呼び出したい場合、JavaScript 側からコールバックを指定すれば（下記例）呼べますが、JavaScript から呼び出しトリガーが必要となります。

“`JavaScript:呼び出し側.js
const addon = require(‘./build/Release/addon’);
addon.func(arg, (result) => {
console.log(‘call back.’) ;
}) ;
“`
“`C++:アドオン側.cpp
// 仕掛け等は省略
// JavaScript 側から「func」と呼ばれると「func」が呼ばれるような仕組みになっていると想定
func( Napi::CallbackInfo& info )
{

Node.js での認証情報の設定

## はじめに
プログラミング時に認証情報の提供方法によってセキュリティ、保守作業に影響しますので、
どの方式を採用するかを考慮する必要があります。

## AWSのNode.js での認証情報の設定
### AWS 推奨の順序で認証情報を提供する方法
– Amazon EC2 の AWS Identity and Access Management (IAM) ロールからロード
– 共有認証情報ファイル (~/.aws/credentials) から読み込む
– 環境変数から読み込む
– ディスク上の JSON ファイルから読み込む
– JavaScript SDK によって提供されるその他の認証情報プロバイダークラス

### SDK で利用できる認証情報ソースが複数ある場合、デフォルトの選択優先順位
– サービスクライアントコンストラクタで明示的に設定されている認証情報
– 環境変数
– 共有認証情報ファイル
– ECS 認証情報プロバイダーからロードされた認証情報 (該当する場合)
– 共有 AWS 設定ファイルまたは共有認証情報ファイルで指定された認証情報プロセスを使用して取

Jestのmockを使いES6クラスのテストを実装してみた　様々なモックの作成方法

## 以下の記事を参照して頂ければと思います

https://note.com/shift_tech/n/nb2f427093fd8

**※Qiitaの記事は全て個人的な記載であり、所属する組織団体とは無関係です。**

## 補足
ソースコード全体は以下。

https://github.com/yuta-katayama-23/node-express/commit/435c2b3d4b2759fa19c20de59de6e8215f8a445f

https://github.com/yuta-katayama-23/node-express/commit/8da10b36cd23c9868d9f5ead1311c40dc3935425

## おまけ
上記で見てきたES6クラスの実装の仕方の都合上、例えばExpressで利用する際には以下のようになるだろう。

“`js
import express, { Router } from ‘express’;
const router = Router();

const port = process.env.PORT ||

テキストファイルの文字コードを変換する

### 環境
Ubuntu 20.4 + Vagrant(Windows10)
Node.js v16.14.0

### はじめに
テキストファイル（CSVファイルなど）の文字コードを判断して、S-JISであれば、UTF-8に変換する関数の紹介です。プラットフォームがWindows10であるため、Vagrant環境で動作しているUbuntuとファイルのやり取りがよく発生します。つまり、Windows環境で作成した、S-JISのファイルを、Ubuntu環境で扱うために、UTF-8にいちいち変換しなくてはいけないことになります。それを、Node.jsでサクッと行えるようにしたので、そのご紹介です。

### 解説
２つの外部ライブラリを使っています。**jschardet**と**iconv-lite**です。この２つのライブラリは、**npm**で別途インストールする必要があります。**jschardet**はファイルの文字コードを判断するライブラリで、**iconv-lite**はファイルの文字コードを変換するライブラリです。

**jschardet**でファイルの文字コードを判断

依存モジュール(ライブラリ)のライセンスをチェックする仕組みを導入してみた

## 以下の記事を参照して頂ければと思います

https://note.com/shift_tech/n/n6fd1f955658b

**※Qiitaの記事は全て個人的な記載であり、所属する組織団体とは無関係です。**

## 補足
ソースコード全体は以下。

https://github.com/yuta-katayama-23/node-express/commit/ebc93a814273133a34329dfd3830504ee473a24f

## おまけ
以下では、

– [GPLライセンスについて](#gplライセンスについて)
– [Node.jsでもフロントエンドと同じようにwebpackで全てのモジュールをbundleするとどうなるか？](#nodejsでもフロントエンドと同じようにwebpackで全てのモジュールをbundleするとどうなるか)
– [フロントエンドのプロジェクトで使える他の方法](#フロントエンドのプロジェクトで使える他の方法)

の3つについてみていく。

### GPLライセンスについて
以下の記述については専門家ではないので、誤りがある

日本語音声のマイク入力をオフラインでリアルタイム音声認識：「VOSK」を JavaScript（Node.js）で扱う

この記事の内容は、オフラインでリアルタイム音声認識ができ、日本語にも対応している以下の「VOSK」を試してみた話です。

●VOSK Offline Speech Recognition API
　https://alphacephei.com/vosk/

そして今回の記事で、VOSK を扱う開発言語・環境は「JavaScript（Node.js）」です（自分がよく使っているから、という選定理由です）。
なお、対応している他の開発言語などは、公式ページの「[Installation](https://alphacephei.com/vosk/install)」を見ると確認でき、例えばスマホ向け（Android・iOS）や Python・Java・C# などもあるようです。

## VOSK を「JavaScript（Node.js）」で扱う
そ

NodejsからMySQLに接続

前回記事までで出来上がったAWS上のMySQLに、Nodejsから接続確認をしてみたいと思います。
前々回記事までで、AWS上のCentOSに、Nodejs実行環境が構築できている状態です。

## コード準備

任意のプロジェクトに以下を配置します。
const connection以下は、MySQLに設定したユーザとパスワード、データベース名をいれます。

app.js
“`
const express = require(‘express’);
const mysql = require(‘mysql’);
const app = express();

app.use(express.static(‘public’));
app.use(express.urlencoded({extended: false}));

const connection = mysql.createConnection({
host: ‘localhost’,
user: ‘root’,
password: ‘Passw0rd!’,
database: ‘list_app’
}

CentOS steam 8にMySQLをインストールして初期設定する

昨日の投稿の続きで、
MySQLを導入して初期設定をしたあとNodejsから接続確認をします。

## MySQLインストール
### 1. yumリポジトリの追加
MySQLはyumコマンドでインストールします。
CentOS 7では公式のyumリポジトリにMySQLがないので、まずはMySQLの[公式](https://dev.mysql.com/downloads/repo/yum/)が用意しているリポジトリを追加します。

“`
# yum localinstall http://dev.mysql.com/get/mysql80-community-release-el8-4.noarch.rpm
“`
/etc/yum.repos.d配下にmysqlのリポジトリが追加されていることが確認できます。
“`
# ls /etc/yum.repos.d
centos-addons.repo mysql-community-debuginfo.repo mysql-community-source.repo
centos.repo mysql-com

primary keyをオートインクリメントしている場合に、そのidを外に露出させない実装をしてみた？！

## はじめに
データベースのprimary keyをauto incrementしている場合（サロゲートキーを使っている場合）に、もし何も気にせずREST APIでCRUDするようなアプリを作ろうとすると、一番簡単なのはそのPKを使ってデータを操作する事だと思う。

ただ、そのような実装した場合、PKが外に露出してしまうので、ToDoアプリ等であれば問題ないかもしれないが、もしPKがユーザーID等の個人を特定できる情報であれば、サービスの利用ユーザ数が知られてしまったり、何かと悪影響があるだろう。

今回は可逆暗号を利用して、オートインクリメントをしたユーザーIDなど外に露出してほしくない情報を隠す方法を試してみたので備忘録を残す。

※上記のprimary key露出に関しての懸念事項については、[idをautoincrementして何が悪いの？](https://zenn.dev/dowanna6/articles/3c84e3818891c3)などを参照。

※上記の問題を解決するのに、以下で見ていく方法が良いと言えるのか？実際にプロダクトで使えるのか？については、勉強中の身の

LambdaからDynamoDBへの大量データ投入

# DynamoDBへの大量データ投入

– Pythonではやったことがあったけど、Node.jsではやっていないかったのでやってみると、高速だった。 1putごとにawaitしないから高速ですね。
– https://dev.classmethod.jp/articles/nodejs-dynamodb-scan-stream/ クラスメソッドさんの記事まんまできる
– 「スクリプトで50万件のテストデータを作成」の箇所のtsをjsに変える

– DynaomoDBテーブルは、オンデマンドキャパシティを使う
– Pythonの並列処理を作成するのは苦手だけど、Node.jsならばPromise.all() で非同期処理で同時に実行できCPUパワーを十分に使える

## AWS Lambdaの設定
– Lambdaをメモリ1024MB、タイムアウト1分にする
– Lambda Layer使うのですが割愛します

## DynamoDB
– テーブル名 ：sugimoto-scan
– パーティションキー ：id,文字列
– ソートキー：指定なし
– 設定をカスタマイズ にて、

AWS上にCentOS Stream 9 を立ち上げて、Nodejsで簡単アプリを動かしてみる

構築の際の覚書です。

## ◆AWS CentOS起動◆
CentOS8がサポート終了したとのことで、
AWS EC2 で CentOS Stream 9 のサーバーを立ち上げてみました。

### 1. 公式のCentOS 9 Ami IDを探す
公式のWiki( [https://wiki.centos.org/Cloud/AWS](https://wiki.centos.org/Cloud/AWS) )から、東京リージョン（ap-northeast-1）のAmi IDを探してコピーします。

2022/6/27時点の最新以下を選択

### 2. AWSでインスタンスを起動する
AWS EC2 「インスタンスを起動」 から、1.でコピーしたAmi IDを入力して検索します。

CentOS 8はサポート終了しているとのことで、今回Cen

google-cloud/tasks モジュールでbodyが取得できない場合の対策

# 概要

`Cloud Tasks` に`Post`した値が取得できなかった際の対応をまとめる

https://www.npmjs.com/package/@google-cloud/tasks

# 解決方法

`Quickstart`に記載されている方法では取得できないので以下の通りにする

`body: Buffer.from(JSON.stringify(payload)).toString(‘base64’)`

“`ts
const payload = {
foo: ‘bar’,
};

const task = {
httpRequest: {
httpMethod: HttpMethod.POST,
url: ‘URL’,
oidcToken: {
serviceAccountEmail:
‘serviceAccountEmail’,
},
body: Buffer.from(JSON.stringify(payload))

Vector tile conversion from Esri geodatabase with gdal, tippecanoe, and nodejs

# Introduction
## Background
My colleagues have a good contour line data in ArcGIS geodatabase (.gdb) format. I wanted to make vector tiles from contour lines stored in ArcGIS Geodatabase. The structure of the geodatabase is as shown in the following figure.

## Considering an approach
At first, I was thinking to export it to shape files to be converted into GeoJSONs which i

nvmをインストールする方法【nvm/Node.js/zsh/npm】

# nvmのインストール手順（zsh）

#### 1. nvmをインストール
“`
curl -o- https://raw.githubusercontent.com/nvm-sh/nvm/v0.34.0/install.sh | bash
“`

#### 2. .zshrc に以下を記述して保存
“`.zshrc
source ~/.nvm/nvm.sh
“`

#### 3. nvmのインストールを確認する
“`
nvm -v
“`

#### 4. nvmを使ってNode.jsのバージョン12をインストールする
“`
nvm install v12
“`

#### 5. Node.jsのインストールを確認する
“`
node -v
“`

しばらく使っていなかったNodeをアップデートする

過去にダウンロードしていたNode.jsを現在の安定版に更新しました。
いずれまた使うのでメモしておきます。

## homebrewのバージョンアップ
% brew update

% brew -v
Homebrew 3.5.2
Homebrew/homebrew-core (git revision e95d9224d91; last commit 2022-06-26)
Homebrew/homebrew-cask (git revision 9713bf8928; last commit 2022-06-25)

homebrewを最新版に更新完了

## nodebrewのバージョンアップ
% brew upgrade nodebrew

% nodebrew -v
nodebrew 1.2.0

nodebrewも最新版に更新完了

## node.jsのバージョンアップ（推奨版に）
現在の推奨版がv16.15.1なのでそれにバージョンアップする

% nodebrew install-bi

S3とファイルを共通に扱う

タイトルにある通り、S3を扱うNode.jsライブラリです。
すぐ忘れるので、備忘録として残しておきました。
おそらくもっと良いやり方があるかもしれず、いろんなケースに対応できているわけではないように思いますが、各所でカスタマイズするためのベースにはなるかなあと思います。

ファイルとS3どちらも共通に扱えるようにしています。
また、AWS S3の代わりにMinioでも利用できます。

“`js:storage.js
‘use strict’;

const fs = require(‘fs’).promises;
var AWS = require(‘aws-sdk’);
AWS.config.update({
// region: “ap-northeast-1”,
// minio用
region: “[Minioのリージョン名]”,
});
var s3 = new AWS.S3({
// minio用
accessKeyId: ‘[MinioのアクセスキーID]’ ,
secretAccessKey: ‘[Minioのシークレットアクセスキー]’,

【Node.js】ウェブ上の地図にPLATEAUの建物を反映させてみた

国土交通省の３D都市モデルPLATEAUを使ったウェブアプリケーションを作るため、JavascriptのライブラリCesiumJSを使ってみました。

## 環境
– Node.js
– 使用エディタ： VSCode
– 動作確認OS ： Windows10

## PLATEAU
広島県呉市のデータを例にします。
ここからダウンロード
https://www.geospatial.jp/ckan/dataset/plateau-34202-kure-shi-2020

この中から 3D Tiles, GeoJson, MVT, Shape
＞　詳細　＞　ダウロード
[](https://gyazo.com/a41a29c5ebd49fa57417edbebc441024)

ダウンロードデータを解凍すると
[![Image from Gyazo](https://i.gyazo.com/f02fd7eaf3e6ce7b9