kazu22002の技術覚書

PHPer, Golang, AWS エンジニアの日々

2021-01-01から1年間の記事一覧

Apple Silicon のmacbookでトリプルディスプレイ

AppleSilicon搭載のmacbookは標準でトリプルディスプレイ以上ができないみたいです。 困っていたので調べてみたら外部機器により解決できそうだったので購入しました。 Plugable USB-C 変換グラフィックアダプタ、ディスプレイ変換 Windows、Mac 用 デュアル…

ポートフォリオ系サービスに登録してみた

ポートフォリオ系サービスに登録してみました。 portfolio.forkwell.com www.wantedly.com findy-code.io lapras.com 別に転職をするために登録をしたわけではない。 コードの大半はprivate リポジトリのため、そこまでphperというわけではない感じ。( priva…

「ユニコーン企業のひみつ」を読んだ

ユニコーン企業のひみつ ―Spotifyで学んだソフトウェアづくりと働き方作者:Jonathan RasmussonオライリージャパンAmazon 本が出た当初に読んでいた本ですが、ブログに書いていなかったため記事にします。 サービスを開発、運営している会社であれば読む価値…

自己スキル2021

自己スキルの更新。2018年以来やっていなかったみたいなので書いてみます。 主なスキルマップ 主に書いている言語 PHP ( laravel, cakephp ) Golang HTML Vue.js + Nuxtjs 補助的に書いている言語 python サーバー Linux ( CentOS ) DBはpostgresql, mysql d…

Makefileは便利

Makefile便利ですよね。Serverless Frameworkのgoのテンプレートを作成した際に、Makefileがあり久々に使いましたが、やっぱり楽です。 .PHONY: build clean deploy gomodgen build: gomodgen export GO111MODULE=on go mod tidy env GOARCH=amd64 GOOS=linu…

httpのsessionとcookieの話

webの開発を10年以上しているもの同士の会話で「sessionとcookieの仕組みって詳しくわからないんだよね」と言われました。 確かに利用ケースは理解しているが、仕組みを理解していない人は多いと思っています。 そんな経緯があり、自分が説明した内容を書い…

Serverless Frameworkでdeploy時に「Inaccessible host」エラー

Serverless Frameworkを使用してlambdaにdeployしたときのエラーです。 deploy時のエラー Inaccessible host: `cloudformation.ap-northeast-1.amazonaws.com'. This service may not be available in the `ap-northeast-1' region. エラーの内容がわからず…

独学プログラマーを読んだ

独学プログラマー Python言語の基本から仕事のやり方まで作者:コーリー・アルソフ日経BPAmazon 書店の本棚の平積みコーナーにあるのをよくみていた本。欲しくて購入しました。 対象者は初心者向けの本になっていますが、実務をちゃんと見据えて内容が多く、…

lambda + golangでawsの料金をサービス別に通知

awsの料金の通知機能が標準にもあるが、使いづらいため作ってみた。 使いづらい点としては、 コストの閾値設定 通知が合計 メッセージのカスタマイズができない 標準の通知系はメッセージで欲しいものがあまりないのが困りますね。 今回は、lambda + golang…

lambda + golangでweb死活監視

aws lambdaをつかってweb監視を行なっています。言語はgolangを使用。通知はslackを使用。 eventsで5分単位に実行するweb監視の組み方です。 serverless.yml provider: name: aws runtime: go1.x lambdaHashingVersion: 20201221 stage: dev region: ap-nort…

golangでweb死活監視

webの死活監視が必要になったので、lambdaでどう作るか知り合いに相談したらgolangで作ったとのことで調べてやってみました。 通知はslackへ通知するようにします。 web監視 参考 qiita.com var ( IncomingUrl string = "https://hooks.slack.com/services/x…

Serverless Frameworkコマンドでlambdaにリリース

awsのlambdaを便利に使いたいため、Serverless Frameworkを試してみました。 www.serverless.com install npm install -g serverless プロジェクト作成 sls create --template aws-go-mod --path project 実行できるか確認 cd project make build エラー go:…

GCPのCloud Vision APIを利用してOCRを使い、画像の位置から文字列を取得

Cloud Vision APIを利用してOCRを使ってみました。日本語でもかなりの精度に驚いています。 ただし文章とみなされる部分に関しては文字列として判断されますが、空白が空いていたりすると文章として取得できないケースもあります。 そんな時には位置情報から…

GCPのCloud Vision APIでOCRを試す

OCR(文字認識)をやろうとして調べたところ、日本語に対応できているGCPを試してみました。 参考記事 cloud.google.com GCPのアカウントはある前提で書いています。今回はCloud Vision APIを使用しています。コードはpythonです。 サービスの有効化 参考記…

python + opencvでカード認識 精度向上

前回までの記事でカード認識した部分のみの画像を抽出できました。 抽出した結果からなにをしたいか。でどれくらいの精度が必要になるか考える必要があります。 カードを集めて、画像として見れればいい。というレベルであれば今回作った内容で十分使用でき…

python + opencvでカード認識 画像抽出

前回までの記事で輪郭の抽出までできました。 あとは抽出した部分のみの画像がほしいので、画像に保存できれば完成です。 画像の保存編です。 画像の保存 import cv2 cv2.imwrite('output_card.jpg', img) opencvで読み込んだ画像インスタンスであればopencv…

python + opencvでカード認識 前処理+ノイズ除去

前回の記事でカード認識までの前処理と処理結果を載せてみましたが、ノイズが多くしっかりと認識できているか怪しい状態でした。 そのためノイズ除去かほかの方法できれいにカードを認識できるようにしてみます。 ノイズ除去 labs.eecs.tottori-u.ac.jp 画素…

python + opencv でカード認識処理

実装で試したことを書いていきます。 今回は前処理の部分をいろいろ試していきます。 kazu22002.hatenablog.com 今回サンプルで使ったカードです。適当にあったカードを使用 前処理 ガウシアンフィルタ( ぼかす処理 ) ネガポジ + グレースケール + ニ値化 グ…

カードの画像認識に挑戦

免許証や名刺などのカードを認識するアプリって結構あるので、どうやって作られているのか自分でも試してみました。 少し使いたいプロジェクトがあったのもあり、ネットの情報を元にどれくらいできるか挑戦です。 参考ページ dev.classmethod.jp qiita.com v…

laravelでのAOPをあきらめてみる

phpでドメイン駆動をやろうと試行錯誤していて、aopを使おうとプロジェクトにいれていましたが、速度が遅くなりすぎたため断念しました。 ja.wikipedia.org 使っていたのはRay.aopのlaravel用にラップしてあるライブラリを使用。 コードが肥大化してきて速度…

Amazon CodeDeployでのエラー 前回の記事が間違っていたため修正

kazu22002.hatenablog.com いろいろと試しているうちにロードバランサーが関係ないことに気付き、いろいろと検証していった過程の記事です。 s3のサンプル実行 githubからリリースしていたところ、s3のサンプルを実行できることを確認 docs.aws.amazon.com s…

Amazon CodeDeployでのエラー (ApplicationStop 0秒でエラー)

awsのCodeDeployでエラーが発生して進まないため、いろいろと試した内容の記録です。 やりたいこと githubからソースを取得して、起動中のec2のサーバーにリリースをしたい。 エラー内容 The overall deployment failed because too many individual instanc…

まず簡単に作ってみることの重要性

タイトルの通りのことに悩んでいます。 一番必要な機能を作ることが求められている機能でしょう。最近作るものが時間がかかりすぎているため悩むことが多くなってきたことですね。 最低限の予約アプリを作る たとえば予約アプリを作ろうとしたときに、まず必…

Amazon SESとpostfixの連携

AWS

個別でメールサーバーを作るのは個人的に好ましくないと思っていたため、Amazon SESのようなサービスを利用したサーバーの依存がない構成を作りたいと思っていました。 個別のメールサーバーを作る場合のデメリットとして以下の内容があると思っています。 I…

phpとdocker-compose環境でのxdebugの構成 (更新)

PHP

開発環境がいろいろと代わり以前確認用に作成したxdebugプロジェクトが動作しなくなっていたため更新しました。 原因としては mac book の更新( m1 チップの影響 ) xdebugのバージョンアップ ( 2 -> 3系 ) 使用環境 phpstorm docker php-fpm , nginx mac boo…

機械学習で出てくるわからない単語を学習

「壁にぶつかることで理解する必要性がわかる。」 ということで、絶賛壁にぶつかっています。tensorflowを使ったサンプルコードから理解を深めていこうとしていますが、新規の用語が多すぎます。 ただわからない。と思って本をみたところ大体最初の方に全部…

tensorflowチュートリアル

tensorflowのチュートリアルをそのまま実行し、書いた内容を理解するための記事です。 www.tensorflow.org コメントもチュートリアルに書いてある内容を書き込み、自分の理解できるように追記してみました。 import tensorflow as tf # 画像を分類するニュー…

tensorflowのインストール

tensorflowを使う機会が出てきたため、インストールしてみました。 apple siliconのPCを使用しているとかなり情報が限られてきますが、参考の記事がかなり有用でインストールして動作するところまでできました。 qiita.com 記事の内容はtensorflow_macosを使…

apple siliconでの開発環境構築

新年です。明けましておめでとうございます。今年も頑張りたいです。 新しい年ということで新しいMacBookを開発でちゃんと使い始めたので、開発環境について書いてみます。 かなり詰まることが多いですが、なんとかwebの開発環境を作ったので書いてみます。 …