atwata developer blog

2018-02-20T08:38:45+00:00

rbenvを使って、ruby 2.4.1をインストールしようとしたが下記のエラー

$ rbenv install 2.4.1
Downloading ruby-2.4.1.tar.bz2...
-> https://cache.ruby-lang.org/pub/ruby/2.4/ruby-2.4.1.tar.bz2
Installing ruby-2.4.1...

BUILD FAILED (CentOS Linux 7 using ruby-build 20170726-9-g86909bf)

Inspect or clean up the working tree at /tmp/ruby-build.20170905165809.22615
Results logged to /tmp/ruby-build.20170905165809.22615.log

Last 10 log lines:
checking for ruby... false
checking build system type... x86_64-pc-linux-gnu
checking host system type... x86_64-pc-linux-gnu
checking target system type... x86_64-pc-linux-gnu
checking for gcc... no
checking for cc... no
checking for cl.exe... no
configure: error: in `/tmp/ruby-build.20170905165809.22615/ruby-2.4.1':
configure: error: no acceptable C compiler found in $PATH
See `config.log' for more details

configure: error: no acceptable C compiler found in $PATH

とのことなのでCコンパイラ(gcc)をインストール

sudo yum install gcc

再度試してみるが、今度は違うエラーが発生。

$ rbenv install 2.4.1
Downloading ruby-2.4.1.tar.bz2...
-> https://cache.ruby-lang.org/pub/ruby/2.4/ruby-2.4.1.tar.bz2
Installing ruby-2.4.1...

BUILD FAILED (CentOS Linux 7 using ruby-build 20170726-9-g86909bf)

Inspect or clean up the working tree at /tmp/ruby-build.20170905170227.22952
Results logged to /tmp/ruby-build.20170905170227.22952.log

Last 10 log lines:
The Ruby openssl extension was not compiled.
The Ruby readline extension was not compiled.
The Ruby zlib extension was not compiled.
ERROR: Ruby install aborted due to missing extensions
Try running `yum install -y openssl-devel readline-devel zlib-devel` to fetch missing dependencies.

Configure options used:
  --prefix=/home/vagrant/.rbenv/versions/2.4.1
  LDFLAGS=-L/home/vagrant/.rbenv/versions/2.4.1/lib 
  CPPFLAGS=-I/home/vagrant/.rbenv/versions/2.4.1/include 

ライブラリが足りないとコマンドまで教えてくれるので、それに従ってインストール

sudo yum install -y openssl-devel readline-devel zlib-devel

するとruby2.4.1をインストールできました！

go言語のインストールからhello worldまで

2018-01-30T00:00:00+00:00

インストール

centos7環境でgo言語はyumでインストールできる。

$ sudo yum install golang

インストールできたのでバージョンを確認

$ go version
go version go1.8.3 linux/amd64

Hello Worldの確認

hello.go ファイルを作成する

日本語の確認もしたかったので、公式ドキュメントにあるソースをコピペ。

公式→ http://golang-jp.org/

package main

import "fmt"

func main() {
	fmt.Println("Hello, 世界")
}

実行する。

$ go hello.go 
go: unknown subcommand "hello.go"

go ファイル名 ではなく go run ファイル名 らしい

$ go run hello.go 
Hello, 世界

実行ファイルを作ることもできる（スクリプト言語と異なり、golangがない環境でも生成されたバイナリを実行可能）

$ go build hello.go 
$ ls
hello  hello.go
$ ./hello  
Hello, 世界

Linux上でWindows向けにコンパイルすることもできる

※-oで出力ファイル名を指定

$ GOOS=windows GOARCH=amd64 go build -o ./hello.exe
$ ls
hello  hello.exe  hello.go

このhello.exeとhelloをWindows環境に持っていって実行してみる

c:\tmp>dir
2018/01/30  18:38    <DIR>          .
2018/01/30  18:38    <DIR>          ..
2018/01/30  17:56         1,551,539 hello
2018/01/30  18:37         1,627,136 hello.exe

c:\tmp>hello
Hello, 世界

c:\tmp>hello.exe
Hello, 世界

あれ？helloもhello.exeも両方実行できる。なんでだろう。 helloのほうはエラーになることを期待してたのに

rubyのrmagickで画像を結合・リサイズ・合成する

2018-01-05T00:00:00+00:00

インストール

まずはLinux上にImageMagickをインストールする(CentOS)

言語に依存しない画像処理ソフトウェアであるImageMagick（イメージマジック）をインストールする。

sudo yum install ImageMagick ImageMagick-devel

rubyで扱えるようにするためのgemを入れる

gem install rmagick

使い方

画像をファイルから読み込んで２倍の大きさにしてファイルに書き出すサンプル

require 'rmagick'

image = Magick::ImageList.new("from.jpg")
image = image.scale(2.0)
image.write("to.jpg")

２つの画像を結合するサンプル

require 'rmagick'

image = Magick::ImageList.new("from1.jpg", "from2.jpg")
image = image.append(false)	#falseだと左右につなげる。trueだと上下につなげる
image.write("to.jpg")

画像をリサイズする

require 'rmagick'

imageList = Magick::ImageList.new("from.jpg")
imageList = imageList.resize(200, 200)
imageList.write("to.jpg")

二つの画像を合成する

透過pngなど透明部分がある画像ならそこは抜いてくっつける。

imageListFrom = Magick::ImageList.new("from.jpg")
imageListFrame = Magick::ImageList.new("frame.png")
imageList = imageListFrom.composite(imageListFrame, 0, 0, Magick::OverCompositeOp)
imageList.write("to.png")

centos7へのpostgresqlのインストール・初期設定

2017-12-30T00:00:00+00:00

インストール

yumでインストールする。

yum install postgresql-server

yumでインストールすると

postgresql-server
postgresql
postgresql-lib

がまとめてインストールされる

データベース初期化

postgresql-setup initdb

/var/lib/pgsql/dataに設定ファイルが作成される。

自動起動設定

systemctl enable postgresql.service

postgresql起動

systemctl start postgresql.service

postgresqlにログイン

postgresqlのログイン方法はいろいろあるが、ここではOSユーザpostgresqlでログインしてみる。postgresユーザならpostgresqlに対するパスワードの認証なしでDBにアクセスすることができる。

su - postgres
psql

ローカル環境のみでgitリポジトリを作り、履歴管理やブランチ操作を行いたい

2017-10-10T00:00:00+00:00

ローカル環境にgitリモートブランチを作る

個人開発のちょっとしたツールやプログラムのソース管理について。

githubを使ってもよいのだが、公開したくないタイプのソースである
gitlabをわざわざ立ち上げるのも面倒
有料のgithubプライベート版を使うまでもない
そもそもちょっとした履歴管理とローカルディレクトリ間でのpush、pullができればよい
具体的には開発環境で動かして試したソースをpusuして、本番環境でpullしたい
ちなみに開発も本番も同じサーバ

コマンドのみなら、すべてローカル環境で管理できる。

以下手順。

共有リポジトリを作成する

ローカルサーバにあるがリモートリポジトリとして扱われる

$ cd /path/to
$ mkdir myapp.git
$ cd myapp.git

リモートリポジトリのディレクトリは.gitをつけるのが慣例らしい

$ git --bare init --shared

リモートリポジトリとして初期化するコマンド

–bareは作業ファイルをもたないpushされるための専用のリポジトリという意味

–shareはこのリポジトリを共有可能にするためのオプション。これがないとpushしてもファイルを作成できない。

ファイルが作成されていることを確認

$ ls
branches  config  description  HEAD  hooks  info  objects  refs

別の場所にいってcloneする

ちなみにローカルからのcloneとはネットワーク経由での取得なので、 ssh localhost で接続できるようになっている必要がある。

公開鍵認証でログインできるようになっていればSSHエージェント転送を有効にするのがラク

ためしにtmpディレクトリに移動しclone

$ cd /tmp/
$ pwd
/tmp
$ git clone localhost:/path/to/myapp.git
Cloning into 'myapp'...
warning: You appear to have cloned an empty repository.
$ cd myapp/
$ ls

これであとは通常のgithubに対してgit操作するようにソースの管理を行える

既存のローカルディレクトリを管理対象にする

ついでにこのリポジトリに対してすでに存在するディレクトリをgit管理対象とした上で、pushする方法

既存のファイルがあるディレクトリに移動して初期化、リモートリポジトリ追加

cd /path/to/hoge/
git init
git remote add origin localhost:/path/to/myapp.git

git fetchでエラーが出なければ正しくリモートリポジトリが設定されている

git fetch

既存のファイルを追加してコミット、プッシュ

git add .
git commit
git push origin master

Rails5でnginx+pumaでproduction環境を構築する

2017-09-30T00:00:00+00:00

nginxのインストール

過去に書いたのこちらを参考

http://blog.atwata.com/middle/2017/04/21/centos-nginx.html

rails側puma設定

rails5ならデフォルトで入っている

rails serverで起動しているのもpuma(webrickではない)

とりあえずpumaをproduction設定で起動

bundle exec puma -t 5:5 -e production -C config/puma.rb

secret_key_base未設定エラー

すると、こういうエラーがでる

RuntimeError: Missing `secret_key_base` for 'production' environment, set this value in `config/secrets.yml

secret_key_baseがセットされていないというエラー

対応は下記のようにsecretを生成して、環境変数にセットする

bundle exec rake secret

を実行すると長いランダム文字列が生成させる

これはconfig/secret.ymlで管理しているのだが、productionは下記のようになっている

production:
  secret_key_base: <%= ENV["SECRET_KEY_BASE"] %>

cookieの生成に使うらしいので、セキュリティ上ファイル化は好ましくないらしい。

都度生成し、環境変数として渡す仕組みになっている

export SECRET_KEY_BASE=hogehoge

のようにする

改めて起動

bundle exec puma -t 5:5 -e production -C config/puma.rb

assets:precompile未実施エラー

起動ログにエラーは出ていないが画面にアクセスするとエラー。 productionはデフォルトでは起動したコンソールにエラーは出さず、ログファイルに出力される。

log/production.log を確認すると下記の表示。

ActionView::Template::Error (The asset "application.css" is not present in the asset pipeline.):

確認するとproduction環境では自動でcssやjsをコンパイルしてくれないので（デフォルト設定がそうなっているので）自分でプリコンパイルする必要がある。

bundle exec rake assets:precompile RAILS_ENV=production

しかし

yarnがインストールされていないエラー

下記のエラーが発生

Yarn executable was not detected in the system.
Download Yarn at https://yarnpkg.com/en/docs/install
Download Yarn at https://yarnpkg.com/en/docs/install

yarnがないというエラー。rails5では使うらしい。

yarnとはjavascriptのパッケージマネージャ。npmの後継として利用され始めている。

下記のようにインストール。

npm install yarn -g

起動して画面が表示されるようになった、

静的ファイル(public)にアクセスできない

しかしcssが効かない。画像も表示されない。

確認すると

config/environments/production.rb が下記のような設定になっているために読み込みができなくなっていた

# config.public_file_server.enabled = ENV['RAILS_SERVE_STATIC_FILES'].present?
config.public_file_server.enabled = true

上記のように強制的にtrueにする。

ついにproduction環境のpumaでrailsアプリが起動するようになった。

次はnginxとのつなぎ込み

例として下記のように設定ファイルを記述する。

/etc/nginx/conf.d/myapp.conf

upstream puma_myapp {
    server  unix:/path/to/myapp/tmp/puma_myapp.sock;
}

server {
    listen       80;
    server_name  [ホスト名];

    access_log  /var/log/nginx/access.log;
    error_log   /var/log/nginx/error.log;

    root /path/to/myapp/;

    client_max_body_size 100m;
    error_page  404              /404.html;
    error_page  500 502 503 504  /500.html;

    location / {
        proxy_pass http://127.0.0.1:3000/;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header Host $http_host;
    }
}

nginx再起動

sudo systemctl restart nginx

これで無事に80番ポートでnginx経由でrailsアプリにアクセスできるようになりました。

railsでpostgresを使ってテーブルを先に作ってそれを画面に表示

2017-09-27T00:00:00+00:00

ざっくりやること

database.ymlでのdb設定
テーブルと対になったModel作成
Modelを呼び出すコントローラと表示するビュー作成

db設定をpostgresとしてアプリ作成

rails new myapp -d postgresql

database.yml編集

config/database.yml
default:
  adapter: postgresql
  encoding: unicode
  pool: 5
  # dbにアクセスするユーザ名/パスワード/ホストを指定
  username: postgres
  password: postgres
  host: 127.0.0.1

# developmentのところにdatabase名を指定
development:
  <<: *default
#  database: myapp_development
  database: postgres

空のモデル作成

テーブル名はsampleとする

rails generate model sample

テーブル名とPKのカラムを指定

sample.rbが作成されるのでテーブル名を指定

app/model/sample.rb
class Sample < ActiveRecord::Base
  self.table_name = 'sample'
end

マイグレーション

これをしないとPengindMigrationErrorが発生する

rake db:migrate

コントローラ作成

rails generate controller samplelist index

コントローラ編集

app/controllers/samplelist_controller.rb

class SamplelistController < ApplicationController
  def index
    @title = 'Model Sample'
    @datas = Sample.all
  end
end

ビュー編集

app/views/samplelist/index.html.erb

<h2><%= @title %></h2>
<table>
<% @datas.each do |data| %>
<tr>
  <td><%= data.column1 %></td>
  <td><%= data.column2 %></td>
  <td><%= data.column3 %></td>
  <td><%= data.column4 %></td>
</tr>
<% end %>
</table>

ブラウザで画面確認

下記にアクセス

http://localhost:3000/samplelist/index

railsをとりあえず動かしてみる

2017-09-24T00:00:00+00:00

まずはrailsをインストール

rubyとgemがインストールされていることが前提

gem install rails

インストール完了後、バージョン確認

rails -v

ひな形の作成

sampleという名前で作ってみる

rails new sample

試しに起動してみる

localhost以外からの接続も受け付ける場合は -b 0.0.0.0 をつける

cd sample
rails server -b 0.0.0.0

下記にアクセスしてようこそ画面がでてくればまずはOK

http://動かしているIP:3000/

起動するポートを変更したい場合

Address already in useエラーが発生して、起動できない場合がある。その場合は指定するポート番号を変更する。

rails server -b 0.0.0.0 -p 3001

centos7でcronを時間通り動かす

2017-09-13T00:00:00+00:00

anacron

centos7デフォルトだとanacronが動くため設定した時間通りにcronが実行されない

通常のcronを入れなおす

noanacronをインストールし、anacronをインストールする（この順番で入れる必要がある）

sudo yum -y install cronie-noanacron
sudo yum -y remove cronie-anacron

インストール後は再起動が必要

sudo systemctl restart crond

下記設定ファイルに実行したジョブを記載

sudo vi /etc/cron.d/dailyjobs

# Run the daily, weekly, and monthly jobs if cronie-anacron is not installed
SHELL=/bin/bash
PATH=/sbin:/bin:/usr/sbin:/usr/bin
MAILTO=root

# run-parts
2 4 * * * root [ ! -f /etc/cron.hourly/0anacron ] && run-parts /etc/cron.daily
22 4 * * 0 root [ ! -f /etc/cron.hourly/0anacron ] && run-parts /etc/cron.weekly
42 4 1 * * root [ ! -f /etc/cron.hourly/0anacron ] && run-parts /etc/cron.monthly

postgresqlにログインできない（Ident authentication failedエラー）

2017-09-07T00:00:00+00:00

下記のエラーが出てログインできない場合の対処法

psql: FATAL:  Ident authentication failed for user "postgres";

通常イメージするユーザ名とパスワードでログインできるようにする。

パスワードを設定する

まずはOSのpostgresユーザにスイッチし、postgres上のパスワードを設定する

$ su - postgres

$ psql

postgres=# alter role postgres with password 'postgres';

ログイン周りの設定をきちんとする

sudo vi /var/lib/pgsql/data/pg_hba.conf

# TYPE  DATABASE        USER            ADDRESS                 METHOD

# "local" is for Unix domain socket connections only
#local   all             all                                     peer
local   all             all                                     md5
# IPv4 local connections:
#host    all             all             127.0.0.1/32            ident
host    all             all             127.0.0.1/32            md5

上記のMETHODを適宜変更する

md5だと通常イメージするパスワード認証
trustだとOS認証（OSユーザで認証済みならパスワードなしでログインできる）

TYPEがlocalのところはこうやってログインするときの設定

psql -U postgres

TYPEがhostのところはこうやってログインするときの設定

psql -U postgres -h 127.0.0.1

postgresql再起動

設定ファイルを変更したらpostgresqlを再起動しないと反映されない

$ sudo service postgresql restart