327 lines
11 KiB
Markdown
327 lines
11 KiB
Markdown
|
+++
|
|||
|
|
date = "2022-08-27"
|
|||
|
|
tags = ["heroku","fly"]
|
|||
|
|
title = "herokuからfly.ioへの移行"
|
|||
|
|
slug = "fly-heroku"
|
|||
|
|
+++
|
|||
|
|
|
|||
|
|
herokuのplan:free(hobby)が廃止され、`mo/$31`になるので、[heroku](https://heroku.com/)から[fly.io](https://fly.io/)へ移行を考えています。
|
|||
|
|
|
|||
|
|
> Heroku Dynos starts at $7/month, Heroku Data for Redis® starts at $15/month, Heroku Postgres starts at $9/month.
|
|||
|
|
|
|||
|
|
https://blog.heroku.com/next-chapter
|
|||
|
|
|
|||
|
|
herokuのこれまでの評価は、素晴らしかったです。感謝しかありません。ありがとう！
|
|||
|
|
|
|||
|
|
### fly.io plan:free(hobby)
|
|||
|
|
|
|||
|
|
クレジットカードを登録するとplan:hobbyが使えるようになります。クレジットカードはできればVプリカ(visaプリペイドカード)などを使用するようにしてください。登録できない場合に通常のクレジットカードで登録するしかありません。このへんは未検証です。
|
|||
|
|
|
|||
|
|
> Add a payment method to get even more free allowances.
|
|||
|
|
>
|
|||
|
|
> VM: shared-cpu 2,340 hours per month Run 3 shared-cpu-1x VMs with 256MB RAM full time.
|
|||
|
|
> Volumes 3GB Provision 3GB of persistent volumes for permanent storage
|
|||
|
|
> Bandwidth 160GB per month See outbound data transfer for regional breakdown
|
|||
|
|
> Anycast IPs Unlimited IPv6, 1 IPv4 per active app Additional IPv4 addresses are $2 per month
|
|||
|
|
> Certificates 10 active certificates Add 10 certificates to your apps
|
|||
|
|
|
|||
|
|
- dyno : 2,340
|
|||
|
|
|
|||
|
|
- ram : 256M
|
|||
|
|
|
|||
|
|
- strage(volume) : 3G
|
|||
|
|
|
|||
|
|
https://fly.io/docs/about/pricing/
|
|||
|
|
|
|||
|
|
fly.ioはかなりherokuを意識しているようで、cliもありますので、herokuと同じように使いやすいと思いました。
|
|||
|
|
|
|||
|
|
herokuからの移行は[こちら](https://fly.io/launch/heroku)から自動で移行するツールがあります。が、これでうまくいくとは思っていません。
|
|||
|
|
|
|||
|
|
注意点としては以下になります。
|
|||
|
|
|
|||
|
|
- herokuとfly.ioで使うメールアドレスを同一のものにすること
|
|||
|
|
|
|||
|
|
これを行わないとfly.ioでherokuのメールアドレスからアカウントが作成された上で、appをdeployします。この際、アカウントにはクレジットカードの登録も必要です。あらかじめfly.ioで作成している場合、そのアカウントは使われません。
|
|||
|
|
|
|||
|
|
fly.ioの`launch/heroku`を使う際はherokuとfly.ioで使うメールアドレスを同一のものにしておきましょう。
|
|||
|
|
|
|||
|
|
さて、ではherokuからの移行ツールが動作するかというと、当然ですが移行ツールでは正常にdeployが完了しませんでした。
|
|||
|
|
|
|||
|
|
したがって、docsを読んで最初からfly.io用にdeployできる構成を作らなければなりません。
|
|||
|
|
|
|||
|
|
### mastodon
|
|||
|
|
|
|||
|
|
> ここではfly.ioでmastodonを正常に動作させるまでをやります
|
|||
|
|
|
|||
|
|
fly.ioでmastodonを動かす場合、(1)memory:512Mにすること、(2)redis-serverを独自に立ち上げることが重要になります。
|
|||
|
|
|
|||
|
|
公式のdockerfileでもdeployは成功しますが、logsを見てみると、redisの処理がうまく行かず、webにアクセスできませんでした。
|
|||
|
|
|
|||
|
|
さらに、独自のアドレスを使う場合は、fly.ioの`apps/xxx/certificates`で証明書を発行した上でCNAMEを追加します。ここまでやって初めて正常に動作しました。
|
|||
|
|
|
|||
|
|
ref : https://github.com/tmm1/flyapp-mastodon
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ fly apps create xxx
|
|||
|
|
$ fly scale memory 512
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
```toml:fly.toml
|
|||
|
|
app = "xxx"
|
|||
|
|
|
|||
|
|
kill_signal = "SIGINT"
|
|||
|
|
kill_timeout = 5
|
|||
|
|
|
|||
|
|
[env]
|
|||
|
|
# WEB_DOMAIN="mstdn.syui.cf"
|
|||
|
|
# LOCAL_DOMAIN="syui.cf"
|
|||
|
|
LOCAL_DOMAIN="xxx.fly.dev"
|
|||
|
|
LANG="en_US.UTF-8"
|
|||
|
|
RAILS_ENV = "production"
|
|||
|
|
RAILS_LOG_TO_STDOUT = "enabled"
|
|||
|
|
WEB_CONCURRENCY = "1"
|
|||
|
|
REDIS_HOST = "xxx-redis.internal"
|
|||
|
|
REDIS_PORT = "6379"
|
|||
|
|
S3_ENABLED=false
|
|||
|
|
SINGLE_USER_MODE=true
|
|||
|
|
OTP_SECRET=""
|
|||
|
|
SECRET_KEY_BASE=""
|
|||
|
|
# LOCAL_HTTPS=false
|
|||
|
|
|
|||
|
|
[deploy]
|
|||
|
|
release_command = "bundle exec rails db:migrate"
|
|||
|
|
|
|||
|
|
[mounts]
|
|||
|
|
processes = ["rails"]
|
|||
|
|
source = "mastodon_uploads"
|
|||
|
|
destination = "/opt/mastodon/public/system"
|
|||
|
|
|
|||
|
|
[processes]
|
|||
|
|
rails = "bundle exec rails s -p 8080"
|
|||
|
|
sidekiq = "bundle exec sidekiq"
|
|||
|
|
|
|||
|
|
[[statics]]
|
|||
|
|
guest_path = "/opt/mastodon/public"
|
|||
|
|
url_prefix = "/"
|
|||
|
|
|
|||
|
|
[[services]]
|
|||
|
|
internal_port = 8080
|
|||
|
|
processes = ["rails"]
|
|||
|
|
protocol = "tcp"
|
|||
|
|
|
|||
|
|
[[services.ports]]
|
|||
|
|
handlers = ["http"]
|
|||
|
|
port = 80
|
|||
|
|
|
|||
|
|
[[services.ports]]
|
|||
|
|
handlers = ["tls", "http"]
|
|||
|
|
port = 443
|
|||
|
|
|
|||
|
|
[[services.tcp_checks]]
|
|||
|
|
grace_period = "1s"
|
|||
|
|
interval = "15s"
|
|||
|
|
restart_limit = 0
|
|||
|
|
timeout = "2s"
|
|||
|
|
|
|||
|
|
[[services.http_checks]]
|
|||
|
|
path = "/health"
|
|||
|
|
grace_period = "1s"
|
|||
|
|
interval = "15s"
|
|||
|
|
restart_limit = 0
|
|||
|
|
timeout = "2s"
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
`OTP_SECRET`, `SECRET_KEY_BASE`は`fly secrets set`したほうがいいです。ですが、secretsは不安定なので、envに書いたほうがいいです。理由は後述します。
|
|||
|
|
|
|||
|
|
私の場合、下記のようにDBを引き継いだのですが、反映されませんでした。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ heroku config
|
|||
|
|
$ fly pg create xxx
|
|||
|
|
$ fly proxy 5432 -a xxx
|
|||
|
|
---
|
|||
|
|
# host=localhost
|
|||
|
|
$ export DATABASE_URL=postgres://xxx:xxx@localhost:5432
|
|||
|
|
$ pg_dump --no-owner -C -d $HEROKU_DATABASE_URL | psql -d $DATABASE_URL
|
|||
|
|
---
|
|||
|
|
$ fly pg attach -a $app $app_db
|
|||
|
|
# DATABASE_URLにsecrets setしている場合はattachは動きません。unsetしてください
|
|||
|
|
$ fly secrets unset DATABASE_URL
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
以前のsecret-keyなどもenvに入れて、`rails db:setup`を実行していません。引き継ぎなのでmigrateの処理を入れています。
|
|||
|
|
|
|||
|
|
しかし、新しくアカウントを作り直すことになったので、最初から初期化してdeployするのがおすすめかもしれません。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ fly pg create --name xxx-pg
|
|||
|
|
$ fly pg attach -a xxx xxx-pg
|
|||
|
|
# fly deploy -c fly.setup.toml
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
次は、redis-serverを作ります。
|
|||
|
|
|
|||
|
|
```toml:fly.redis.toml
|
|||
|
|
app = "xxx-redis"
|
|||
|
|
|
|||
|
|
[[mounts]]
|
|||
|
|
source = "xxx_redis"
|
|||
|
|
destination = "/data"
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
volume sizeが3G以上になる場合、課金が発生します。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ fly apps create xxx-redis
|
|||
|
|
$ fly vol create -c fly.redis.toml xxx_redis --size 1
|
|||
|
|
$ fly deploy --config fly.redis.toml --build-target redis-server
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
dockerからなのか、ちょっとしたことですぐに動かなくなります。例えば、mediaのurlがうまく取得できない場合でもそういった事が起こるので、注意が必要です。問題が発生した場合、pgをresetしたほうが早いです。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ fly vol create mastodon_uploads --size 1
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
# こういったやり方で画像をuploadしている場合は動かなくなる
|
|||
|
|
PAPERCLIP_SECRET="xxx"
|
|||
|
|
PAPERCLIP_ROOT_URL="https://github.com/syui/xxx/raw"
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
最終的には、appを`deploy`します。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ fly deploy
|
|||
|
|
$ fly open
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ fly ssh console
|
|||
|
|
# https://zenn.dev/kumasun/articles/12dcc7b3e91722945228
|
|||
|
|
# 新しくアカウントを作る
|
|||
|
|
$ cd mastodon
|
|||
|
|
$ RAILS_ENV=production bundle exec bin/tootctl accounts create $USER --email=$EMAIL --confirmed --role admin
|
|||
|
|
# 既存のアカウントを上書き
|
|||
|
|
$ RAILS_ENV=production bundle exec bin/tootctl accounts modify $USER --email=$EMAIL --confirm --role admin
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
sidekiqが遅い場合があり、redisが原因だと思われます。しかし、これ以上の方法があるとは思えません。
|
|||
|
|
|
|||
|
|
あと、fly.io(cli)は、バグっているので、まあまあの割合で有効に動作しないことがあります。なにかおかしいと思ったときは、そういうこともあるということで。私の場合、secretsに入れたはずのやつが消えたり、消したはずのやつが残ってたり、DATABASE_URLを消したあとにもattachで追加できなくなったりといったことが頻発しました。
|
|||
|
|
|
|||
|
|
#### mastodon/dockerfile
|
|||
|
|
|
|||
|
|
> 下記からは主にうまく動作しない手順となります。
|
|||
|
|
|
|||
|
|
通常は`fly launch`にてy/NでNにします。こうすることでdockerfileが上書きされず、mastodonのdockerfileを使用します。
|
|||
|
|
|
|||
|
|
```toml:fly.toml
|
|||
|
|
[processes]
|
|||
|
|
web = "bundle exec puma -C config/puma.rb"
|
|||
|
|
worker = "bundle exec sidekiq"
|
|||
|
|
|
|||
|
|
[build]
|
|||
|
|
[build.args]
|
|||
|
|
BUNDLER_VERSION = "2.3.9"
|
|||
|
|
NODE_VERSION = "14"
|
|||
|
|
RUBY_VERSION = "3.0.4"
|
|||
|
|
|
|||
|
|
[deploy]
|
|||
|
|
release_command = "bundle exec rails db:migrate"
|
|||
|
|
|
|||
|
|
[env]
|
|||
|
|
PORT = "8080"
|
|||
|
|
|
|||
|
|
[[services]]
|
|||
|
|
processes = ["web"] # this service only applies to the web process
|
|||
|
|
http_checks = []
|
|||
|
|
internal_port = 8080
|
|||
|
|
protocol = "tcp"
|
|||
|
|
script_checks = []
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
多少、dockerfileを手直ししてdeployすればいいです。postgres, redisのurlをenvに入れておきましょう。これはdockerfileに入れてもfly.ioに入れてもいいです。herokuからの移行は[こちら](https://fly.io/docs/rails/getting-started/migrate-from-heroku/)を参考にしてください。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ ruby -v
|
|||
|
|
$ rbenv install 3.0.4
|
|||
|
|
$ bunlde
|
|||
|
|
|
|||
|
|
$ fly secrets set DATABASE_URL=xxx
|
|||
|
|
$ fly secrets set REDIS_URL=xxx
|
|||
|
|
$ fly deploy
|
|||
|
|
$ fly open
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
#### fly.io/dockerfile
|
|||
|
|
|
|||
|
|
> 下記からは主にうまく動作しない手順となります。
|
|||
|
|
|
|||
|
|
fly.ioが生成するdockerfileを使ってdeployする大まかなヒントです。
|
|||
|
|
|
|||
|
|
> ruby '~> 3.1.0'
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ rbenv install 3.1.0
|
|||
|
|
$ ruby -v
|
|||
|
|
$ bundle
|
|||
|
|
|
|||
|
|
$ fly auth login
|
|||
|
|
$ fly launch
|
|||
|
|
$ fly deploy
|
|||
|
|
> An error occurred while installing idn-ruby (0.1.4), and Bundler cannot
|
|||
|
|
> An error occurred while installing charlock_holmes (0.7.7), and Bundler cannot
|
|||
|
|
...
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
> Dockerfile
|
|||
|
|
|
|||
|
|
```
|
|||
|
|
ARG DEV_PACKAGES="git build-essential libpq-dev wget vim curl gzip xz-utils libsqlite3-dev ffmpeg libicu[0-9][0-9] libicu-dev libidn11 libidn11-dev libpq-dev libxdamage1 libxfixes3 zlib1g-dev libcairo2 libdatrie1 libgdk-pixbuf2.0-0 libgraphite2-3 libharfbuzz0b libpango-1.0-0 libpangocairo-1.0-0 libpangoft2-1.0-0 libpixman-1-0 librsvg2-2 libthai-data libthai0 libvpx[5-9] libxcb-render0 libxcb-shm0 libxrender1 libglib2.0-0"
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
これでやっと通りました。
|
|||
|
|
|
|||
|
|
しかし、`bundle exec rails assets:precompile`で`libicudata.so.67: cannot open shared object file: No such file or directory - /app/vendor/bundle/ruby/3.1.0/gems/charlock_holmes`が出ます。
|
|||
|
|
|
|||
|
|
> Dockerfile
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
ENV OTP_SECRET=xxx
|
|||
|
|
RUN gem pristine --all
|
|||
|
|
|
|||
|
|
ARG PROD_PACKAGES=xxx libglib2.0-0
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
#### postgres
|
|||
|
|
|
|||
|
|
fly-postgres(pg)はpublicではなくprivateです。container内からしかアクセスできません。ただし、localからアクセスする手段があります。それを使いheroku-pgのdumpをfly-pgに追加します。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ heroku config
|
|||
|
|
$ fly pg create
|
|||
|
|
$ fly proxy 5432 -a xxx
|
|||
|
|
---
|
|||
|
|
# host=localhost
|
|||
|
|
$ export DATABASE_URL=postgres://xxx:xxx@localhost:5432
|
|||
|
|
$ pg_dump --no-owner -C -d $HEROKU_DATABASE_URL | psql -d $DATABASE_URL
|
|||
|
|
---
|
|||
|
|
$ fly pg attach --app $app $app_db
|
|||
|
|
# DATABASE_URLにsecrets setしている場合はattachは動きません。unsetしてください
|
|||
|
|
$ fly secrets unset DATABASE_URL
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
#### redis
|
|||
|
|
|
|||
|
|
fly.ioはredisがつらい。もしかしたらherokuのrediscloud使えばいいかも。でも`REDIS_URL`に入れてもうまく動作しなかった。
|
|||
|
|
|
|||
|
|
```sh
|
|||
|
|
$ heroku addons:create rediscloud
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
総評として、herokuがよすぎた。
|
|||
|
|
|
|||
|
|
追記 : 調整することで、fly.ioでもかなり快適に動作するようになりました。ただし、総合的に見てherokuのほうが便利です。fly.ioはherokuより安く運用できるという点で評価できます。
|
|||
|
|
|