UNIX/Server

外部サーバ†

• 基本スペック さくらの512Mからスタートし、2016年中盤から2G。2018/05からお名前.comメイン利用

最近は外部サーバーがメインで構築Ansible化してから移行が自動化されたので頻繁に移行する日々。

2017†

2018†

歴代の自宅サーバー†

2002/12ぐらいにマシンを買って、めずらしく金をかけてファンレスにして試運転開始。初期のころは割とマシンがおかしくなるケースがあったけど、リムーバブルケースをやめてからはほぼトラブル皆無。通算稼働1000日越えも当たり前に。2010年ごろからメインは外部サーバーに移したので、軽い用途中心だが、ファイルサーバーはもはや手放せない。DN2820まではMAX2GBのサーバーが多かったが、一気に8GBで贅沢にいろいろ実験できる。

移行†

Server/移行

通算稼働記録(2015/07/28 現在)†

マシン†

OS†

連続稼働記録 (2016/04/14)†

上位10傑†

利用中サーバー機能†

自宅†

• 利用比率と重要性の高いもの順。2010年からレンタルサーバに移してからは内部用途中心

1. Subversion(mod_svn)
2. Samba
3. bind

外部†

1. Webサーバー(PHP+Postgres+Blog)
2. WordPress
3. PostgreSQL
4. MySQL
5. CakePHP
6. バッチ

主要ソフトのサーバー移行手順†

1. HTMLデータ(wiki,phpも含む）
2. 秘密鍵データ
3. データベース
4. cron関係(DDNSアップデートとbackupスクリプト)
5. bind
6. squid
7. BASIC,DIGEST認証情報

我が家のサーバ移行の手順†

さすがに１０数回も移行をしていると決まった手順があるのでそれをまとめた。

1. 主要ソフトのインストール
2. 公開鍵の移動(.ssh/authorized_keys)
3. cron(/etc/cron.d,/etc/cron.daily)
4. crontab -eでcron追加する。
5. SVN
6. SSLの鍵
7. メールサーバーの設定

2011/10の移行†

1. SVNを移行した。Apacheの設定、SVN用ディレクトリの作成、権限付与、SVNリポジトリ移動
2. レンタルサーバ用バックアップ秘密鍵移植
3. cron.daily,cron.dのシェル移動、crontab -eの登録

今後の計画†

• 2006年後半からTUに最後の一仕事（壊れるまでがんばってもらう）
• celeronを常にrsyncでミラーしてスタンバイ体制
• 販売終了してしまう前か2007年夏までにturion64静音マシン購入
• のつもりだったけどTerminatorPen4譲り受けて既存マシンでローテーション
• XS35を2011年後半からメイン利用。Epoxがサブ候補。そろそろVT対応のサーバーにしたい！
• 将来的にXH61系がパワフルサーバーマシンとして活躍する予定。高いのでNUCまでは必要ないと思ったが、15000円以下のNUCが手に入ったので、それを2015/05より利用。

運用履歴†

トラブル履歴†

2017/02/24†

• A1に下げたがサービスが動き過ぎていたため、いろいろなプロセスが殺される状況であった。とりあえずmariadb再起動したが、また落ちたため、夜に根本対応(kibana,es,td-agent)

Feb 24 05:56:54 FebAzure2 kernel: Out of memory: Kill process 30491 (mysqld) score 101 or sacrifice child
Feb 24 05:56:54 FebAzure2 kernel: Killed process 30491 (mysqld) total-vm:1188868kB, anon-rss:173876kB, file-rss:0kB, shmem-rss:0kB
Feb 24 05:56:56 FebAzure2 mysqld_safe: /usr/bin/mysqld_safe: line 183: 30491 Killed                  nohup /usr/libexec/mysqld --basedir=/usr --datadir=/var/lib/mysql --plugin-dir=/usr/lib64/mysql/plugin --log-error=/var/log/mariadb/mariadb.log --pid-file=/var/run/mariadb/mariadb.pid --socket=/var/lib/mysql/mysql.sock < /dev/null >> /var/log/mariadb/mariadb.log 2>&1 >> /var/log/mariadb/mariadb.log 2>&1

Feb 24 18:12:57 FebAzure2 kernel: Out of memory: Kill process 50701 (mysqld) score 95 or sacrifice child
Feb 24 18:12:57 FebAzure2 kernel: Killed process 50701 (mysqld) total-vm:1191648kB, anon-rss:163144kB, file-rss:0kB, shmem-rss:0kB
Feb 24 18:13:00 FebAzure2 mysqld_safe: /usr/bin/mysqld_safe: line 183: 50701 Killed                  nohup /usr/libexec/mysqld --basedir=/usr --datadir=/var/lib/mysql --plugin-dir=/usr/lib64/mysql/plugin --log-error=/var/log/mariadb/mariadb.log --pid-file=/var/run/mariadb/mariadb.pid --socket=/var/lib/mysql/mysql.sock < /dev/null >> /var/log/mariadb/mariadb.log 2>&1 >> /var/log/mariadb/mariadb.log 2>&1 >> /var/log/mariadb/mariadb.log 2>&1

nodeが殺されたのちmysqlも！

2014/11/08の高負荷†

2014-11-08 09:35:01,20
2014-11-08 09:40:03,24
2014-11-08 09:45:12,53
2014-11-08 09:50:10,41
2014-11-08 09:55:10,59
2014-11-08 10:00:03,24
2014-11-08 10:05:28,62
2014-11-08 10:10:47,62
2014-11-08 10:15:40,70
2014-11-08 10:20:44,72
2014-11-08 10:25:43,79
2014-11-08 10:30:29,79
2014-11-08 10:35:03,79
2014-11-08 10:40:46,79
2014-11-08 10:50:25,84
2014-11-08 10:56:11,93
2014-11-08 11:27:26,116
2014-11-08 11:45:57,116
2014-11-08 12:11:43,115
2014-11-08 12:40:57,110
2014-11-08 12:50:40,100
2014-11-08 12:55:43,97
2014-11-08 13:32:31,114
2014-11-08 15:11:33,122

Nov  8 11:02:21 www4052ue kernel: httpd invoked oom-killer: gfp_mask=0x200da, order=0, oom_adj=0, oom_score_adj=0

No

cat access_log | cut -d ' ' -f 1 | sort | uniq -c


82.80.249.170からすさまじいアクセス。2683

この時点ですでにアクセスできなくなっていたとおもわれる。

grep "82.80.249.170" access_log-20141109 | cut -d ' ' -f 4 | sort | uniq -c | sort

時間単位で見てみると秒間５０アクセスくらって死亡している模様。

2015/05/19 高負荷†

• プロセス数

2015-05-19 12:45:01,23
2015-05-19 12:50:20,66
2015-05-19 12:55:11,77

DOS対策†

mod_evasive,mod_dosdetector

1309 移行計画†

• 初回インストールから1年半近くたつので、心機一転再インストールをしたい。いったん自宅サーバーにすべて移行して、負荷状況を見てみたい。

• 空室情報バッチの移植
• Wordpressのakismetのアカウント情報保存

保存すべきもの†

1. サーバー秘密鍵
2. SSH用公開鍵
3. CRON設定
4. SVN
5. MySQL
6. PostgreSQL

自宅に移してもよいもの†

1. CakePHP
2. 家計簿ツール(Postgres)

移行作業に慎重な検証と手順を要するもの†

1. WordPress
2. 旧MTコンテンツ

インストールパッケージの確認†

grep Installed /var/log/yum.log*

設定ファイルの保存†

1402移行†

より高負荷に耐えられる構成にして、リリースしたい。

MySQL落ちる問題†

2016/12/17†

InnoDB: Fatal error: cannot allocate memory for the buffer pool

各サーバーの役割†

外部サーバー†

1. 公開web情報
2. 公式SVN

自宅サーバー†

1. 内部SVN(バイナリ）
2. ファイルサーバー
3. 外部サーバーバックアップ
4. 実験

*メニュー編集

コンピュータ関係

• DataBase
• Linux
• PC-UNIX
• Programming
• PC情報

その他趣味系(別wiki)

• 自動車
• 温泉
• スキー情報

外部リンク

• 旧　技術メモブログ
• 新　技術メモブログ
• ランチブログ
• NIFTYにあるHP
• 旅行記写真館

今日の訪問 2

オンライン人数 1

最新の20件

人気の20件

今日の20件