2ch特化型サーバ・ロケーション構築作戦 Part28

1 ：root▲▲ ★：2008/04/20(日) 19:04:23 ID:???0 ?DIA(100256)

2ch特化型サーバ・ロケーション構築作戦のスレッドです。

・２ちゃんねるのサーバロケーション、PIEに関する関連作業・調整事項
・DNS登録・変更関連の各種作業や調整事項
・２ちゃんねるのサーバで採用しているOS、FreeBSDに関する情報・調整事項
・各種作戦・プロジェクトとの連携、プロジェクト間の連携

等を取り扱います。

前スレ:
2ch特化型サーバ・ロケーション構築作戦 Part27
http://qb5.2ch.net/test/read.cgi/operate/1200061619/

183 ：root▲▲ ★：2008/05/04(日) 10:03:10 ID:???0 ?DIA(100256)

banana3108 は SCHED_ULE で納品されたので、
私も SCHED_ULE なカーネルを作成しました。

他の maido3 なサーバも、SCHED_ULE なのかしら。
だとしたら「何となく感じが違う」理由も、わかる気がする。

184 ：root▲▲ ★：2008/05/04(日) 10:34:49 ID:???0 ?DIA(100256)

いきなりおちた、、、。< banana3108

まさか、SCHED_ULEが問題?

185 ：root▲▲ ★：2008/05/04(日) 11:01:11 ID:???0 ?DIA(100256)

緊急用に、SCHED_4BSD なカーネルも作っておこう。@ banana3108

186 ：root▲▲ ★：2008/05/04(日) 23:13:28 ID:???0 ?DIA(100256)

2ch サーバーダウン（鯖落ち）情報　part195
http://qb5.2ch.net/test/read.cgi/operate/1209117581/553-554

SCHED_4BSD なカーネルに入れ替え。

それでもまだ起こるようなら、/etc/make.conf の、

CPUTYPE=core2

をはずす予定。

187 ：root▲▲ ★：2008/05/05(月) 10:16:43 ID:???0 ?DIA(100256)

>>186
2ch サーバーダウン（鯖落ち）情報　part195
http://qb5.2ch.net/test/read.cgi/operate/1209117581/596

ということに。

188 ：root▲▲ ★：2008/05/05(月) 10:54:23 ID:???0 ?DIA(100256)

こっちにも貼っておこう。

2ch サーバーダウン（鯖落ち）情報　part195
http://qb5.2ch.net/test/read.cgi/operate/1209117581/616
> 現状のまとめ:
> ・CPUTYPE=core2 が指定されていると、64bit 環境では毒入りのバイナリができる模様。
> ・現在、カーネルについては別サーバからファイルをコピーし、毒を抜くのに成功。
> ・これから、カーネル以外の全バイナリの毒を抜く必要がある。
> ・ちなみにmaido3 なサーバでは、CPUTYPE=core2 に加え、
> CFLAGS= -O -pipe
> COPTFLAGS= -O -pipe
> も同時に指定されていたため、
> オプティマイズがデフォルトの -O2 から一段階「手加減」されていて、
> かつ、カーネル以外は作り直していないので、たまたま被害を免れた模様。
> ということで、gcc のバグか仕様変更なのではないかと推測。
> ちなみに CPUTYPE=core2 をつけると、
> -march=nocona というオプションが gcc に付加される模様。

189 ：root▲▲ ★：2008/05/05(月) 13:28:14 ID:???0 ?DIA(100256)

今回の件の補足:

いただいたサーバの /etc/make.conf には、

CPUTYPE=core2
CFLAGS= -O -pipe
COPTFLAGS= -O -pipe

という設定が入っていました。

で、私は今まで、上記3行は何の設定もしていませんでした。
(システムのデフォルトでした)

で、CPUTYPE=core2 と入っているのを尊重して、

CPUTYPE=core2

だけを設定してみたのでした。
(CFLAGS や COPTFLAGS は -O2 が標準なのを知っていたので、設定しないほうがいいと思った)

そしたら毒が入ってしまった、ということの模様。

190 ：root▲▲ ★：2008/05/05(月) 13:40:55 ID:???0 ?DIA(100256)

で、毒は無事抜けた模様。

ちなみに SCHED_ULE にはなっていたり。

191 ：root▲▲ ★：2008/05/05(月) 13:50:32 ID:???0 ?DIA(100256)

ちなみに現在の banana3108 の /etc/make.conf

# added for 2ch
SUP=/usr/bin/csup
SUP_UPDATE=yes
#SUPHOST=cvsup4.freebsd.org
SUPHOST=cvsup.peko.2ch.net
SUPFILE=/usr/src/standard-supfile
SUPFLAGS=-g -L 2
# ports are now under control of portsnap.
PORTSSUPFILE=/usr/share/examples/cvsup/ports-supfile
# Thank you for http://qb.2ch.net/test/read.cgi/operate/1062137886/39
WITHOUT_X11=yes
WITH_APACHE2=yes
#XXX#CPUTYPE=core2
# kernel config file1
#KERNCONF=AMD64_TBANANA_70_INTEL
KERNCONF=AMD64_TBANANA_70_INTEL_ULE
# added by use.perl 2008-05-04 20:37:01
PERL_VER=5.8.8
PERL_VERSION=5.8.8

192 ：root▲▲ ★：2008/05/05(月) 14:10:25 ID:???0 ?DIA(100256)

>>191
> # ports are now under control of portsnap.

このコメント、意味が変ですね。
oyster901 では次の行がコメントになっているです。

193 ：root▲▲ ★：2008/05/05(月) 14:11:28 ID:???0 ?DIA(100256)

改めて、今の /etc/make.conf

# added for 2ch
SUP=/usr/bin/csup
SUP_UPDATE=yes
#SUPHOST=cvsup4.freebsd.org
SUPHOST=cvsup.peko.2ch.net
SUPFILE=/usr/src/standard-supfile
SUPFLAGS=-g -L 2
PORTSSUPFILE=/usr/share/examples/cvsup/ports-supfile
# Thank you for http://qb.2ch.net/test/read.cgi/operate/1062137886/39
WITHOUT_X11=yes
WITH_APACHE2=yes
#XXX#CPUTYPE=core2
# kernel config file
#KERNCONF=AMD64_TBANANA_70_INTEL
KERNCONF=AMD64_TBANANA_70_INTEL_ULE
# added by use.perl 2008-05-04 20:37:01
PERL_VER=5.8.8
PERL_VERSION=5.8.8

194 ：root▲▲ ★：2008/05/05(月) 20:32:36 ID:???0 ?DIA(100256)

2ch サーバーダウン（鯖落ち）情報　part195
http://qb5.2ch.net/test/read.cgi/operate/1209117581/756-761

ということで、いただいた banana3108 サーバですが、
何らかのハードウェア異常がある可能性が、高くなってしまいました。

連休明けまでは、リブート要請(2.0)でクリアするしかなさそうなかんじです、、、。

195 ：動け動けウゴウゴ２ちゃんねる：2008/05/06(火) 04:36:50 ID:lJfzDaZ+0

またどくおさんの修羅場が始まるのか。

196 ：動け動けウゴウゴ２ちゃんねる：2008/05/08(木) 17:00:50 ID:ObWI7aidP

連休明けたんだけど banana3108 何とかしてださい＞＜

2ch サーバーダウン（鯖落ち）情報　part196
http://qb5.2ch.net/test/read.cgi/operate/1210076267/

197 ：root▲▲ ★：2008/05/09(金) 20:16:14 ID:???0 ?DIA(100256)

DNSの設定変更をお願いします。

・収容ホスト変更に伴うバーチャルホスト移転

(現状)
+academy6.2ch.net:206.223.150.161:300
+science6.2ch.net:206.223.150.161:300
+society6.2ch.net:206.223.150.161:300

(変更後)
+academy6.2ch.net:206.223.152.60:300
+science6.2ch.net:206.223.152.60:300
+society6.2ch.net:206.223.152.60:300

198 ：ピロリ：2008/05/09(金) 20:17:44 ID:hr4+oABy0

はいはい

199 ：ピロリ：2008/05/09(金) 20:29:58 ID:hr4+oABy0

おわりました。

200 ：root▲▲ ★：2008/05/09(金) 20:46:51 ID:???0 ?DIA(100256)

今回、

# CPU type
CPUTYPE=core2

を有効にしました。

一日中負荷テストやっても問題なかったので、
特に問題ないような気がします。

Google 等で見てもそれで 64bit が毒入りになったという例は
見つかりませんでした。

なお、今回他にもいくつか新機軸入れてみましたが、そのへんはおいおいここで。

201 ：root▲▲ ★：2008/05/09(金) 22:05:54 ID:???0 ?DIA(100256)

DNSの設定変更をお願いします。

・収容ホスト変更に伴うバーチャルホスト移転

(現状)
+love6.2ch.net:206.223.152.90:300

(変更後)
+love6.2ch.net:206.223.152.60:300

202 ：ピロリ：2008/05/09(金) 22:07:15 ID:hr4+oABy0

へいへい

203 ：ピロリ：2008/05/09(金) 22:17:53 ID:hr4+oABy0

おわた

204 ：root▲▲ ★：2008/05/09(金) 22:40:10 ID:???0 ?DIA(100256)

>>193 更新します。

# added for 2ch
SUP=/usr/bin/csup
SUP_UPDATE=yes
#SUPHOST=cvsup4.freebsd.org
SUPHOST=cvsup.peko.2ch.net
SUPFILE=/usr/src/standard-supfile
SUPFLAGS=-g -L 2
PORTSSUPFILE=/usr/share/examples/cvsup/ports-supfile
# Thank you for http://qb.2ch.net/test/read.cgi/operate/1062137886/39
WITHOUT_X11=yes
WITH_APACHE2=yes
# CPU type
CPUTYPE=core2
# kernel config file
#KERNCONF=AMD64_TBANANA_70_INTEL
KERNCONF=AMD64_TBANANA_70_INTEL_ULE
# added by use.perl 2008-05-04 20:37:01
PERL_VER=5.8.8
PERL_VERSION=5.8.8

205 ：root▲▲ ★：2008/05/09(金) 22:57:42 ID:???0 ?DIA(100256)

メモ: ジンギスカン化と解除の方法、うわーん

■ サーバリフレッシュ工事 連絡・作業スレッド１０
http://qb5.2ch.net/test/read.cgi/operate/1199792685/798-799

http://qb5.2ch.net/test/read.cgi/operate/1199792685/798
> ジンギスカン化の方法
> 例) news
> 1) rename news ZZZ-news
> 2) test/_mなんたら.cgi をコマンドラインで叩く
> 3) newsを板復帰したら
> はい出来上がりー

http://qb5.2ch.net/test/read.cgi/operate/1199792685/799
> 戻すとき
> 1) rm news でシンボリックリンクをはずす
> 2) rename ZZZ-news news
> 3) newsを板復帰したら
> はい出来上がりー

206 ：root▲▲ ★：2008/05/09(金) 23:09:15 ID:???0 ?DIA(100256)

■ banana3260 の新機軸一覧

・SCHED_ULE (新スケジューラ)
・CPUTYPE=core2 (Core 2 Duoに特化したバイナリ)
・Apache 2.2.8 (2.0系よりよいという噂)

207 ：root▲▲ ★：2008/05/09(金) 23:10:04 ID:???0 ?DIA(100256)

ほんとうは worker_mpm も試したかったけど、
それは試さず(従来のprefork MPM)。

208 ：root▲▲ ★：2008/05/09(金) 23:19:43 ID:???0 ?DIA(100256)

で、read.cgi や offlaw.cgi や *.so はどうせ32bitとは互換性がないので、
Apache 2.2にするのも、いいんじゃないかなと。

209 ：root▲▲ ★：2008/05/09(金) 23:33:36 ID:???0 ?DIA(100256)

あとやろうと思っているのは、
/md の tmpfs 化だけど、まだこわいかなと。

210 ：root▲▲ ★：2008/05/10(土) 08:35:14 ID:???0 ?DIA(100256)

らぷたーの150Gものって、SATA150だったのね。
すんませんでした。＞どくおさん

しかし、300Gの1万回転か。たのしみたのしみ。

211 ：動け動けウゴウゴ２ちゃんねる：2008/05/10(土) 10:10:21 ID:kXCK5k+r0

あれってヒートシンクがでかいだけで中身は2.5インチなんだよね

212 ：stream ◆PNstream2s ：2008/05/10(土) 10:32:00 ID:thAxlD0g0

Worker MPM といえば
今月中にリリースされる予定の2.2.9では、高負荷時にクラッシュするバグが修正されてます

http://svn.apache.org/repos/asf/httpd/httpd/branches/2.2.x/CHANGES
*) Worker / Event MPM: Fix race condition in pool recycling that leads to
segmentation faults under load. PR 44402
[Basant Kumar Kukreja <basant.kukreja sun.com>]

と思ったけど過去ログ見ると
http://qb5.2ch.net/test/read.cgi/operate/1145114275/296
これと同じな気がしますが

213 ：動け動けウゴウゴ２ちゃんねる：2008/05/10(土) 12:16:51 ID:T4mEeHsq0

ほぼすべてのBSDに存在してきたseekdir()のバグが25歳で死す
http://slashdot.jp/it/article.pl?sid=08/05/09/2114204

>4.2BSD 以来すべての BSD libc (Mac OS X も含む) には、unlink() のタイミングなど特定の条件下でseekdir() が不正な値を返すバグがあり、Open/Net/Free/Dragonfly BSD で修正されました。

214 ：root▲▲ ★：2008/05/10(土) 19:38:39 ID:???0 ?DIA(100256)

LA が高くなるのに全く重い気がしないのは、
SCHED_ULE の癖なんだろうか。< banana3260

215 ：動け動けウゴウゴ２ちゃんねる：2008/05/10(土) 20:10:13 ID:ogaKRz7V0

Google モバイル検索についてのウェブマスター向け情報
ttp://googlejapan.blogspot.com/2008/05/google.html

216 ：root▲▲ ★：2008/05/10(土) 20:10:46 ID:???0 ?DIA(100256)

>>215
おー、あとでじっくり研究してみるです。

217 ：root▲▲ ★：2008/05/10(土) 23:23:18 ID:???0 ?DIA(100256)

■ サーバリフレッシュ工事 連絡・作業スレッド１０
http://qb5.2ch.net/test/read.cgi/operate/1199792685/841-844

FreeBSD 7.0Rからは6.3Rぐらいまでは使えていた、

xntpd_enable="YES"

ではだめで、

ntpd_enable="YES"

と書かなければいけなくなった模様。

218 ： ◆TWARamEjuA ：2008/05/11(日) 01:39:16 ID:kuMiqLHt0

>>213
BBQ、Rock54装置で不調だったunlink動作は、そのせいだったのかなぁ。。。
●家の鯖機(Vine linux4.2)
　unlink filename; # すぐ削除される。
●BBQ、Rock54装置(FreeBSD4,5,6)
　unlink filename while -f filename; # チェックしておかないと消されない(´･ω･`)
　SIGTERMとかも、ignoreしないと変だった。。。

219 ：root▲▲ ★：2008/05/11(日) 03:39:09 ID:???0 ?DIA(100256)

>>218
unlink の動作がおかしいのは、bbs.cgi でもそうでしたね。

明日にでも該当部分ここに貼るです。

220 ：root▲▲ ★：2008/05/11(日) 22:55:56 ID:???0 ?DIA(100256)

重い重い重い重い重い重い重い×53＠運用情報
http://qb5.2ch.net/test/read.cgi/operate/1208599812/514

ということで、au oneユーザの方々にできることは、
au oneの技術担当窓口に対して、たんたんと冷静に(重要)、
文章で依頼を出すことなのではないのかなと思います。

以下は私が即席・かつ適当に作った文例になります。
あまりいい文面ではないかもしれませんが、
au oneユーザの方々は、そのままコピペして使っていただいてかまわないです。

ただし、そのことによりユーザの方々がKDDIさんに何か言われたり
不利益をこうむったとしても、私はその責任は一切取ることができないです。

--- ここから

KDDI株式会社 au one顧客サービスご担当様:

au oneユーザのxxxxと申します。お世話になっております。

先日、Windows XP SP3が公開されて以来、特に夜間において２ちゃんねるへの
接続速度が遅くなっており、大変困っております。

また、数ヶ月前より同様に夜間の時間帯において、２ちゃんねるへの接続がス
ムーズにいかない状況がしばしば発生しているため、困惑しております。

ちなみに、２ちゃんねるを利用しているOCNさんやODNさんのユーザの方々の話
では、御社とは異なり、２ちゃんねるへの接続速度が遅くなる現象は発生して
いない、ということでした。

２ちゃんねるでボランティアをされている技術者の方に聞いたところでは、
OCNさんやODNさんは２ちゃんねるがサーバを設置しているパシフィック・イン
ターネット・エクスチェンジ(PIE)社さんという、米国のデータセンターに直接、
ピアリングによるリンクを保有しているため、スムーズに接続ができているの
ではないか、とのことでした。

ということでもしよろしければ御社でもPIE社へのピアリング接続を是非、ご検
討いただければ、大変幸いです。

差し出がましいようですが、今回のピアリングにより御社のユーザサービスレ
ベルの向上、ひいてはカスタマーサービスレベルの向上にも役立つのではない
かと考えます。

Webによると、PIE社への連絡先は以下のとおりのようです。なおPIE社は、サン
フランシスコの200 Paulというデータセンターを使用しているあるため、PAIX
経由での接続が可能であるようです。

http://www.pie.us/?page=contact
http://www.pie.us/?page=peering

大変不躾なお願いで申し訳ございませんが、上記の件、何卒前向きにご検討の
ほど、よろしくお願い申し上げます。

(ここに自分の名前)

--- ここまで

221 ：※：2008/05/11(日) 23:00:08 ID:GNykqaVy0

うふっ♪

＞フランシスコの200 Paulというデータセンターを使用しているあるため、PAIX

フランシスコの200 Paulというデータセンターを使用しているため、PAIX

222 ：root▲▲ ★：2008/05/11(日) 23:00:52 ID:???0 ?DIA(100256)

>>221
ありゃー。すんません。
他にありますかね。

223 ：root▲▲ ★：2008/05/11(日) 23:02:36 ID:???0 ?DIA(100256)

なおしてみた。

--- ここから

KDDI株式会社 au one顧客サービスご担当様:

au oneユーザのxxxxと申します。お世話になっております。

先日、Windows XP SP3が公開されて以来、特に夜間において２ちゃんねるへの
接続速度が遅くなっており、大変困っております。

また、数ヶ月前より同様に夜間の時間帯において、２ちゃんねるへの接続がス
ムーズにいかない状況がしばしば発生しているため、困惑しております。

ちなみに、２ちゃんねるを利用しているOCNさんやODNさんのユーザの方々の話
では、御社とは異なり、２ちゃんねるへの接続速度が遅くなる現象は発生して
いない、ということでした。

２ちゃんねるでボランティアをされている技術者の方に聞いたところでは、
OCNさんやODNさんは２ちゃんねるがサーバを設置しているパシフィック・イン
ターネット・エクスチェンジ(PIE)社さんという、米国のデータセンターに直接、
ピアリングによるリンクを保有しているため、スムーズに接続ができているの
ではないか、とのことでした。

ということでもしよろしければ御社でもPIE社へのピアリング接続を是非、ご検
討いただければ、大変幸いです。

差し出がましいようですが、今回のピアリングにより御社のユーザサービスレ
ベルの向上、ひいてはカスタマーサービスレベルの向上にも役立つのではない
かと考えます。

Webによると、PIE社への連絡先は以下のとおりのようです。なおPIE社は、サン
フランシスコの200 Paulというデータセンターを使用しているため、PAIX経由
での接続が可能であるようです。

http://www.pie.us/?page=contact
http://www.pie.us/?page=peering

大変不躾なお願いで申し訳ございませんが、上記の件、何卒前向きにご検討の
ほど、よろしくお願い申し上げます。

(ここに自分の名前)

--- ここまで

224 ：※：2008/05/11(日) 23:07:35 ID:GNykqaVy0

>>222
誤字脱字はないと思いますわ♪

あとは多くの人が要望しないとベストエフォート型ということで弾かれるでしょうね。

225 ：root▲▲ ★：2008/05/11(日) 23:22:34 ID:???0 ?DIA(100256)

>>224
ありがとうございます。

> あとは多くの人が要望しないとベストエフォート型ということで弾かれるでしょうね。

そうですね。

企業を動かすためには、より多くのお客様がその需要を持っているんだ、
ということをきちんと見える形で示すことが、たぶん重要でしょうから。

226 ：※：2008/05/12(月) 00:10:19 ID:MYynd4Au0

もともとISP−エンドユーザ間の通信が遅いADSLなんかは実感はないって感じですかね。

たまに詰まる感じもあったけど、別段遅いって思ったことはなかったわ。
http://qb5.2ch.net/test/read.cgi/operate/1210515578/6

レスポンスタイムは http://qb5.2ch.net/test/read.cgi/operate/1210515578/29 と同じなのに、、、

まぁそれもそうよね、10倍以上違うんだもの（涙)

227 ：動け動けウゴウゴ２ちゃんねる：2008/05/12(月) 00:15:38 ID:ruafVtf50

異変に気が付いたのは高速回線な連中と携帯だけなのね
道理で苦情があの程度の数で済んでると思ったわ

228 ：root▲▲ ★：2008/05/12(月) 15:31:55 ID:???0 ?DIA(100256)

DNSの設定変更をお願いします。

・収容ホスト変更に伴うバーチャルホスト移転

(現状)
+mamono.2ch.net:207.29.253.220:300

(変更後)
+mamono.2ch.net:207.29.247.30:300

229 ：ピロリ：2008/05/12(月) 15:32:23 ID:euvkO1wZ0

ほーい

230 ：ピロリ：2008/05/12(月) 15:53:51 ID:euvkO1wZ0

できた

231 ：root▲▲ ★：2008/05/12(月) 16:05:34 ID:???0 ?DIA(100256)

>>230
確認しますた。

今のところ、魔物二世は順調の模様。

/md を tmpfs という、FreeBSD 7.0 で入った新しい仕組みでやっています。
他は banana3260 と同じ。

232 ：動け動けウゴウゴ２ちゃんねる：2008/05/12(月) 16:10:55 ID:jnxCyb3l0

>>211
他の一万回転も中身2.5'だったりしますから
コストダウンとしては正当かと

一万五千回転のやつは中身1.8'ﾌﾟｯﾀﾗだったっけな