2013年05月30日

yum reinstall kernel

10GbEがどうにもエラーで落ちるので色々調べて、ドライバのバージョンが違うっつーかどうも違うの入れたのか的な。1.5.10のはずが2.0ってことに。
http://www.mellanox.com/related-docs/prod_software/MLNX_EN_Linux_README.txt
んで、入れ直そうとしてもエラーでハネられる。
動かしてるサーバは対応外のCentOS6.4だけど、install.shではCentOS6.4をrhel6u4として判別して進めるっぽいんだけどダメっぽい。
なのでやったことないカーネルのダウングレードをやってみた。
/etcとか/usr/localほにゃららとか適当にヨソのサーバへコピー。そして以下のサイトを見ながら作業したった。
「KVM環境 CentOS 6.4 から CentOS 6.3 へのダウングレード 編」
http://ameblo.jp/kurabeat/entry-11507296876.html
さてmlxn_eを入れるかってんで、./install.sh 叩くと2.6.32-358のカーネルのソース無いからダメーって。おいおいとまてよと、探しに行く。
/usr/src/kernel/2.6.32-279.22.1.el6.x86_64
あれー? ソースは6.3だけど、動いてるのは6.4のままだよ。
まだ何か要るのね。カーネルのビルドとか必要なんかい、これもやったことねぇな、えーと、こういうときはyum downgrade?
なんかうまくいかないので、yum reinstall kernel でなんとか。
http://mattiasgeniar.be/2012/07/23/reinstall-the-linux-kernel-on-centos-or-rhel/
なんて好き勝手な手探り感。
アレやな、20年前の学生んときに研究室のサーバを弄らせてもらえんかった反動か。
高専出の新人助手が全部仕切りたがってて触らせてもらえんかったもんなぁ。
posted by あまおかさん at 15:08 | Comment(0) | server

2013年05月26日

lvmのrename

最近のCentOSをインストールする際、/bootやswapなんかもバッシバシとLVMで作られます。
なので、VolGroup00が気に入らないからってんで適当に変えるとブート時に転ける。ハハハ

会社の電気設備点検で停電後、リブートしたらカーネルパニックってんで焦った。
んでLiveCDで立ち上げてvar/log/dmesgとブート時のパラメータ見て、そういや変えてたわと。

HDD追加挿しでLVM使ってVG作ったとき、HDD間違えない様にsdaとsdbなんてのを付けなおしたのを思い出したわけですよ。アホや

そしてバックアップで固めたシステムを、ゴソっとリストアするときにも失敗しそうな予感。
posted by あまおかさん at 17:43 | Comment(0) | server

2013年05月24日

FC-RAIDから10GbEのNFSサーバに

現場のサーバのストレージをFC-RAID(4Gb/RAID6/SATA 3TBx12)から、10GbE経由のNFSサーバ(SATA RAID0+1)に切り替えてみた。
現状、本体のRHELでのload averageはそこそこ、速度も想定通りの速度が出ててレスポンス激遅も発生してない。

これまで、やたら負荷が高まってたのは、FCアレイコントローラのドライバが腐ってるのか、RAID6で12本とかワロスなのか、ボードとDL380G7の相性悪いのか、FCのmultipathの処理が重いのか、RAIDのキャッシュ周りの設定が外れだったのか。

数GBのデータを複数台から投げたり、PDFやPostscriptファイル作るのにサーバからデータを読み込む時に負荷が高まって激遅になってたので、RAIDのチューニングかFCのコントローラ設定をどうにかすりゃええのんかなー的な思いつきはある。RAID6だし、どうやってもwriteは遅いだろうけど、readで重すぎなのは納得しかねると。

ただ、使ってたRAID箱は5年ものなわけで、あんまし使い続けるのもナー。
そしてこのままだとXerveRAIDにつづいて、新たなFC-RAID箱が腐る。
posted by あまおかさん at 10:43 | Comment(0) | server

2013年04月15日

不要になったデータを探す

DTP作業用のファイルサーバ(6TB)には隠しファイル含めて約250万ファイルが転がってる。
ファイル数が多すぎるからか、OSXのスポットライトで検索かけると全く戻ってこないどころか猛烈な勢いでサーバに負荷がかかる。
さっと探せばすぐ見つかるなら良いけど、待っても反応無しどころかデスクトップが固まりサーバも動きが遅くなる。ギャース

日常業務的な検索&削除作業が全然捗らなくてストレスが超マッハですよ。
なにせ弊社製版部門では入稿データはサーバに留めて下版まで取っとくワーフフロー。
入稿データつってもアレだ、DVDやなんかの中身を日付毎につっこんどいて、そこから複製とって製版作業を行うわけですよ。コレやっとくとやってもうたミスや事故で巻き戻れるし色々都合いいんすわ。

でもサーバでアホみたいに場所取る。Illustratorがレイアウトになってる仕事とか見開き2ページで500MBとか普通ですし。
なので下版したらさっさと捨てるべき。
だけど、下版して手が離れたらすっぽり忘れるのが人の常。

そうなると条件付けての検索かけてざっくり消したいところだけど、サーバを検索かけると超負荷&処理落ち。むぐぐ

しょうがないのでサーバ(RHEL5)のほうで探す。
find パス名 -name "先方" -ctime +4
  • findはファイル検索コマンド
  • -nameは検索文字列。弊社では「先方」「先方データ」ってフォルダを作って入稿データをそれぞれの案件のフォルダに保存してる
  • -ctime +4は最終更新日が4日より以前
「入稿されるデータを保管するフォルダが4日以上触られてないならヒット」のルール。
でもfindも重いデスヨネーってことで、深夜にファイルに書き出してる。削除作業は人が見ながらちまちまと。
なにせ、広告原稿だけ2週間近く早く入ってしばらく放置とかあるもんですし。

ファイルを探すだけならlocateのほうが速いけど、アレってファイル名が分かってて、それがどこにあるのかって検索だしなー。

#Windowsならほとんど負荷かからずに適当に検索で出てくるので、それがksdが怪しいなーという裏付けのない推察の根拠になっており


posted by あまおかさん at 13:58 | Comment(0) | server

2013年03月29日

LVM on RAID1とRAID1 on LVM

http://d.hatena.ne.jp/den8/20100727/1280232047

整理と作業しやすいだろうってんでサーバのボリュームを1つにまとめたらI/O待ちが大変なことになったので、再び分散する予定。
ネットワークを10G化すれば、SANつーか裏では別サーバのボリュームを混ぜてもなんとかなるかなーとか。でも別サーバのボリュームの速度はあげとかんといかん。
なのでRAID1でミラーしときたいんだけど、どういう構成にするかってんで悩む。速度的な意味でどっちがええのかと。
http://www.joshbryan.com/blog/2008/01/02/lvm2-mirrors-vs-md-raid-1/

http://www.gagme.com/greg/linux/raid-lvm.php
http://www.jukie.net/bart/blog/lvm2-on-raid1
posted by あまおかさん at 10:01 | Comment(0) | server