させているブログ

セキュリティグループ毎の上限値(AWS)

2012-02-02T23:40:00.004+09:00

あまり上限を超えることはないのですが、

ＶＰＣ内のセキュリティグループにルール追加したら

以下のようなエラーになりました。

The maximum number of rules per security group has been reached.

どうやら上限を超えたようです。

ＶＰＣ内の１セキュリティグループはデフォルトは５０で

申請ベースで増やせるようです。

http://aws.amazon.com/contact-us/vpc-request/

ＶＰＣの各種制限値はここで確認できます。

http://docs.amazonwebservices.com/AmazonVPC/latest/UserGuide/index.html?VPC_Appendix_Limits.html

また、ＶＰＣ用でないセキュリティグループは

上限が１００となっているようでした。

http://docs.amazonwebservices.com/AWSEC2/latest/UserGuide/using-network-security.html#concepts-security

「Note You can create up to 500 EC2 security groups, with up to 100 rules per group」

まーレアってことで！！　させている

wsdl(xml)からjava(class)スタブ生成

2011-11-29T17:18:00.003+09:00

久しぶりにコーディングモード
になっており、させています。

とある案件でsoap通信するものがあり、ひさしびりにwsdlからスタブ（class）を作るのに
苦戦したのでメモっておきます。

axisのバージョンは1.系～で、hoge.wsdlとします。

コマンドプロンプトで以下を設定（jdkパスとクラスパスを設定）
set JAVA_HOME=C:\iret\bin\jdk\1.5.0_00
set PATH=C:\iret\bin\jdk\1.5.0_00\jre\bin

不要なものもあるかもしれませんが、この辺のjarを全部指定することでエラー回避できました
set CLASSPATH=C:\batch\axis\XmlSchema-1.4.2.jar;C:\batch\axis\javamail-1.3.2.jar;C:\batch\axis\activation-1.0.2.jar;C:\batch\axis\xmlrpc-2.0.jar;C:\batch\axis\axis.jar;C:\batch\axis\axis-ant.jar;C:\batch\axis\commons-discovery-0.2.jar;C:\batch\axis\commons-logging-1.0.4.jar;C:\batch\axis\jaxrpc.jar;C:\batch\axis\log4j-1.2.8.jar;C:\batch\axis\saaj.jar;C:\batch\axis\wsdl4j-1.5.1.jar

上記で準備完了
あとは以下のコマンドで作成します。
java org.apache.axis.wsdl.WSDL2Java -p jp.co.iret.hoge.axis hoge.wsdl
「javaコマンド　実行するクラス -p パッケージ　wsdlファイル」

＊-pのあとは実際に配置するパッケージにしておくと
　できあがるclassもそのとおりに作られるのであとで書きなおしとかないので楽です。

超させている。。。

oracle11g init.oraでutl_file_dir指定

2011-11-18T15:01:00.003+09:00

オラクルのシステムパラメーター関連を
init.oraあたりで行なっている場合は、

ALTER SYSTEM SET UTL_FILE_DIR='/hoe/oracle'
などではエラーが起こり設定を変更できません。
ERROR at line 1:
ORA-02095: specified initialization parameter cannot be modified

＊対象のsidがhogeとします。
その場合は
オラクルインストールホーム/product/11.1.0/db_1/dbs/inithoge.ora
に「*.UTL_FILE_DIR='/hoge/oracle'」を追加して
オラクルを再起動後反映します。

SQL> show parameter utl_file_dir;

NAME TYPE VALUE
------------------------------------ ----------- ------------------------------
utl_file_dir string /hoge/oracle

一生下痢に悩まされるのかな？

RDS(Multi-AZ)をあとから立ち上げでEC2と同ゾーン

2011-11-15T22:38:00.005+09:00

EC2とRDS間は大量のインサートなどが
走るバッチ系のときは、
同一ゾーンであわせておいたほうが良さそうです。
＊別ゾーンだとやはりパフォーマスが下がる。
　通常のwebページでは特に問題ないレベル

RDSをMulti-AZで起動すると
どのゾーンであがるかわからなく
一発勝負のときがあります。

その場合は、まずMulti-AZをNOで
立ち上げ、ゾーンを指定し一度立ち上げ後
そのRDSを後からMulti-AZをYESにすると
やり直しがなくかなり良いです。

この手順はしばらく必須になりそうですね。

まーEC2側で合わせるほうが早いっちゃ
早いですけど
EC2あげちゃってからの～ってときは
これできっちりゾーン合わせって感じですね。

フェールオーバーして逆になった場合は、
EC2側であわせるしかないのですが、
このへんなんとかなると　更に使い勝手が
よくなりRDS更に人気でそうなのになぁ～

OpenSSLを用いた証明書設定の確認方法

2011-11-09T23:38:00.003+09:00

めんちょ　させている

基本的なことですが、
中間CA証明書が正しいものがインストールされていない場合
最新ブラウザなどではエラーがでます。

www.hoge.jpのドメインとします。
証明書が入っているサーバで
----------------------------------------------
openssl s_client -connect www.hoge.jp:443
----------------------------------------------

上記のコマンドの結果表示の「Certificate chain」の項目にて、
サーバ証明書と中間CA証明書の情報が表示されていれば、
正しくチェーンが確立され、
クライアントへ情報が送られているということで
間違いはないようです。

させている　めんちょ。

NFSサーバ側に不具合が起きた時

2011-11-07T18:53:00.002+09:00

NFSサーバ側でなんらかの不具合で、
リブートもしくは、復旧作業した場合、
クライアント側の方は当然NFS接続が
切れてしまっています。

マウントのプロセスが残って
通常に再マウントすることができない場合があるので、
一度マウントされているプロセスを
強制的にアンマウントする必要がある。
サーバーを再起動という手もあるが
再起動したくないことがほとんどなので

「-l」オプションで強制的にマウント解除できる
umount -l マウント箇所

上記後復旧したマシンに再度mountする。

NFSはあんま使いたくないのが正直なところ
共有するファイルはS3に置きたい。。

いやっ　させている。

oracleRDS システム日付はUTCなので注意

2011-10-26T22:37:00.002+09:00

させている。

2011年10月26日現在
oracle RDSはデータベースのtime-zoneを変更できないので
SYSDATEやSYSTIMESTAMPのシステム日付はUTCでの時刻
になります。
既存システムからRDSに移動する場合は注意が必要です。

セッションタイムゾーンは東京リージョンで
立ち上げるとちゃんと+9:00に
なっているので
SQLで日付取得する場合は、
current_timestampなどを使うか
systedaの場合は+9:00するかなどで
回避する必要がありそうです。

何かアップデートあればまた記録したいとおもいます

PS
31時間起きてたあと18時間寝てしまった。。
今日は果たして？？

おもいっきりさせている。

CVS(バージョン管理)から最新ソースに更新してmavenでビルド

2011-10-17T22:49:00.009+09:00

今更って感じですがちょっと復習
ある開発環境を移行したときのメモ

CVSで管理されているソースを
プロジェクトに反映しえビルドするシェル

hogeのjavaプロジェクトを指定箇所に更新してビルド
＊/usr/local/jTools/maven/bin/mavenに mavenがあるものとする
---------------------------------------------------------------------------------
#!/bin/sh

unalias -a
cd $(dirname $0)

echo "# ---------------------------------------------------------------"
echo "#"
echo "# hoge update"
echo "#"
(
cd /project/webapps/hoge/
cvs update -d 2>&1 | grep -v '^cvs update:'
)

echo "# ---------------------------------------------------------------"
echo "#"
echo "# hoge build"
echo "#"
(
cd /project/webapps/hoge/WEB-INF/src
/usr/local/jTools/maven/bin/maven java:compile
/usr/local/jTools/maven/bin/maven java:jar-resources
)

exit 0
---------------------------------------------------------------------------------

CVSからSVNに移行とかやったことないけど
簡単にできるものなのかなぁ～
そこまで移行するメリットみつからないけど・・・

しゃせている。。。

squid通しているapacheだとbasic認証が通らない。。

2011-10-14T00:18:00.002+09:00

ほんと大したことないことで
はまりました。

普通にapache上でいつものようにbasic認証設定
ちゃんとユーザーパスワードいれても
認証画面が繰り返しででる

なんでだ？っておもって
いろいろパスワードの場所変えたり、
やっても全然だめ。。。

だがhttpsでやったら普通に認証が通った
なぜだ？

80番はsquidで受けてapacheに流している
構成だったため、passwdファイルを読みにいかないようだった。。。
かなり汚点だった。。

ということでsquidを抜いたら
普通に動いた。。。

squid通すときは、squidに認証機能あるから
そっち使えってことなのかなぁ

まー　もうこれからsquidを使うことはないとおもうが、
一応心にとめておこう

超させている。。。。

postgres カンマ区切りを分割

2011-10-11T22:01:00.002+09:00

postgres9でしか試していませんが
あるカラムがカンマ区切りで
データが入ってるものがあって
それを簡単に分割したいときがある。

そんなときにはregexp_split_to_table
を使うと超楽ちん

hogeテーブルに
---------------------------
ID　numebr
1 '1,2,3,4,5'
2 '6,7,8,9,10'
---------------------------
が入ってるとする

SELECT id,regexp_split_to_table(number, ',') FROM hoge
---------------------------
ID,regexp_split_to_table(number, ',')
1 1
1 2
1 3
1 4
1 5
2 6
2 7
2 8
2 9
2 10
---------------------------

こんな感じで分割されるので超便利
これはカンマだけでなく、引数を変えることで
スペースとかその他の区切りとかもできちゃうので
超便利

参考
http://postgresql.g.hatena.ne.jp/iakio/20080429/1209490294

だいぶさせている。

oracleRDS スキーマまたぎの参照整合性制約

2011-10-05T21:37:00.003+09:00

させている

最近oracleRDS周りをよくやってるのですが
一つのRDSに複数ユーザー（スキーマ）を
入れる場合のもので、

スキーマ間でテーブル参照したり制約をつけてる場合がある。
*滅多にないケースなのでちょっとはまりました。

これは通常のoracleならSYSDBA権限を無理やりつけちゃえば
一発なのですが、RDSではつけらてもDBA権限までなのですが
それだけではだめでした。

Aユーザー（スキーマ）
Bユーザー（スキーマ）
があるとして

BユーザーからAユーザーのテーブルを絡む
制約をalterなどすると以下のエラーが発生

まずORA-00942
表またはビューが存在しません。

sqlplusで普通にbユーザーで入って
-----------------------------------------
select count(*) from a.hoge
-----------------------------------------
ってAユーザーのテーブル参照できるのになぜ？

参照したいテーブルにセレクトの権限つけてみた
-----------------------------------------
GRANT SELECT on a.hoge TO b;
-----------------------------------------

エラーが変わった？？
ORA-01031: 権限が不足しています。

なんじゃ??
そこで　REFERENCES（参照整合性制約）をつけてみる。
-----------------------------------------
GRANT SELECT,REFERENCES on a.hoge TO b;
-----------------------------------------
エラーなしに通った！！

ということで次にこのエラーに直面することは
滅多にないとおもうが、今度ははまらないだろう。。

参考になったページ
http://www.shift-the-oracle.com/oerrs/ora-00942.html
http://www.shift-the-oracle.com/privilege/
http://oracle.na7.info/4_2_role.html

いやっさせている

oracle RDSテーブルスペース(表領域)作成

2011-10-04T00:25:00.003+09:00

オラクルのテーブルスペースは
基本自動拡張なので、
特に気にしてなかったのですが、

expデータによって　imp時に以下のようなエラー
になりました。
IMP-00003: Oracleエラー959が発生しました。
ORA-00959: 表領域'HOGEDATA'は存在しません。

困ったもんだとおもってたら、
普通にoracleRDSでもテーブルスペース任意で
作れます。　＊別にファイル名指定しなくてもよい
-----------------------------------------
create tablespace hogedata;
create temporary tablespace hogetmp;

create user hoge
identified by hogepass
default tablespace hogedata
temporary tablespace hogetmp;
-----------------------------------------
上記でユーザー作りなおしてimpしたら
すんなり完了。任意で作ったものも自動拡張なんだね。。

参考
http://docs.amazonwebservices.com/AmazonRDS/latest/UserGuide/

さっ　さっ　っさ　させている！！

AWSのIPレンジ　９月１２日時点最新

2011-09-29T13:31:00.002+09:00

とある案件でIPのレンジを知る必要がありました。

関係者各方面から伝授いただきすぐ発見
いや～助かりましたということでメモ

US East (Northern Virginia):

216.182.224.0/20 (216.182.224.0 - 216.182.239.255)

72.44.32.0/19 (72.44.32.0 - 72.44.63.255)

67.202.0.0/18 (67.202.0.0 - 67.202.63.255)

75.101.128.0/17 (75.101.128.0 - 75.101.255.255)

174.129.0.0/16 (174.129.0.0 - 174.129.255.255)

204.236.192.0/18 (204.236.192.0 - 204.236.255.255)

184.73.0.0/16 (184.73.0.0 – 184.73.255.255)

184.72.128.0/17 (184.72.128.0 - 184.72.255.255)

184.72.64.0/18 (184.72.64.0 - 184.72.127.255)

50.16.0.0/15 (50.16.0.0 - 50.17.255.255)

50.19.0.0/16 (50.19.0.0 - 50.19.255.255)

107.20.0.0/15 (107.20.0.0 - 107.21.255.255)

107.22.0.0/16 (107.22.0.0 - 107.22.255.255)NEW

US West (Northern California):

204.236.128.0/18 (204.236.128.0 - 204.236.191.255)

184.72.0.0/18 (184.72.0.0 – 184.72.63.255)

50.18.0.0/16 (50.18.0.0 - 50.18.255.255)

EU (Ireland):

79.125.0.0/17 (79.125.0.0 - 79.125.127.255)

46.51.128.0/18 (46.51.128.0 - 46.51.191.255)

46.51.192.0/20 (46.51.192.0 - 46.51.207.255)

46.137.0.0/17 (46.137.0.0 - 46.137.127.255)

46.137.128.0/18 (46.137.128.0 - 46.137.191.255)

176.34.128.0/17 (176.34.128.0 - 176.34.255.255)

Asia Pacific (Singapore)

175.41.128.0/18 (175.41.128.0 - 175.41.191.255)

122.248.192.0/18 (122.248.192.0 - 122.248.255.255)

46.137.192.0/18 (46.137.192.0 - 46.137.255.255)NEW

46.51.216.0/21 (46.51.216.0 - 46.51.223.255)

Asia Pacific (Tokyo)

175.41.192.0/18 (175.41.192.0 - 175.41.255.255)

46.51.224.0/19 (46.51.224.0 - 46.51.255.255)

176.32.64.0/19 (176.32.64.0 - 176.32.95.255)

103.4.8.0/21 (103.4.8.0 - 103.4.15.255)

以下のフォーラム流用

https://forums.aws.amazon.com/ann.jspa?annID=1182

oracle追加ユーザー（スキーマ）作成（oracleRDS）

2011-09-26T22:55:00.002+09:00

以前こちらで
やったことなんですけど
AWS oracleRDSでも試しました。

ほぼOKなのですが、
grant EXP_FULL_DATABASE , resource to hoge;
grant IMP_FULL_DATABASE , resource to hoge;
の2点はエラーで権限つけることができませんでした。

-----------------------------------------------------------
Oracle Database 11g Release 11.2.0.2.0 - 64bit Production
に接続されました。
SQL>
SQL> grant EXP_FULL_DATABASE , resource to hoge;
grant EXP_FULL_DATABASE , resource to hoge
*
行1でエラーが発生しました。:
ORA-00604: 再帰SQLレベル1でエラーが発生しました。 ORA-20997:
"EXP_FULL_DATABASE" Grants Not Allowed
ORA-06512: "RDSADMIN.RDSADMIN", 行43
ORA-06512: 行2

-----------------------------------------------------------

でも作ったユーザー（スキーマ）についてはインポートはできるので
特に問題はなさそうです。

oracle tns listenerのログを確認

2011-09-20T20:30:00.002+09:00

オラクルへの不正アクセスを確認するために

ログファイルを確認する必要がありました。

でもものによって出力先が違う

tns listenerのログの場所がわからない～

そんなときは

oracleユーザーにて以下で確認

# lsnrctl

LSNRCTL> show log_status (ログの状態確認)

LSNRCTL> show log_directory ( ディレクトリ位置 )

LSNRCTL> show log_file ( ファイル名 )

-----------------------------------------------------------------------------

/u01/app/oracle/product/11.1.0/db_1/log/diag/tnslsnr/hoge/listener/alert

-----------------------------------------------------------------------------

出力先がこれでわかるので助かった。

参考

http://otndnld.oracle.co.jp/deploy/security/pdf/orahack_fixed.pdf

宮崎と鹿児島は大変いいところです！！　

超させています。

oracle １つのテーブルスペースに大きい値を設定する場合

2011-09-14T21:26:00.003+09:00

何気にこんなでかいファイルを設定することが

なかったのですが。。

例えばHOGEテーブルスペースを２０G作ってみる。

---------------------------------------------------------------

SQL> CREATE TABLESPACE HOGE DATAFILE

'/u01/app/oracle/oradata/hoge/hoge01.dbf' SIZE 20480M;

CREATE TABLESPACE HOGE DATAFILE

ERROR at line 1:

ORA-00604: error occurred at recursive SQL level 1

ORA-01013: user requested cancel of current operation

---------------------------------------------------------------

とこけてしまいます。

どうやら大きな領域を１ファイルに設定する場合は、

「BIGFILE」オプションが必要でした。

以下のようにBIGFILEをつかけたらいけました。

---------------------------------------------------------------

SQL> CREATE BIGFILE TABLESPACE HOGE DATAFILE

'/u01/app/oracle/oradata/hoge/hoge01.dbf' SIZE 20G;

Tablespace created.

---------------------------------------------------------------

参考

http://download.oracle.com/docs/cd/E16338_01/server.112/b56301/tspaces002.htm

させっ　いやっつ

jdk + tomcatをマイナーバージョンへ

2011-09-12T15:23:00.003+09:00

元々入っている。

サーバー移行の過程で、

jdkとtomcatを完全に現行と同じバージョン

にしなてくてはいけない案件があり既に入れてしまった

ものをバージョンを落としました。

jdk1.6.0_24 → jdk1.6.0_17

tomcat6.0.29 → tomcat5.5.26

jdkマイナーバージョンインストール

-------------------------------------------

旧バージョンをDL

jdk-6u17-linux-x64-rpm.bin

http://raphaello.univ-fcomte.fr/ftp/Java/Jdk/

wget http://raphaello.univ-fcomte.fr/ftp/Java/Jdk/jdk-6u17-linux-x64.bin

./jdk-6u17-linux-x64.bin

rpm -ivh jdk-6u17-linux-amd64.rpm

準備中... ########################################### [100%]

パッケージ jdk-1.6.0_24-fcs.x86_64 (jdk-1.6.0_17-fcs.x86_64 より新しいもの) は既にインストールされています。

Newer Java DB version (10.6.2.1.1) is already installed.

--------------------------------------------

既に入ってると怒られる。。。

以下のrpmオプションでいける

--------------------------------------------------------------------------------------

rpm -Uhv --oldpackage jdk-6u17-linux-amd64.rpm

--------------------------------------------------------------------------------------

参考

http://www.atmarkit.co.jp/flinux/rensai/linuxtips/796downgrdrpm.html

tomcatマイナーバージョンインストール

5.5系はここにアーカイブが全部あるので

http://archive.apache.org/dist/tomcat/tomcat-5/

該当の古いバージョンをDLする。

あとは解凍して

JAVA_HOMEのパスを変えて終了

その他細かい設定は除きます。

てかまだ暑くね？

oracle追加ユーザー（スキーマ）作成

2011-09-08T01:32:00.003+09:00

あるoracleDBにスキーマ違いで

同居させてたいときがあります。

ユーザ=スキーマという考え方なので、

ユーザーを追加します。

意外にユーザー作成ってあんまやらないのでメモ

以下の方法は11gで試してます。　9iでも大丈夫だとおもいます。

10gでも恐らく大丈夫ではないかとおもいます。

hogeユーザーを新たに作ります。

ユーザー hoge

パスワード hoge!23

表領域 hoge_data

添付領域 hoge_temp

表領域の追加方法等はここを参照

http://blog.suz-lab.com/2011/04/oracle_25.html

sqlplus "/as sysdba" にてログイン　又はsystemユーザーでログイン後

以下を実施

------------------------------------------------------

create user hoge

identified by hoge!23

default tablespace hoge_data

temporary tablespace hoge_temp;

grant connect, resource to hoge;

grant EXP_FULL_DATABASE , resource to hoge;

grant IMP_FULL_DATABASE , resource to hoge;

------------------------------------------------------

上記でsqlplus hoge/hoge123　で接続できることを確認

ここで大事なのはgrant connect

これをしないとログインできないので注意

EXP_FULL_DATABASE

IMP_FULL_DATABASE

はみたとおり、インポートとエクスポートができる権限ですね。

あとは必要な権限はこの辺の一覧でgrantしていく感じです。

http://www.shift-the-oracle.com/privilege/system-privilege-list.html

これでhogeユーザー（スキーマ）として

使えるようになりました。

余談ですが

AWS　oracleRDSでも上記と同じような手順でいけるとおもいますが、

次回に試してみたいとおもいます。

fsckは定期的に必要だなぁって思った出来事

2011-09-05T23:00:00.002+09:00

fsckは定期的に必要だなぁって思った出来事

長く起動しているEC2（linux）があり、

テスト用に同環境を作ろうと、いつも

やってるようなことを行いました。

EBS(スナップショット)→AMI作成 →起動

rootディスク 10GB /dev/sda1

dataディスク 100GB /dev/sdg

こんな構成なんですけど

作成したAMIから起動したら一向に立ち上がらない

コンソールからsyslogみると

/dev/sdgがマウントできない的なエラーがでてました。

＊実際のエラー内容メモってなかったのですまそん

データディスクの方が悪いので

ここを参考にして

http://blog.cloudpack.jp/2011/08/aws-news-ec2-recovery-from-disk-trouble.html

別EC2にrootディスクを仮マウントして

/etc/fstabから　dataディスクを起動時マウントしないようにコメントして

元のEC2にアタッチしなおして起動したら即効起動しました。

mountできるかここで試したらすぐにマウントできました。

急いでるときはこの方法が早そうですね。

/etc/fstabを戻して

これでインスタンスをストップすると

恐らくまた立ち上がらない可能性があるので、

dataディスク 100GB /dev/sdgの方を

fsckしてみたら　なんと１時間半くらいかかりました。。

/dev/sdg has gone 314 days without being checked, check forced.

1年近くやってなかったという感じか。。

-------------------------------------------------------------------------------

[root@app1 ~]# fsck -y /dev/sdg

fsck 1.39 (29-May-2006)

e2fsck 1.39 (29-May-2006)

/dev/sdg is mounted.

WARNING!!! Running e2fsck on a mounted filesystem may cause

SEVERE filesystem damage.

Do you really want to continue (y/n)? yes

/dev/sdg: recovering journal

/dev/sdg has gone 314 days without being checked, check forced.

Pass 1: Checking inodes, blocks, and sizes

Pass 2: Checking directory structure

Pass 3: Checking directory connectivity

Pass 4: Checking reference counts

Pass 5: Checking group summary information

Free blocks count wrong for group #158 (9510, counted=9512).

Fix? yes

Free blocks count wrong (14550268, counted=14550270).

Fix? yes

/dev/sdg: ***** FILE SYSTEM WAS MODIFIED *****

/dev/sdg: 1254158/13107200 files (29.6% non-contiguous), 11664130/26214400 blocks

-------------------------------------------------------------------------------

ということで長く立ち上げてるEC2のEBSについては、

マメにfsckはしておいた方が良いなぁって思いました

冗長化しているものならできるけど

シングル構成だと早々サービスとめてできないよねぇ～

非情に悩ましいから

定期的に再起動などしてfsckすることを計画しよう～

httpsは/のみhttpにリダイレクト続

2011-09-01T00:11:00.004+09:00

以前ここで

http://iret-onsoku.blogspot.com/2011/01/httpshttp.html

トップページだけhttpにリダイレクトするというのをやったのですが

どうも

https：//hoge.jp/?/hoge/～～

というURLでもｈｔｔｐにリダイレクトしちゃってました。

あまり見かけないURLですけど。。。。

QUERY_STRINGは

URL に付加して渡された "?" 以降の文字列ということなので

RewriteCond %{QUERY_STRING} !^\/hoge\/*

RewriteRule ^/$ http://%{HTTP_HOST}/ [R=301,L]

postだとQUERY_STRINGにデータが入ってこないので

アプリ側でやるしかないのか？って感じですが

getなら上記で回避することができました。

あんま意味ないぁ。。。。

もうちょっと検証する時間あったしらべてみる。

もう８月も終わっちゃったなぁ。。。

mysqlスレーブ側を作り直す。

2011-08-30T01:26:00.009+09:00

何かの問題で、マスターとスレーブの同期がとれなくなって

しまうことがあります。

問題は色々なケースがあるとして、

そこでスレーブの再構築を行う手順を復習の為書きます。

参考

http://blog.suz-lab.com/2009/07/mysql.html

DB（マスター側）

内部IPを確認

[root@db1 mysql]# ifconfig

eth0 Link encap:Ethernet HWaddr 12:31:3E:00:2E:61

inet addr:10.162.48.139 Bcast:10.162.48.255 Mask:255.255.255.0

UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1

RX packets:293449 errors:0 dropped:0 overruns:0 frame:0

TX packets:757109 errors:0 dropped:0 overruns:0 carrier:0

collisions:0 txqueuelen:1000

RX bytes:27208339 (25.9 MiB) TX bytes:2059801268 (1.9 GiB)

ここで10.162.49.139が内部IPとなる。

マスターDB情報を確認

[root@db1 mysql]# less /var/lib/mysql/master.info

mysqld-bin.000006

106

ip-10-161-50-146.us-west-1.compute.internal

hoge

hogepass

3306

ここでユーザーパス

hoge

hogepassを確認

現在のログファイルをポジションを確認

mysql> SHOW MASTER STATUS;

+-------------------+----------+--------------+------------------+

+-------------------+----------+--------------+------------------+

| mysqld-bin.000291 | 106 | | |

+-------------------+----------+--------------+------------------+

1 row in set (0.00 sec)

マスターのDBをとめる。

/etc/init.d/mysql stop

MYSQLデータをスレーブサーバに転送する。

rsync -avxz /home/mysql/ db2::mysql

＊予めDB2（スレーブ）側ではrsyncdデーモンを立ち上げ転送できるようにしておく

http://blog.suz-lab.com/2010/03/centosrsync.html

転送後はマスターは起動する。

/etc/init.d/mysql start

DB（スレーブ側）

mysqlを起動し

一度スレーブの機能を止める。

STOP SLAVE;

マスターの情報を書き換える

CHANGE MASTER TO

MASTER_HOST='10.162.49.139',

MASTER_USER='hoge',

MASTER_PASSWORD='hogepass',

MASTER_LOG_FILE='mysqld-bin.000291',

MASTER_LOG_POS=106;

スレーブの機能を開始する。

START SLAVE;

SHOW SLAVE STATUS\G

にて確認

mysql> SHOW SLAVE STATUS\G

*************************** 1. row ***************************

Slave_IO_State: Waiting for master to send event

Master_Host: 10.162.48.139

Master_User: hoe

Master_Port: 3306

Connect_Retry: 60

Master_Log_File: mysqld-bin.000292

Read_Master_Log_Pos: 106

Relay_Log_File: mysqld-relay-bin.000021

Relay_Log_Pos: 252

Relay_Master_Log_File: mysqld-bin.000292

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

がともにYESになっていることを確認

/var/log/mysqld.logで

エラーがでていないことも確認する。

mysqlは他のDBと比べてやっぱりいいねぇって

思う今日この頃でさせている。

ELB経由apacheでhttp or httpsの判定（RewriteCond）

2011-08-24T17:38:00.004+09:00

ある特定のページのみ

httpをｈｔｔｐｓにするなんて

よくあるものがあったのですが、

ELBにＳＳＬ証明書をいれており、ＥＬＢ(４４３)→ＥＣ２(８０)という設定だったので

ＥＣ２上では80で流れてくるので、こういったパターンは

いつもアプリ側でヘッダーみて切り分けをやってのたのですが、

apacheレベルのでRewriteCondとかでなんとかできないものかと

おもったらできました。

＊httpでリクエストされた/adminはhttpsに飛ばす

RewriteEngine on

RewriteCond %{HTTP:X-Forwarded-Proto} =http

RewriteRule ^/admin https://%{HTTP_HOST}/admin/

上記を設定したところ

http://hoge.jp/admin/ →　https://hoge.jp/admin/

にリダイレクトされることを確認

/admin配下のものはすべて同じページに飛ばすというやり方は

RewriteEngine on

RewriteCond %{HTTP:X-Forwarded-Proto} =http

RewriteRule ^/admin/(.*)$ https://%{HTTP_HOST}/admin/$1

上記の設定後

http://hoge.jp/admin/hoge.html →　https://hoge.jp/admin/hoge.html

のように元のＵＲＬでhttpsになるので便利

逆をやる場合はもちろん

RewriteCond %{HTTP:X-Forwarded-Proto} =https

にすればＯＫ

RewriteCondは、一生付き合ってくんだろうなぁ

どこかにまとめなければいかんとおもっている

バナナオ・レってさせているねぇ

oracleのエクスポートデータの世代をＳ３へ

2011-08-22T20:27:00.002+09:00

オラクルのエクスポートデータを日別で

サーバ５世代＋Ｓ３にも同じものを５世代残すような

ことを行いました。

ということで１日１回動く

一連の流れシェルを作ってみました。

＊s3cmdが入ってること前提です。

----------------------------------------------------------------------

#!/bin/sh

unalias -a

##これは対応するデータベースのNLS_LANGを指定する

##SELECT PARAMETER,VALUE FROM NLS_DATABASE_PARAMETERS where PARAMETER='NLS_NCHAR_CHARACTERSET'

##の結果

export NLS_LANG=AMERICAN_AMERICA.JA16EUC

##オラクルのパスを通す

PATH=$PATH:$HOME/bin

export PATH

# variables for oracle database environment

ORACLE_BASE=/u01/app/oracle

ORACLE_HOME=/u01/app/oracle/product/11.1.0/db_1

ORACLE_SID=hoge

SAVE_LLP=

LD_LIBRARY_PATH=$ORACLE_HOME/lib:$SAVE_LLP

PATH=$PATH:$ORACLE_HOME/bin/

export ORACLE_BASE ORACLE_HOME ORACLE_SID NLS_LANG LANG LD_LIBRARY_PATH PATH

##日付を取得

TODAY=`date '+%y%m%d'`

echo "dumpstart `date '+%y/%m/%d %H:%M:%S'`"

##エクスポートするユーザーの指定

SID="hoge"

USID="hogeuser"

PWD="hogepass"

##dumpされるファイル名を指定

dumpfile=/u01/app/oracle/backup/dump/${SID}-${USID}-${TODAY}.dump

##エクスポート

ORACLE_SID=$SID

export ORACLE_SID

exp ${USID}/${PWD}@${SID} file=${dumpfile} direct=y

##エクスポートするファイルをbzip2で圧縮する

echo "# bzip2 start"

bzip2 --fast -f ${dumpfile}

echo "# dump end `date '+%y/%m/%d %H:%M:%S'`"

##圧縮後に５世代分だけを残す他は削除

find /u01/app/oracle/backup/dump/ -type f -mtime +4 -exec /bin/rm {} \;

##Ｓ３へ転送

echo "# dump sync `date '+%y/%m/%d %H:%M:%S'`"

s3cmd sync --delete /u01/app/oracle/backup/dump s3://bkup.hoge.com/oracle/hoge/

----------------------------------------------------------------------

とりあえずこれで万が一サーバーもしくはデータセンタが死んでも

最強Ｓ３に毎日５世代データが残ってるので安心です。

Ｓ３って超させている。

EC2(linuxサーバー)上でphpでホスト名取得

2011-08-16T14:36:00.003+09:00

WEBを通さない案件があって

サーバを識別したいようなものが

ありました。

phpの関数php_unameにて

サーバを識別する。

http://php.net/manual/ja/function.php-uname.php

phpが動く環境で

以下で確認

test.php

print php_uname("n")."\n";

実行結果 php test.php

ip-10-***-***-***

デフォルトはip-+内部IPになり

この関数はホスト名を見ているようなので、

/etc/sysconfig/networkに以下を追記

HOSTNAME=web1

コマンドでhostnameを認識させる

hostname web1

再度先ほどのphpを実行すると

web1

という結果が返ってきた。

なので2台目からweb2 web3などで識別

させればいい。

STOP&STARTしちゃうと設定は消えちゃうので

注意が必要

ということでモウマンタイさせている。

CentOS5.6にmysql4.0.24のインストール

2011-08-15T19:42:00.003+09:00

ちょっと今さら渋い話ですが

とある案件でシステムをすべてAWSに移行する作業があったのですが、

アプリ依存で、どうしてもmysqlを旧バージョンで

動かさないといけなことに遭遇しました。

mysql4.1系～５系にするのは以前にどこかで

やってすんなりいったのですが、

mysql4.0系～５系にしたらまったくアプリが

動きませんでした。

ということで、アプリの改修が激しすぎるということで

現行と同バージョンのままで対応することにしました。

まずmysqlを探す。

rpm見つけたのでDLしてみる。

関連モジュールもちゃんともってくる

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-server-4.0.24-0.x86_64.rpm

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-devel-4.0.24-0.x86_64.rpm

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-client-4.0.24-0.x86_64.rpm

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-debuginfo-4.0.24-0.x86_64.rpm

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-embedded-4.0.24-0.x86_64.rpm

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-shared-4.0.24-0.x86_64.rpm

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-Max-4.0.24-0.x86_64.rpm

wget ftp://ftp.pbone.net/mirror/mirror.cheetaweb.com/MySQL/4.0/MySQL-bench-4.0.24-0.x86_64.rpm

インストール

rpm -ivh MySQL-server-4.0.24-0.x86_64.rpm

ぐほエラー

エラー: 依存性の欠如:

perl(DBI) は MySQL-server-4.0.24-0.x86_64 に必要とされています

perl(DBI)ないってことでインストール

yum install perl-DBI

＊インストールしたときのバージョンは　　

perl-DBI　x86_64　1.52-2.el5　でした。

とりあえず入れる。

再びmysqlインストール

rpm -ivh MySQL-server-4.0.24-0.x86_64.rpm

準備中... ########################################### [100%]

1:MySQL-server ########################################### [100%]

完了！！意外とすんなり。。

あとは残りは同じように

rpm -ivh MySQL-client-4.0.24-0.x86_64.rpm

rpm -ivh MySQL-devel-4.0.24-0.x86_64.rpm

rmp -ivh MySQL-Max-4.0.24-0.x86_64.rpm

rpm -ivh MySQL-Max-4.0.24-0.x86_64.rpm

rpm -ivh MySQL-embedded-4.0.24-0.x86_64.rpm

rpm -ivh MySQL-shared-4.0.24-0.x86_64.rpm

とりあえずログインもできて

うまくいってそう。

create table～して

ユーザー作って

旧環境からのdumpデータを入れたら

すんなり入って無事アプリも稼動

そりゃバージョン一緒なら当然か

おそらくこんなマイナーバージョンいれることは

二度とないんだろうなぁ～

まー入ってよかったということで

ほんとさせている出来事でした。

suz-labのAMI(x86_64-5.5.5)で64bit microの立ち上げ

2011-08-12T15:46:00.001+09:00

こちらAWSで公開されいるCentOS5.5の

suz-lab_ebs_centos-core-x86_64-5.5.5

のAMIですが、

64bit　microのみ立ち上げが今までできませんでしたが、

Cent5.6で使用している以下のKernel＋RAM Diskの指定を

すればインスタンス立ち上げからログインまで

できることを確認しました。

Kernel ID: aki-ea09a2eb RAM Disk ID: ari-bc09a2bd

これで既にこのAMIで立ち上げているlargeのインスタンスを

microに落とすこともできます。

Cent5.6の

suz-lab_ebs_centos-core-x86_64-5.6.2

については問題なくmicroはいけます。

今後もし

64bit small or mediumとか

でることがあればかなり広がりますよね！

七夕に願いを！　ちょっと遅いかぁ？

腹がさせているほど痛すぎる。

IAMユーザーにR53の権限

2011-08-10T16:46:00.004+09:00

IAMのコンソールでの標準ポリシーには

R53のものがないので

マニュアルでポリシーを設定する。

{

"Statement":[{

"Effect":"Allow",

"Action":["route53:*"],

"Resource":"*"

}

]

}

上記でこのポリシーを追加したユーザーはR53がフル操作できる。

参考ドキュメント

http://docs.amazonwebservices.com/Route53/latest/DeveloperGuide/index.html?UsingWithIAM.html

なんかだかさせている。

CentOS 4.5にPHP5.3.6インストール

2011-08-03T17:03:00.002+09:00

CentOS 4.5にPHP5.3.6インストール

CentOS4系とか、今後触ることはないと

おもってたら既存の運用しているサーバーに

まだあった。。。

アプリ開発担当からPHPを5.2以上に

あげてほしいって依頼でこんなことやりました。

centOS 4系は、yumでPHP5系を簡単にインストールするのは

/etc/yum.repos.d/CentOS-Base.repo の[centosplus]の設定をenabled=1に修正すれば

yum update phpで可能なのですが

参考URL

http://blog.livedoor.jp/k1LoW/archives/53816085.html

http://blog.goo.ne.jp/freebox_tk/e/6439f111c64cceba237be4a66711a164

PHPの最新に近いバージョンは、yumではデフォルトでは入れられないので。、

RPM、もしくはremiあたりのrepoをもってきてインストールする。

今回はRPMからインストールすることにしました。

# (1) インストール済の rpm をアンインストール（5.1系に一度したのですが5.2以上じゃないとだめってことで）

[root@hoge php]# rpm -qa | grep php

php-common-5.1.6-3.el4s1.10

php-ldap-5.1.6-3.el4s1.10

php-cli-5.1.6-3.el4s1.10

php-pear-1.4.11-1.el4s1.1

php-pdo-5.1.6-3.el4s1.10

php-mbstring-5.1.6-3.el4s1.10

php-5.1.6-3.el4s1.10

php-mysql-5.1.6-3.el4s1.10

[root@hoge php]# rpm -e php-common-5.1.6-3.el4s1.10 php-ldap-5.1.6-3.el4s1.10 php-cli-5.1.6-3.el4s1.10 php-pear-1.4.11-1.el4s1.1 php-pdo-5.1.6-3.el4s1.10 php-mbstring-5.1.6-3.el4s1.10 php-5.1.6-3.el4s1.10 php-mysql-5.1.6-3.el4s1.10

# (2) 下記 URL より rpm をダウンロード＊大体php関連のモジュールありそうです。＊2011年８月２日時点です。

# ftp://ftp.pbone.net/mirror/rpms.famillecollet.com/enterprise/4/remi/i386/

wget ftp://ftp.pbone.net/mirror/rpms.famillecollet.com/enterprise/4/remi/i386/php-5.3.6-3.el4.remi.i386.rpm

必要なものを

php-mysqlを入れる場合、使ってるMYSQLがバージョンが古いと依存関係でエラーになることもあるので

compat-mysql55-5.5.11-1.el4.remi.i386.rpm

も一緒にいれると回避できます。

もしかしたらlibedit.soなどエラーが出た場合もこいつもいれておく

libedit0-3.0-1.20090722cvs.el4.i386.rpm

この辺にあります。

http://pkgs.org/package/compat-mysql55

http://rpm.pbone.net/index.php3/stat/4/idpl/15149954/dir/redhat_el_4/com/libedit0-3.0-1.20090722cvs.el4.i386.rpm.html

# (3) 「(2)」でダウンロードしたうち、RPMからインストール

[root@hoge php]# pwd

/usr/pkg/php

[root@hoge php]# rpm -i php-5.3.6-3.el4.remi.i386.rpm php-cli-5.3.6-3.el4.remi.i386.rpm php-common-5.3.6-3.el4.remi.i386.rpm php-mbstring-5.3.6-3.el4.remi.i386.rpm php-mysql-5.3.6-3.el4.remi.i386.rpm php-pdo-5.3.6-3.el4.remi.i386.rpm php-process-5.3.6-3.el4.remi.i386.rpm php-xml-5.3.6-3.el4.remi.i386.rpm php-pear-1.9.4-1.el4.remi.noarch.rpm compat-mysql55-5.5.11-1.el4.remi.i386.rpm libedit0-3.0-1.20090722cvs.el4.i386.rpm

警告: php-5.3.6-3.el4.remi.i386.rpm: V3 DSA signature: NOKEY, key ID 00f97f56

警告: only V3 signatures can be verified, skipping V4 signature

WARNING : This php-* RPM are not official Fedora/Redhat build and

overrides the official ones. Don't file bugs on Fedora Project nor Redhat.

Use dedicated forums http://forums.famillecollet.com/

警告: only V3 signatures can be verified, skipping V4 signature

[root@hoge php]# rpm -qa | grep php

php-common-5.3.6-3.el4.remi

php-process-5.3.6-3.el4.remi

php-pdo-5.3.6-3.el4.remi

php-cli-5.3.6-3.el4.remi

php-5.3.6-3.el4.remi

php-mysql-5.3.6-3.el4.remi

php-xml-5.3.6-3.el4.remi

警告: only V3 signatures can be verified, skipping V4 signature

php-mbstring-5.3.6-3.el4.remi

php-pear-1.9.4-1.el4.remi

[root@hoge php]# php -v

PHP 5.3.6 (cli) (built: Apr 15 2011 20:47:07)

無事PHPのバージョンアップが完了

古いバージョンのOSは一斉排除していきたいですね。

させているクラウドへ。

RHEL5でs3cmdいれてS3からファイルDL

2011-08-01T15:46:00.007+09:00

定期的にS3からファイルをDLする仕組みを
いれようとおもったところ

RHEL5はデフォルトyumでs3cmdはインストールできないので
RPM探すか、epelもってくるかソースからのインストールで
とりあえず、RPMでいれることに

RPM見つけた
http://rpm.pbone.net/index.php3/stat/4/idpl/14578045/dir/redhat_el_5/com/s3cmd-0.9.6-10.1.rhel5.x86_64.rpm.html

でも古いかな　これ？

新しいのあった！！^^
http://rpm.pbone.net/index.php3/stat/4/idpl/15276462/dir/redhat_el_5/com/s3cmd-0.9.9.91-1.el5.1.noarch.rpm.html
ということでRPMをDLする
wget ftp://ftp.univie.ac.at/systems/linux/fedora/epel/5/i386/s3cmd-0.9.9.91-1.el5.1.noarch.rpm

インストールする。
rpm -ivh s3cmd-0.9.9.91-1.el5.1.noarch.rpm

あとはこちらの記事どおりにAWSいつものセットを用意してs3設定して使えるようにする　
*いつものセット＝アカウント＞セキュリティ証明書>アクセスキーIDとシークレットキー
http://blog.suz-lab.com/2010/07/s3cmd.html

S3からほしかったデータを(scpっぽく)DLする
＊forceオプションは同じファイルあったら上書きする　＊バケット名はhoge-name
s3cmd get --force s3://hoge-name/data/hoge20110801.csv /home/hoge/hoge20110801.csv

ファイルがサーバ上にDLできたことを確認

あとはファイル名作るシェルと組み合わせcronなどに登録しよう
夏は暑いから嫌い。。
寝不足で超させている。

logrotate.dに１ファイルで複数個所指定だとローテートされねぇ

2011-07-25T19:51:00.001+09:00

熱すぎじゃない？
暑すぎじゃない？

/etc/logrotate.d
に以下なようなファイルを置いて
ある三カ所のアプリログがローテートされるはずがまったくされねぇ
/project/webapps/hoge1/logs/*.log /project/webapps/hoge2/logs/*.log
project/webapps/hoge2/logs/*.log {
copytruncate
compress
daily
rotate 10
nocreate
missingok
}

結論
/projectは　/mnt/ebs/0/project（実体）を
シンボリックリンクしてたからだった。。。。
シンボリックしているパスは、複数指定すると
なんかちゃんと認識しないらしい。
そこで以下のように実体で書いたらちゃんとローテートされた。。

/mnt/ebs/0/project/webapps/hoge1/logs/*.log /mnt/ebs/0/project/webapps/hoge2/logs/*.log
/mnt/ebs/0/project/webapps/hoge3/logs/*.log {
copytruncate
compress
daily
rotate 10
nocreate
missingok
}

１ファイルで複数書くときは注意が必要
これちなみに一カ所なら実体のフルパスじゃなくても問題なかった。。。
かなりさせている

postgres　waitingがたまったら強制排除

2011-07-25T19:47:00.002+09:00

前回waitingが溜まったら
アラートをでるような仕組みを作ったが
それを自動で解除というか強制で
殺す仕組みをいれた。ほんとこれは暫定対処
アプリが死ぬよりはマシってことで。。。

show_locks.sql　ロックして待ちになっているSQLをリスト
----------------------------------------------------------------------------
select * from (select pid from pg_locks group by pid) l,pg_stat_activity a
where l.pid=a.procpid order by query_start
----------------------------------------------------------------------------

kill_locks.sql　ロックして待ちになっているSQLを殺す
----------------------------------------------------------------------------
SELECT pg_terminate_backend(procpid) FROM pg_stat_activity
WHERE current_query = 'in transaction'

lockcheck.sh　データベースはhogeとし、mailコマンドが使えることが前提
----------------------------------------------------------------------------
#!/bin/sh
unalias -a
cd `dirname $0`

##対象のポスグレ使えるようにpathとかexportとか指定しているファイルあくまで独自
. /etc/pgenv

##日付取得と
NOW=`date '+%Y/%m/%d %H:%M:%S'`

#waitingの数カウント　なければ終了
WAIT_CNT=`ps -ef | fgrep 'postgres:' | fgrep 'waiting' | wc -l`
[ `expr ${WAIT_CNT} \> 1` = 0 ] && exit 0

#hogeデータベースで現在動いているSQLの一覧をテキストに吐き出す
cat show_locks.sql | psql --no-psqlrc -U hoge > lockview.txt
#ロックしているだろうプロセスを殺す　ひどいときは一回じゃきれないので４回とかついで
cat kill_locks.sql | psql --no-psqlrc -U postgres > lockkill.txt
cat kill_locks.sql | psql --no-psqlrc -U postgres > lockkill.txt
cat kill_locks.sql | psql --no-psqlrc -U postgres > lockkill.txt
cat kill_locks.sql | psql --no-psqlrc -U postgres > lockkill.txt

#指定した宛先にメール送信
SEND_TO='alert@hogehoge.co.jp'
SUBJECT="PostgreSQL lock waitting"

cat << EOF | mail -s "${SUBJECT}" ${SEND_TO}
DATE: ${NOW}
SERVER: hoge-server
INFO:
* Postgres Process waiting count ${WAIT_CNT}
LOCKS:
`cat lockkill.txt`
`cat lockview.txt`
EOF
exit 0
----------------------------------------------------------------------------
あとはcronで適当な間隔にこのシェルを設定ぃ

やばい箇所みつけるまで時間が稼げたぁ。。。
やっぱいアプリだった　させている。

Postgres　waitingがたまっているかチェック

2011-07-21T11:45:00.002+09:00

アプリケーションの作りや色々なタイミングが
重なるとロックしてwaitingがたまって
DBがボトルネックでアプリが落ちたり重くなってしまうときががあります。
＊ちゃんと作っててもどうしようもないときは必ずある。あまりない？

そこでwaitingがたまったときにアラートを
出すようなチェックシェルを作ってみた。

show_locks.sql　ロックして待ちになっているSQLをリスト
----------------------------------------------------------------------------
select * from (select pid from pg_locks group by pid) l,pg_stat_activity a
where l.pid=a.procpid order by query_start
----------------------------------------------------------------------------

lockcheck.sh　データベースはhogeとし、mailコマンドが使えることが前提
----------------------------------------------------------------------------
#!/bin/sh
unalias -a
cd `dirname $0`

##対象のポスグレ(psql)使えるようにexportとか指定しているファイルあくまで独自
. /etc/pgenv

##日付取得と
NOW=`date '+%Y/%m/%d %H:%M:%S'`

#waitingの数カウント　なければ終了
WAIT_CNT=`ps -ef | fgrep 'postgres:' | fgrep 'waiting' | wc -l`
[ `expr ${WAIT_CNT} \> 1` = 0 ] && exit 0

#hogeデータベースで現在動いているSQLの一覧をテキストに吐き出す
cat show_locks.sql | psql --no-psqlrc -U hoge > lockview.txt

#指定した宛先にメール送信
SEND_TO='alert@hogehoge.co.jp'
SUBJECT="PostgreSQL lock waitting"

cat << EOF | mail -s "${SUBJECT}" ${SEND_TO}
DATE: ${NOW}
SERVER: hoge-server
INFO:
* Postgres Process waiting count ${WAIT_CNT}
LOCKS:
`cat lockview.txt`
EOF
exit 0
----------------------------------------------------------------------------
あとはcronで適当な間隔にこのシェルを設定ぃ

lockview.txtと同じ内容をメールで見て
SQLやアプリを見直して改善させる。
このメールがしょっちゅうでるようだとかなりやばい　にゃばい　させている。
フルバキュームやインデックスのリビルド中とかは
このチェックは動かさないほうがいい　waitingが溜まったりすることがあるので。。。。

うーん　それにしても
AWS-RDSはポスグレって実現するんだろうか？
かなり難易度高そうだけどoracleがいけたんだから
信じて待ちますよ！！

台風ってとってもさせている。ほんといらない。うひ

AWSのIAMユーザーの権限で一部のS3のバケットだけリストできないようにする

2011-07-19T11:13:00.002+09:00

コンソール上ではリードオンリーにする権限に
設定することができるが、
この権限ではすべてのbucketのファイルが見えてしまいます。
不要なbucketの中身はみせたくないってことがありまして
指定したbucketはリストもできないような権限をつけました。

元々のS3readonly
{
"Statement": [
{
"Action": [
"s3:List*",
"s3:Get*"
],
"Effect": "Allow",
"Resource": "*"
}
]
}

特定のbucket「hoge.buket.name」だけ見れないように
指定したIAMユーザーのS3の権限を以下のようにすると
hoge.buket.name
を選択しても中身が見れなくなります。
あとからDenyを指定することで可能です。

{
"Statement": [
{
"Action": [
"s3:List*",
"s3:Get*"
],
"Effect": "Allow",
"Resource": "*"
},
{
"Action": [
"s3:List*"
],
"Effect": "Deny",
"Resource": "arn:aws:s3:::hoge.buket.name"
}
]
}

色々な組み合わせができるので、
また何かのニーズがあったら色々なパターンを
試してみたいですね。
かなり細かい権限がつけられるから

驚きのさせている。

AWS oracleRDS セッション数とかは固定で変更できないみたい

2011-07-14T12:37:00.003+09:00

oracleRDS セッション数とかは固定で変更できないみたい

今までの通常のオラクルサーバではさせている。

こんな感じで　セッション数とかプロセスは変更できたですが、
alter system set processes = 500 scope=spfile;
alter system set sessions = 555 scope=spfile;
※SESSIONS = (1.1 × PROCESSES) + 5
上記oracle再起動後に反映した。

どうやらRDSのパラメータグループをみると
両方static属性なので変更不可っぽいですが、デフォルトで
結構大きめな値が設定されていて最適な値が設定されてるっぽです。
この値なら問題にはならないですね。smallはちょっとすくない気がする。。
アプリーケーションからの接続数も考えてこのへんの
値も考えながらタイプ選びが必要そうですねぇ

oracle(SE1)で small large xlargeで以下で確認

SQL> select name, type, value from V$SYSTEM_PARAMETER where name = 'processes' or name='sessions'
で結果をみたところ以下のような値でした。

small
processes 180
sessions 292

large
processes 815
sessions 1244

xlarge
processes 1859
sessions 2810

夏って汗かいて色々させているよね？

AWS 運用上よく使うコマンド　ベスト３

2011-07-11T16:24:00.002+09:00

AWSのコンソールは優れていて
ほとんど何でもきちゃうんですけど、たまにできないものがあって
コマンドをたたくしかないことがあります。
これがちょっとさせている

コンソールでできない、よく使うコマンドはELB関係が多い
これはあくまでも僕のランキング

1位　elb-register-instances-with-lb
　　　（ELBにインスタンスくっつける）

　　＊コンソールでもできるじゃんっておもうかもしれないけど
　　　既にELBについてるインスタンスを別のELBにもくっつけるケースの
　　　場合選択できなので使用します。
　　　SSLの問題でドメイン違いでELBをわけているケースが多いので
　　　ほんと良く使います。コンソールでできれば楽なんだけどなぁ

使い方はこちら
　　　http://blog.suz-lab.com/2009/09/elastic-load-balancingelbec2.html

2位　elb-enable-zones-for-lb
　　　（ELBでbゾーンも設定可能にする。）

　　＊このコマンドたたかないと、コマンドから別ゾーンが使えないらしい
　　　A,Bで複数ゾーンにインスタンスぶらさげるときにはおまじない的なもの

日本リージョンbゾーンも可能にする例
elb-enable-zones-for-lb hoge-elb ^
-I Axxxxxxxxxxxxxxxxxxxx ^　　アクセスキー
-S yyyyyyyyyyyyyyyyyyyyy ^　　シークレット
--headers --availability-zones ap-northeast-1b ^
--region ap-northeast-1

3位　ec2reg
　　　（AMI作成）

　　＊実はEC2無反応系で、これを使ってました。
　　　スナップショットからの復旧が1番早いので、
　　　コンソール上スナップショットとってこのコマンドでAMIをつくる。

使い方はこちら
　　http://blog.suz-lab.com/2011/03/ebs-aws-management-console-ebs-amazon.html

ベスト１０まで書こうと思ったのですが
心が折れた

またどっかの機会にさせている。

AWS oracleRDSパラメータグループ変更(sec_case_sensitive_logon)

2011-07-07T16:08:00.004+09:00

最近熱い　oracleが熱い

ということで
既存のオラクルではsec_case_sensitive_logon（大文字小文字の区別）が
RDSはディフォルトON（true）になっているようです。

SQL> show parameter case

NAME
------------------------------------
TYPE VALUE
-------------------------------------------- ------------------------------
sec_case_sensitive_logon
boolean TRUE

以下で変更可能(rsdのパラメータグループ名はhoge　東京リージョン)
AWS_KEYとかAWS_SECRET_KEYとか記述は設定されている条件です。

$rds = new AmazonRDS();
$rds->set_region(AmazonRDS::REGION_APAC_NE1);
$response = $rds->modify_db_parameter_group('hoge', array(
array(
"ParameterName" => "sec_case_sensitive_logon",
"ParameterValue" => "0",
"ApplyMethod" => "pending-reboot"
)
));

var_dump($response);

コンソール上falseで確認後　RDS再起動したら終わり。
SQL> show parameter case

NAME
------------------------------------
TYPE VALUE
-------------------------------------------- ------------------------------
sec_case_sensitive_logon
boolean FALSE

節電させている・・・

oracle アーカイブログモードON or OFFに

2011-07-07T15:59:00.003+09:00

久しぶりでさせている。

オラクルのアーカイブモードON or OFFにする手順は以下の
通り。

アーカイブのフォーマットと出力場所設定する。
alter system set log_archive_format='HOGE_%t_%s_%r.archlog' scope=spfile;
alter system set log_archive_dest_1='location=/u01/app/oracle/archive' scope=both;

まずシャットダウン
shutdown immediate

マウント
startup mount;

アーカイブモードONの場合
alter database archivelog;
アーカイブモードOFFの場合
alter database noarchivelog;

データベース再開
alter database open;

アーカイブ状態確認
archive log list;

夏ってさせているよね？

[書評]Amazon EC2/S3/EBS クラウドコンピューティングによる仮想サーバ構築

2011-04-14T02:24:00.001+09:00

こちらはある程度AWSを知っている人が読むものかと思いました。
確かにコマンドラインの情報が多く記載されていて
大変参考になりました。ほとんど知らないコマンドばっかり。。汗

コンソールの部分は初心者の方は読みやすい感じで、
よく結構触っている人は復習的な感じになるのではないかとおもいます。

また、第１１章のコマンド一覧は結構便利で使えそうです。
コマンドラインベースのAWSの操作はまだ全然わかっていないので、
手軽なコマンド一覧を見つけるまで
覚えるまでは当分手元に置いておきたい一冊になりそうな気配です。
というかコマンド全部覚えられないよね　させているね

httpsは/のみhttpにリダイレクト

2011-01-12T21:44:00.002+09:00

index.htmlとかはそのままで
/だけリダイレクトしたいときは
４４３のapacheの設定で
RewriteRule ^/$ http://%{HTTP_HOST}/ [R=301,L]

また逆でトップ「/」以外って場合
RewriteCond %{REQUEST_URI} !^/$
RewriteRule ^/.*$ http://%{HTTP_HOST}/ [R=301,L]

トップページは色々httpsにすると面倒なことが多いので
メモってく

特定のドメインの場合リダイレクト

2010-12-15T16:29:00.003+09:00

以下は
saseteiruってドメインのときにだけトップのhtmlを
www.hogehoge.jpへリダイレクト

RewriteCond %{SERVER_NAME} www.saseteiru.jp
RewriteRule ^/index.html http://www.hogehoge.jp/ [R=301,L]

条件はこっちでも可
RewriteCond %{HTTP_HOST} ^www.saseteiru.jp$

RewriteCondはいろいろ便利ですね。

どっかでRewriteCondってここに書いたような～

ピザ食いたくね？　やっぱサルバトーレでさせている！

apache ディレクリのファイル一覧がでる

2010-11-29T18:10:00.004+09:00

デフォルトのドキュメントルート設定だと
ファイル一覧が見えちゃう
Options Indexes
が入ってるので Indexesは消す習慣つけよう

メモ程度でさせている。

mysqldumpで文字化け

2010-11-27T02:34:00.002+09:00

CentOS sendmailインストール後の起動

2010-11-25T02:35:00.002+09:00

/etc/hosts
127.0.0.1 localhost.localdomain localhost

localhost.localdomainの記述がないと
起動に何分もかかり、まともに起動しないらしい。

上記加えたらさくっとあがった。

覚えておこう

最近ちょっとさせているよね

makeからのapache2 mod_rewrite追加

2010-11-19T16:07:00.002+09:00

最近apacheはyumでインストールするので
あんま気にならかったのですが、
あるシステムでソースからコンパイルして立ち上がった
apache2があり　そこにmod_rewriteがなくて困りました。

どうやらmod_so.cとmod_rewrite.cがあればmakeの必要なく
追加が可能らしい
mod_rewrite.cを発見
mod_rewrite.cがあるディレクトリで以下を追加
/usr/local/apache2/bin/apxs -i -a -c mod_rewrite.c

対応するmod_rewrite.soができた。
再起動してRewriteEngine　on　いけた。。

このへんは手ごわすぎる
だいぶさせているね

CENTOSでNFSマウント

2010-11-17T03:22:00.000+09:00

まさにこれです。必見です！！
http://blog.suz-lab.com/2009/09/centosnfs.html
こりゃわからんわ　助かります～～～

いや～させている。

webminパスワードをコマンドラインで変更

2010-11-10T16:20:00.002+09:00

rootパスをhogehogeに変更
以下のコマンドで終わり
/usr/libexec/webmin/changepass.pl /etc/webmin root hogehoge

Updated password of Webmin user root
のメッセージがでたら変更OK

＊なぜかパスワードに記号や大文字いれるとログインできなくなった
　バージョンによってかもだけど、とりあえず数字値と半角小文字の組み合わせなら大丈夫そうだ。

はへている

logrotate　ローテート旧ファイルを自動で圧縮

2010-11-09T22:29:00.002+09:00

/etc/logrotate.conf
compressのコメントはずして保存　楽ちんだ

次のローテートから圧縮される。

モメモメ　違う　メモメモ
なんかヒワイだけどさせているよ

postfix キューに入っている最大の時間

2010-11-09T22:24:00.003+09:00

させてますか？？

設定内容が詳しく書いてる
http://www.postfix-jp.info/trans-2.1/jhtml/postconf.5.html

デフォルトは5日みたいなので
maximal_queue_lifetime (デフォルト: 5d)

1日に変更してみる。
maximal_queue_lifetime = 1d

ちょっとこれで様子見な感じでさせて

Apacheログのフォーマット　（X-Forwarded-For）

2010-11-08T16:32:00.002+09:00

フォーマットは
以下参考にさせてもらいました。
http://www.adminweb.jp/apache/log/index2.html

X-Forwarded-Forからのログを対応させるには
ホスト%hを「X-Forwarded-For」に変更する。

LogFormat "%{X-Forwarded-For}i %a ～～～～"　combined

文頭にいつもの言ってるから省略

tomcatのlocalhost.logを出力させないようにする

2010-11-07T21:00:00.003+09:00

TOMCATHOME/conf/logging.properties

handlers = 1catalina.org.apache.juli.FileHandler, 2localhost.org.apache.juli.FileHandler, java.util.logging.ConsoleHandler

上記部分の「2localhost.org.apache.juli.FileHandler」
を削除

handlers = 1catalina.org.apache.juli.FileHandler, java.util.logging.ConsoleHandler

tomcat再起動後に反映

今テレビでターミネーター３やってる
たいぶさせているよ

SSL証明書インストールでエラー

2010-10-30T19:51:00.003+09:00

証明書のインストールで、
以下のようなエラーで
[error] SSL Library Error: 218529960 error:0D0680A8:asn1 encoding routines:ASN1_CHECK_TLEN:wrong tag
[error] SSL Library Error: 218595386 error:0D07803A:asn1 encoding routines:ASN1_ITEM_EX_D2I:nested asn1 error

思いのほか手間取りました。こんなの始めてでした。

証明書は余計な改行コードが入ると
ぶっ壊れてしまうときがあるようです。
（ブラウザ上で貼られた証明書をコピペでもってくるなどすると）

ちゃんとメールなどでもらったものをインストールしたら
すんなりいきました。

事前に
openssl x509 -in 証明書ファイル -text

などで証明書がちゃんと表示してから
apacheの再起動するほうがよいですね。
configtestじゃ検知できないので再起動すると
apacheが起動しなくなります。

これからはちゃんと証明書が正しく読めること確認してから
再起動しようと思います。

台風ってさこんな時期にさせているよね？

tomcat6.0.29+jdk1.6.0_22 インストール by 64ビット

2010-10-21T19:02:00.002+09:00

ちょっとおさらいでメモ

tomcat本体もってくる

１、インストールしたいディレクトリで
curl -OL http://ftp.kddilabs.jp/infosystems/apache//tomcat/tomcat-6/v6.0.29/bin/apache-tomcat-6.0.29.tar.gz

*wgetでも可

２、解凍する
tar xvzf apache-tomcat-6.0.29.tar.gz

３、指定したディレクリに変更する。ここでは「tomcat」
mv apache-tomcat-6.0.29 tomcat

４、jdkのインストール
http://www.oracle.com/technetwork/java/javase/downloads/index.html
64ビットのlinuxを選らんでダウンロード(jdk-6u22-linux-x64-rpm.bin)
あとは上記のものを実行
./jdk-6u22-linux-x64-rpm.bin

rpmとかいろいろできちゃうので適当なフォルダ作って
そこで実行したほうがいい。どうせ消すので
恐らく-rpmがついてないファイルをＤＬして実行すれば不要なもの
作らないのかもしれない。
こんどやるときそっちでやってみようかな。

ピザくっちゃうと　させているかもしれない！！

phpMyAdminインストール　デフォルトはローカルのみ

2010-10-20T15:01:00.004+09:00

以下を参考にしインストール
http://blog.suz-lab.com/2009/04/centosphpmyadmin.html

だがデフォルトでインストールでは
権限がなくlocalhost以外では見れない設定になっている。

apacheの設定(yumなどでいれたもの)
/etc/httpd/conf.d
にphpMyAdmin.confが作成されているので、
とりあえずフルアクセスするには以下のようにコメント
#order deny,allow
#deny from all
#allow from 127.0.0.1
#allow from ::1

特定のＩＰだけ許可は
上記のコメントをはずして　allow from 許可するＩＰを
追加する感じでさせているのではないとおもう。

Basic認証(.htaccess)を有効にさせる

2010-10-16T23:19:00.002+09:00

サーバ設定を最近やりはじめることになりました。
いろいろメモを残しておこうかとおもいます。

「AllowOverride」

apacheはデフォルトがNone（無効）になってるので
こいつをいかしてやる。

AllowOverride AuthConfig Limit

AllowOverride　Allとかだとフル解放でなんでもできちゃうので、
要望があればってことでさせている。

ＬｉｎｕｘでDELLのタグナンバーを調べる

2010-08-23T21:47:00.003+09:00

[root@localhost]# dmidecode | more
このコマンドでわかる。

まじか　前は全部サーバの機器の裏に張ってるあるやつ見に言ってたよ。
CENTOS4～RHL5までいける

ちょっと下にスクロールするとでてくる

System Information
Manufacturer: Dell Inc.
Product Name: PowerEdge 2950
Version: Not Specified
Serial Number: XXXXXXX　→　これ

暑い日はまだまだ続くのか？？

sendRedirectだと301リダイレクトだめ

2010-07-16T23:22:00.003+09:00

超何年ぶりかでさせている

いつもapacheまかせで　あんまりリダイレクトって
アプリケーション内でやらなかったのよね
そしたら
JAVAで３０１リダイレクトではまり

HttpServletResponseでresponse.sendRedirect("http://www.iret.co.jp")
こんなのだと３０２になってしまう。
response.setStatus(HttpServletResponse.SC_MOVED_PERMANENTLY);
とか加えてもだめ
sendRedirect自体３０２固定なんだとさ

結局は以下の2行でいけちゃんだわ
response.setStatus(HttpServletResponse.SC_MOVED_PERMANENTLY);
response.setHeader("Location","http://www.iret.co.jp");

sendRedirectって結局以下の2行と同じことらしい
response.setStatus(HttpServletResponse.SC_MOVED_TEMPORARILY);
response.setHeader("Location","http://www.iret.co.jp");

超させている　なんだかなぁ～　食中毒は気をつけよう

ポストグレス8.25→8.41　バージョンアップしてto_dateとかだめ

2009-11-20T01:03:00.003+09:00

久しぶりのさせている！！

ポスグレバージョンアップ時に
型しばりがつよくなり以下のような
書き方がすべてエラーになってました。

8.25 ○ to_char(now(),'YYYYMMDD') = 20091119
○ to_date(20091120,'YYYYMMDD')
8.41 × to_char(now(),'YYYYMMDD') = 20091119
○ to_char(now(),'YYYYMMDD') = '20091119'
× to_date(20091120,'YYYYMMDD')
○ to_date('20091120','YYYYMMDD')

上記のためかなりの機能が動かなかったが、
SQL直さないとだめ？？　させているよ
だが弊社のD氏いい記事をみつけてくれた
参考
http://lets.postgresql.jp/documents/tutorial/cast/

暗黙的キャストの定義 (PostgreSQL 8.4 向け)
をやったら解決
CREATE CAST (int4 AS text) WITH INOUT AS IMPLICIT;

上記全部OKになりました。
はたしてレスポンスにどう影響するのかは？ですが

とりあえずありがとうD氏に感謝

いや～　ポスグレってさせているね

postgresのカラムの文字数変更

2008-11-26T18:24:00.002+09:00

かな～り　初心者てきな
あるテーブルのvacharのサイズを変更

alter table hoge modify hoge_column varchar(10)

こんなんでoracleとかはできる

postgresってもしやできない？
できない的な記事あって　まじかよ～っておもってたら

ぎゅうぎゅうさんが　いやいやいやいや　できるっしょ？って
alter table hoge alter COLUMN hoge_column TYPE varchar(10)

できた。

俺は何を調べてたんだ。。。

やべっ　超させているかも

久しぶりの投稿がこんなの感じでホトトギス

Ｌｉｎｕｘ　ディレクトリ毎のサイズ一覧

2008-08-04T16:26:00.002+09:00

基本的なことだが。。。
たまーに使うのにすぐ忘れるのでさせている　最後のオプションが忘れる
MEMO 3 させているぱ　ぱっぱくり！！

/var内を対象にする

昇順
du /var | sort -n
降順
du /var | sort -nr

いつも使うのは
du -h /var | sort -n

この体は、"無限の剣で出来ていた"。

Googlebotの過剰クロールによるサイト負荷

2008-07-31T17:48:00.003+09:00

apache+tomcat(Velocity)の構成のサーバなのですが、
最近またtomcatのほうがちょっと重くなってきた。

原因はなんだとおもっていろいろログ追っていたら
同じＩＰから結構重いＵＲＬにめちゃくちゃアクセスがあった
原因はGooglebotのアクセスだったのですが、
どうしてこんな間隔でクロールされるのかが
わからないのですが、
tail -f access_log | grep Googlebot
で目視程度だが
1秒に3アセクス以上の同じＵＲＬへのアクセスがあった、
ちょっとサイトが重かった。。。

もしかして結構今までの重かった原因ってこれが根本の原因だったのか？

とりあえず異常に同じＵＲＬくるやつをhttp ４０３に
してtomatいかないように暫定処置　しばらく放置

RewriteCond %{HTTP_USER_AGENT} Googlebot
RewriteRule ^/hoge/hoge\.vm.*$ - [F]

なんでこんなにクロールされるかは時間あるとき調べよう

ちょっと　これで負荷かわったら　させているよね。ほんとさせている。
させている？？　約束された勝利の剣！！！

oracle SQLの実行履歴　LogMiner

2008-07-30T19:07:00.002+09:00

oracle SQLの実行履歴　LogMiner

ちょっとした調べもので
ＳＱＬの実行履歴を調べたかった。
結局思ったものまで情報とれなかったのだが
させている。。。
参考：10gの紹介だけど　9iでもいける
http://otndnld.oracle.co.jp/document/products/oracle10g/102/doc_cd/server.102/B19211-01/logminer.html#13427

ここみりゃいい話だけど久々なのでセイバー！！

oracleには解析用のLOGMINERという標準にツール
が用意されているらしい
アーカイブログモードで起動されていることが
前提だす
----------------------------------------------
SQL> select log_mode from v$database;

LOG_MODE
------------
ARCHIVELOG　→　アーカイブ
-----------------------------------------------

調べたい日付のアカーブファイルを取得
----------------------------------------------
select name,to_char(completion_time, 'yyyymmdd') from v$archived_log
where to_char(completion_time, 'yyyymmdd') = 20080729;

NAME
--------------------------------------
TO_CHAR(
--------
/opt/oracle/oradata/arc1/1_1678.arc
20080729

/opt/oracle/oradata/arc1/1_1679.arc
20080729

/opt/oracle/oradata/arc1/1_1680.arc
20080729

解析したいファイルを指定して、LogMinerを起動
----------------------------------------------------------
EXECUTE DBMS_LOGMNR.ADD_LOGFILE( -
LOGFILENAME => '/opt/oracle/oradata/arc1/1_1679.arc', -
OPTIONS => DBMS_LOGMNR.NEW);

> >
PL/SQLプロシージャが正常に完了しました。

EXECUTE DBMS_LOGMNR.START_LOGMNR(-
OPTIONS => DBMS_LOGMNR.DICT_FROM_ONLINE_CATALOG + -
DBMS_LOGMNR.COMMITTED_DATA_ONLY + -
DBMS_LOGMNR.PRINT_PRETTY_SQL);
> >
PL/SQLプロシージャが正常に完了しました。

V$LOGMNR_CONTENTSのテーブルに解析結果が入るので
あとは普通にＳＱＬしてみる。
カラムの内容は普通に　desc V$LOGMNR_CONTENTSで　みれる

これは[HOGE_TBL]をUPDATEしたＳＱＬを出力してみる
--------------------------------------------------------------------------
SELECT SQL_REDO FROM V$LOGMNR_CONTENTS
WHERE OPERATION = 'UPDATE';
AND SQL_REDO = '%HOGE_TBL%'

ずらっと表示　あとはＳＱＬで絞ったりする。

ほんとは誰がＳＱＬ発行したかって知りたかったんですが、
V$LOGMNR_CONTENTSのUSERNAMEはデータベースに対しての
ユーザーなので、みんな同じユーザーでアクセスしていた
ためアウト。。。
ちょっと　アクセスするユーザー毎にわけようかしら。。。

リモートデスクトップでアプリがフリーズしたら

2008-07-16T16:02:00.003+09:00

最近リモートデスクトップで作業することが多い
リモート先のアプリ（エクセルとか）フリーズした場合、
ctrl+alt+endで　リモート先のタスクマネージャを開いて終了

saseteirune

DWR関連が動かなくなった。。。

2008-06-09T20:02:00.002+09:00

ある案件でサーバ移行があり、
tomcatを5.0.28.　→　5.5.26にバージョンアップ

起動後、Ajax使ってるページ開くと以下のようなエラーが
- Logging using commons-logging.
- Missing classdef for creator 'spring'. Failed to load uk.ltd.getahead.dwr.create.SpringCreator. Cause: org/springframework/beans/factory/BeanFactory
- Missing classdef for creator 'script'. Failed to load uk.ltd.getahead.dwr.create.ScriptedCreator. Cause: org/apache/bsf/BSFManager
- Missing class for converter 'hibernate'. Failed to load uk.ltd.getahead.dwr.convert.HibernateBeanConverter. Cause: Failed to find either org.hibernate.Hibernate or net.sf.hibernate.Hibernate.
- Missing config file: WEB-INF/conf/dwr.xml
- Names of known classes are:
- サーブレット dwr-invoker のServlet.service()が例外を投げました
java.lang.SecurityException: No class by name:

なんじゃこりゃということで、
CTO（SUZ-LAB）に相談　DWRバージョンアップ1系ならいけるんじゃないか～～と
だいぶ古いものを使ってたので・・・・

早速最新のDWRを
以下より入手
http://getahead.ltd.uk/dwr/download

最新の2.0.4を配置して実行
こんどはまたわけからんエラーでよくわからん症状が。。。
やっぱ2系～は動かんか。。。
ちょいとバージョンさげて1.1.4にしてみた。
エラーがだいぶへった　でもまだ動かない。。。

Missing config file: ？？　なんかパスがわるい？

web.xmlを確認　

dwr-invoker

DWR Servlet

uk.ltd.getahead.dwr.DWRServlet

config

WEB-INF/conf/dwr.xml

もしかして/が入ってないからか？
以下のように修正

dwr-invoker

DWR Servlet

uk.ltd.getahead.dwr.DWRServlet

config

/WEB-INF/conf/dwr.xml

きたぁ～～　動いた　なんじゃそりゃ～　させている　させているぞ！！！

といことで無事解決　

梅雨ってさせているとおもわない？？

Postgres カラムの順番変えたいとき

2008-05-19T14:59:00.003+09:00

新しいカラムを、一番したより上に追加したい
そんなときに困る。Alter tableじゃできん。。。

なので、一回dumpして入れなおしって手しかないみたい
これが最速かな？　他に手があれば知りたい鴨

hoge　DBのhoge_dataテーブル

カラム名を含めたINSERTコマンドにてダンプ　オプション-D
pg_dump -D hoge -t hoge_data > hoge_table.sql

→ hoge_table.sql のcreate部分を直す。viかなんかでぇ～

hoge_data テーブルdrop

バックアップしたデータSQLながす

psql hoge < hoge_table.sql

てかカラム追加とかって　させているよね？

MySQLで　CSV吐き出し

2008-05-10T22:46:00.002+09:00

久々にさせている
SQLをそのままCSVデータにする方法
忘れてたのでさせている

最新のIDを250件出力みたいな
SELECT * FROM HOGE order by HOGE_ID desc limit 250
INTO OUTFILE './HOGE.csv' FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"';

おれ　一生させているって言うのかな？

ＩＩＳでの　Basic認証 IISPassword

2008-03-04T15:14:00.002+09:00

今までＩＩＳの認証の仕方は、ユーザー毎の
認証でしか運用してなかったっぽ　なのですが、
以下こんなのあった　
http://www.iistools.com/en/iispassword.html

結構いろいろ情報はありました。
なんだ　今までちょっと手間かけてた　ほっ　ほっぎー　

以下の解説とおりですねぇ
http://dearroom.at.webry.info/200707/article_23.html

久しぶりにさせているね　

モバイルで YouTube

2008-01-25T01:20:00.000+09:00

D氏からの情報　携帯で見れるすげー

http://jp.youtube.com/blog?entry=KdOZYoxkUD4

N904iでみたところ画質も　かなりいい

携帯させているね

JAVAのハッシュ　MD5

2008-01-22T21:45:00.000+09:00

あるＡＰＩに渡すパラメータでＭＤ５ハッシュした値でよこせとさ
ＰＨＰは、md5(”hoge”)とかでできちゃうけど　
ちょっと　ＪＡＶＡではめんどい
java.security.MessageDigestを使用する
ＭＤ５以外もSHA-1,SHA-256,SHA-384,SHA-512の指定も
これでできるらしい　試してないけど。。。

こんなんでできる
String hoge_string = "hoge";
MessageDigest md5 = MessageDigest.getInstance("MD5");
md5.reset();
md5.update(hoge_string.getBytes());
byte[] hash= md5.digest();

16進数にする
StringBuffer sb= new StringBuffer();
int cnt= hash.length;
for(int i= 0; i<>> 4) & 0x0F ) );
sb.append(Integer.toHexString( hash[i] & 0x0F ) );
}

sb.toString();で文字列で取得
これの結果 ea703e7aa1efda0064eaa507d9e8ab7e

他にやり方ねーのかなぁ

腹へって　させているホトトギス

php 指定ディレクトリ内のファイル名取得

2008-01-14T20:43:00.000+09:00

ｐｈｐあまりしらないので
メモさせている便利だね

hogeディレクトリの中のファイル名を
すべて出力　

$hogedir= './hoge';
if ( $d_handle = @OpenDir($hogedir) ) {
　　　while ( $filename = ReadDir( $d_handle ) ) {
　　　　 print "{$filename}
\n";
　　　}
}
CloseDir($d_handle);

phpタイムアウト

2008-01-14T20:40:00.000+09:00

ちょっとＰＨＰでバッチつくったのだが
さすがに30秒じゃ終わるような処理じゃなかった

php.iniの以下を変える　デフォルト30(秒)になっている
max_execution_time=30
　　　　　↓
max_execution_time=6000

あけましたおめでさせている

Linux　NFSマウント

2007-12-30T06:19:00.000+09:00

NFSマウント　実際どんなものかは
しっていたがやったことは　初めてだったので　させている

まずはマウントされる側のディレクトリに設定
/etc/exportsにマウントを許可するIPを設定する。

以下は同一のLAN（10.10.1.0～10.10.1.255）に接続されたPCまたはサーバ
/home/hoge 10.10.1.0/255.255.255.0 (rw) →　読み込みだけっだったら(ro)

上記設定したらその内容を反映service nfs restart →　NFS再起動

次は実際にマウント
10.10.1.7は上記で設定したNFSサーバとする
mount -t nfs 10.10.1.7:/home/hoge /hoge

IP直はどうも微妙なので
/etc/hostsに以下みたいに書いて
10.10.1.7 　nfssvr

以下のようにやると美しいかな　かな？

mount -t nfs nfssvr:/home/hoge /hoge

うーん　どうもサーバ周りを触るのはいつになっても緊張する。

もうすぐ年越し　させているね！！

SQLの文字列の中にシングルクォーテーション

2007-12-25T21:42:00.000+09:00

こんなのに　今日はまった。。。
あるユーザーの検索で、
検索文字列にシングルクォーテーションが入ると
エラー
なんで今までこんなこと起きなかったなのに～
つjakarta turbineのフレームワークでtorque使ってるんだけど
以下みたいな記述があってエラーになってた
crit.add(HogePeer.USER_NAME, (Object)("LOWER("+HogePeer.USER_NAME+") LIKE " + search_user),Criteria.CUSTOM);

そりゃエラーになるわ

あれ　エスケープどうやるんだっけ？シングルクォーテーションの前に
\つければいいべって勝手に思い込んでいて
それやってもだめ
あれ？

ググって見ると以下のようなものが
http://d.hatena.ne.jp/chaichanPaPa/20071123/1195780467

あ　答え、『'』を２つ重ねます『''』。
そうなんだぁ　これかなり基本なんだろうけど　知らなかった。　情けない

メーリのメリーで　させているね。

URLエンコード　デコード

2007-12-24T20:18:00.000+09:00

うちのCTOから教えてもらったページ
ここのページかなり便利だったので　載せておきます。
http://www.tagindex.com/tool/url.html

javascriptで現在のホスト名(ドメイン名)取得

2007-12-24T19:48:00.000+09:00

参考ＵＲＬ

http://suz-lab.blogspot.com/2007/10/jquery.html

http://web01.fureai.or.jp/~tato/jslb/ref.htm

http://hoge.iret.co.jp/index.htmlとかで以下のjavascript実行

var domain = location.hostname;
alert(domain);

A。　hoge.iret.co.jp

うーん　テストサーバとか本番とかいろいろ環境違うとき
これで判断すれば　いいね　

でも余計な if分やswitch分が増えるのはいやだな

メリー　させている！！！

posfixの設定　リレー許可

2007-12-17T22:18:00.000+09:00

こいつもメモで

/etc/postfix/main.cf

以下のように許可するIPを加える
複数ある場合は、カンマで区切る
mynetworks = 127.0.0.0/8

centOS　デフォルトはroot　ssh許可されている

2007-12-17T22:09:00.000+09:00

OSいれたら必ずやらなかきゃなってことでメモ

/etc/ssh/sshd_config

以下のコメントを解除
# PermitRootLogin no

ssh起動しなおし
servie sshd restart

ネタないから　こんなの　させている

Red Hat Linux 9にPHP5.2.5のインストール

2007-12-07T02:24:00.000+09:00

古いＯＳだけに　普通に入らないかな～って
おもったらやっぱだめでした。
最新の　php-5.2.5.tar.gzもってきて
解凍して
configureで　やっぱこけた
checking for xml2-config path... /usr/bin/xml2-configconfigure: error: libxml2 version 2.6.11 or greater required.

なんじゃこりゃ　どうやらなんか古いらしい
いろいろ探してたらなんかアップデートできるらしい
wget ftp://xmlsoft.org/libxml2/libxml2-2.6.29.tar.gz
でソースもってきて
./configure　→　make　→　make install
結構なげー

これ入れたら　ＰＨＰ５も通った

でもさぁ　気づくの遅かったってか確認してからやれよってかんじ
なんだけどもともと　ＰＨＰ４が入ってて　
もともと動いてたサービスが動かなくなった。。。笑
めっちゃ古いソースで、見るのもいやだったので

別アパッチたてて
libphp5.soだけもってくれば　いけるかな？って思ったら
そんな簡単な話じゃないのね。。
今回いれたapacheも既存とバージョン違ってから
ＰＨＰ5 ./configureからやり直し　うざぁ

なんだかなぁ～　こんなことやってるうちに3時間くらいたってるし
ちょっと理由があって　あと同じ環境　二台必要なんだよね
まー　他はfedora4とcento4.4だから　すんなりいくかな？

次はＰＨＰのライブラリいれなきゃ
うちのＣＴＯにまかせたほうがいいかな
いや　ＣＴＯＡかな？かな？
ほんとさせているね

　

nvl mysqはIFNULL

2007-11-27T06:20:00.000+09:00

メモ程度でさせている
IFNULL(hogehoge,0) as hoge

BigDecimal続き　割り算

2007-11-22T20:38:00.000+09:00

ちょっとまたシロート系

参考にした　すげーわかりやすいサイト↓
http://www.applitips.com/java/kiso/roundBigDecimal.htm

10.5/3.5みたいな　ある程度正確な数字がほしい
答えは2.857124～～続く

失敗駄目コード
double total = 10.0;
double member_num = 3.5;
BigDecimal f = new BigDecimal(String.valueOf(total));
BigDecimal r = new BigDecimal(String.valueOf(member_num));
double ftotal = Double.parseDouble(f.divide(r).toString());
System.out.println(ftotal);

エラー
java.lang.ArithmeticException: Non-terminating decimal expansion; no exact representable decimal result. at java.math.BigDecimal.divide(Unknown Source)

これでうまいく

double total = 10.0;
double member_num = 3.5;
BigDecimal f = new BigDecimal(String.valueOf(total));
BigDecimal r = new BigDecimal(String.valueOf(member_num));
double ftotal = Double.parseDouble(f.divide(r,3,BigDecimal.ROUND_HALF_UP).toString));
System.out.println(ftotal);

答え2.857　
divideの引数に小数点の桁数が指定できる。あと丸めモードってやつ

今やってる案件　小数点ばっかでちょっとうんざり　うんこだね

させている

小数点の計算はBigDecimalで

2007-11-14T16:55:00.000+09:00

タイトルのとおり　ちょっと初心者かよって感じだが
doubleの小数点の演算はよろしくない
てか丸められて　おかしくなる
ほんとうんこだなぁ

あるfloat型の小数点の値を100かける
BigDecimal f = new BigDecimal(String.valueOf(f_data));
BigDecimal r = new BigDecimal(String.valueOf(100));
double resulet = Double.parseDouble(f.multiply(r).toString());

↓↓　これだとものによって駄目駄目
f_data　* 100
Double.parseDouble(Float.toString(f_tax)) * 100
こういう細かいの苦手だな～～
てか小数点うざい　させているよ

httpd 再起動するまえにお約束　confの構文チェック

2007-11-06T14:28:00.000+09:00

これ基本なのかな～知らなかった
httpd.confの構文チェックしてくれるみたい
ちょっとやったことないの書いたあとは、便利
restartしてからエラーになると　焦るもんね
[root@hoge vhost]# apachectl configtest
Syntax OK

エラーになるともちろん起動したときみたいに
エラーになってる箇所教えてくれる

apacheリダイレクト　メモ

2007-11-01T16:49:00.000+09:00

http://hoge.co.jp/
ってきたら以下のURLにリダイレクトされたい
http://www.hoge.co.jp/

VirtualHost　:80
ServerName hoge.co.jp
Redirect / http://www.hoge.co.jp/

上記のリダイレクトであればパラメータとか
全部引き継がれるので楽ちん

http://hoge.co.jp/?hogehoge=goha
↓　ちゃんと後ろも引き継がれる　
http://www.hoge.co.jp/?hogehoge=goha

またまたＳＳＬ　firefox＆mac等で原因不明認証エラー

2007-10-27T20:01:00.000+09:00

べりサインの証明書を使ってたんですが、
今まで安いほうセキュア・サーバID64ビットのほうしか設定したことなくって

いつもどおり、
crtとkeyの組み合わせで普通にＩＥ６、ＩＥ７では
httpsでのアクセスＯＫ　証明書も正常

だがなぜかfirxfoxでは原因不明の～とか
で認証通らなくって　まるでオレオレ証明書になっちゃって
なんじゃこりゃ？みたいなぁ。。。

なんか買ったのはグローバル・サーバIDらしい128ビット以上
なので
問題は中間サーバー証明書が設定してなかったからでした。

SSLCertificateFile /usr/local/apache/conf/ssl.crt/
SSLCertificateKeyFile /usr/local/apache/conf/ssl.key/
SSLCertificateChainFile /usr/local/apache/conf/ssl.certificate　
一番最後の追加　拡張子はなんでもいいのかなぁ？
それは試してないけどたぶんいける。

無事firefox、macでもＯＫなりました。
もともとsquidでssl設定してたんですけど、squidのほうはなんかパッチあてないと
うまいこと中間証明書読んでくれないらしいので　
今回は断念
443だけsquidとおさないで直接apacheにやらせた。

ほんとはsquidだけで完結するのが望ましい。んだが
本番環境なので　あんま手出しできん。

うーん　させているね。

Apache mod_rewrite GETのパラーメタ対応

2007-10-25T02:48:00.000+09:00

ある案件で
サイトを統合する仕事があり
リダイレクトが必須になりました。

http://www.hogehoge.com/index.cfm?id=1234 元のページ
　　　　↓　以下のようにしたい
http://www.hogehoge.com/1234/

RewriteRule ^/index.cfm?id=1234 http://%{HTTP_HOST}/1234/ [R=301,L]
んで　上記でいけるかなとおもったらだめでした。。
どうやらGETを読まないらしい

ですのでこのへんの情報で
http://www.screen.sc/wordpress/?p=20
でRewriteCondを使えばいけることに

で以下を書いてapacheリスタートするとエラー
RewriteCond %{THE_REQUEST} ^GET /index.cfm?id=hoge .*$
RewriteRule ^.* http://%{HTTP_HOST}/hoge/ [R=301,L]

なんか？が邪魔してるらしい
そこで正規表現つかってエスケープするとできる
RewriteCond %{THE_REQUEST} ^GET\ /index\.cfm\?id=hoge\ .*$
RewriteRule ^.* http://%{HTTP_HOST}/hoge/? [R=301,L]

上記の最後の？をいれないとパラメータが引き継がれてしまうので
注意

squid+apacheで同ＷＥＢサーバ複数ドメインのＳＳＬ設定

2007-10-20T03:54:00.000+09:00

情報元
http://www.squid-cache.org/Versions/v2/2.6/cfgman/https_port.html

グローバルＩＰ追加（dns設定）
squidが入ってるサーバに
ローカルＩＰを追加する。（Alias）
新しいローカルＩＰに転送設定(nat)

squid.confの設定
http_port ××.×××.×.2:80　　→　既存の設定
http_port ××.×××.×.3:80　→　追加ドメイン

https_port ××.×××.×.2::443 cert=xxx.co.hp.crt1 key=xxx.co.hp.key1
https_port ××.×××.×.3::443 cert=xxx.co.hp.crt2 key=xxx.co.hp.key2　→新しい証明書のパス

××.×××.×.3:443に対して新しいドメインの証明証が適用される。
あとは
apacheの設定はVirtualHost追加して設定するだけ。。省略

SSL　keyのパスフレーズ解除

2007-10-18T20:50:00.000+09:00

忘れがちなのでメモ
openssl rsa -in key.pem -out server.key
Enter pass phrase for key.pem:
　→key作成したときのパスフレーズ入力
writing RSA key

風邪ひいた。。。

2007-10-12T23:40:00.000+09:00

風邪引いて　今日ずっと寝てた。。
あうう　
３０歳ってさ　微妙だよね
体力落ちてきてる。。

うーん　させている！！

tomcatのpostのサイズ変更

2007-10-11T02:56:00.000+09:00

デフォルトは２Ｍのようなので
server.xmlのConnectorに、maxPostSize="変更する値"を追加すると
変更できるみたいです。

あんまオーバーすることに遭遇しないとおもうが

させている

2007-09-26T17:21:00.001+09:00

させている！！！
みんなブログはじめて影響うけた。。
させているってなに？
させている！！

させているブログ

セキュリティグループ毎の上限値(AWS)

wsdl(xml)からjava(class)スタブ生成

oracle11g init.oraでutl_file_dir指定

RDS(Multi-AZ)をあとから立ち上げでEC2と同ゾーン

OpenSSLを用いた証明書設定の確認方法

NFSサーバ側に不具合が起きた時

oracleRDS システム日付はUTCなので注意

CVS(バージョン管理)から最新ソースに更新してmavenでビルド

squid通しているapacheだとbasic認証が通らない。。

postgres カンマ区切りを分割

oracleRDS スキーマまたぎの参照整合性制約

oracle RDSテーブルスペース(表領域)作成

AWSのIPレンジ ９月１２日時点最新

oracle追加ユーザー（スキーマ）作成（oracleRDS）

oracle tns listenerのログを確認

oracle １つのテーブルスペースに大きい値を設定する場合

jdk + tomcatをマイナーバージョンへ

oracle追加ユーザー（スキーマ）作成

fsckは定期的に必要だなぁって思った出来事

httpsは/のみhttpにリダイレクト続

mysqlスレーブ側を作り直す。

ELB経由apacheでhttp or httpsの判定（RewriteCond）

oracleのエクスポートデータの世代をＳ３へ

EC2(linuxサーバー)上でphpでホスト名取得

CentOS5.6にmysql4.0.24のインストール

suz-labのAMI(x86_64-5.5.5)で64bit microの立ち上げ

IAMユーザーにR53の権限

CentOS 4.5にPHP5.3.6インストール

RHEL5でs3cmdいれてS3からファイルDL

logrotate.dに１ファイルで複数個所指定だとローテートされねぇ

postgres waitingがたまったら強制排除

Postgres waitingがたまっているかチェック

AWSのIAMユーザーの権限で一部のS3のバケットだけリストできないようにする

AWS oracleRDS セッション数とかは固定で変更できないみたい

AWS 運用上よく使うコマンド ベスト３

AWS oracleRDSパラメータグループ変更(sec_case_sensitive_logon)

oracle アーカイブログモードON or OFFに

[書評]Amazon EC2/S3/EBS クラウドコンピューティングによる仮想サーバ構築

httpsは/のみhttpにリダイレクト

特定のドメインの場合リダイレクト

apache ディレクリのファイル一覧がでる

mysqldumpで文字化け

CentOS sendmailインストール後の起動

makeからのapache2 mod_rewrite追加

CENTOSでNFSマウント

webminパスワードをコマンドラインで変更

logrotate ローテート旧ファイルを自動で圧縮

postfix キューに入っている 最大の時間

Apacheログのフォーマット （X-Forwarded-For）

tomcatのlocalhost.logを出力させないようにする

SSL証明書インストールでエラー

tomcat6.0.29+jdk1.6.0_22 インストール by 64ビット

phpMyAdminインストール デフォルトはローカルのみ

Basic認証(.htaccess)を有効にさせる

ＬｉｎｕｘでDELLのタグナンバーを調べる

sendRedirectだと301リダイレクトだめ

ポストグレス8.25→8.41 バージョンアップしてto_dateとかだめ

postgresのカラムの文字数変更

Ｌｉｎｕｘ ディレクトリ毎のサイズ一覧

Googlebotの過剰クロールによるサイト負荷

oracle SQLの実行履歴 LogMiner

リモートデスクトップでアプリがフリーズしたら

DWR関連が動かなくなった。。。

Postgres カラムの順番変えたいとき

MySQLで CSV吐き出し

ＩＩＳでの Basic認証 IISPassword

モバイルで YouTube

JAVAのハッシュ MD5

php 指定ディレクトリ内のファイル名取得

phpタイムアウト

Linux NFSマウント

SQLの文字列の中にシングルクォーテーション

URLエンコード デコード

javascriptで現在のホスト名(ドメイン名)取得

posfixの設定 リレー許可

centOS デフォルトはroot ssh許可されている

Red Hat Linux 9にPHP5.2.5のインストール

nvl mysqはIFNULL

BigDecimal続き 割り算

AWSのIPレンジ　９月１２日時点最新

postgres　waitingがたまったら強制排除

Postgres　waitingがたまっているかチェック

AWS 運用上よく使うコマンド　ベスト３

logrotate　ローテート旧ファイルを自動で圧縮

postfix キューに入っている最大の時間

Apacheログのフォーマット　（X-Forwarded-For）

phpMyAdminインストール　デフォルトはローカルのみ

ポストグレス8.25→8.41　バージョンアップしてto_dateとかだめ

Ｌｉｎｕｘ　ディレクトリ毎のサイズ一覧

oracle SQLの実行履歴　LogMiner

MySQLで　CSV吐き出し

ＩＩＳでの　Basic認証 IISPassword

JAVAのハッシュ　MD5

Linux　NFSマウント

URLエンコード　デコード

posfixの設定　リレー許可

centOS　デフォルトはroot　ssh許可されている

BigDecimal続き　割り算

httpd 再起動するまえにお約束　confの構文チェック

apacheリダイレクト　メモ

またまたＳＳＬ　firefox＆mac等で原因不明認証エラー

SSL　keyのパスフレーズ解除