自作CGIを評価するスレ

**Premature end of script headers : /this/thread** · 03/04/05 12:47

自分の作ったCGIをみんなに評価してもらうスレだよ。言語は問わないよ。
よほどプログラムが短くないかぎりはアプロダにでもアップしてね。

**nobodyさん** · 03/06/24 15:24

>>371
> このルーチンだと穴がある。経験則だけど、アクセスが殺到すると簡単に壊れる。
> 説明するのめんどいので、

> http://www.din.or.jp/~ohzaki/perl.htm#File_Lock

> この辺りでも読んでみて。

その辺り読んで、載ってるルーチンそのまま使ってテストした所、
ファイル壊れました。

俺は、>>368くらいの簡単なロックで良いと思うけど。
このロックで壊れるようなアクセス受けてるって事は、
その説明に載ってるようなルーチンでも、ほぼ壊れる。

どんなロックしててもファイルは壊れるんだから、
小細工いれた重いロック処理するより、
簡単にロックする処理入れた方が良いような。

**nobodyさん** · 03/06/24 15:33

>どんなロックしててもファイルは壊れるんだから

そんなことはないよ。ただ言えることは、この板ではまだまともにロックできて
いるルーチンが１つも書かれてないな。

**nobodyさん** · 03/06/24 15:35

>>374
＞そんなことはないよ。ただ言えることは、この板ではまだまともにロックできて
＞いるルーチンが１つも書かれてないな。
flock使っちゃだめ？

**nobodyさん** · 03/06/24 15:36

>>374
どんなに集中アクセスを受けても、
絶対壊れないファイルロックってある訳ない。

あったら、ぜひ見て見たい。

**nobodyさん** · 03/06/24 15:37

>>375
あ、ちなみに、flockでも壊れるんで。ファイル。

**nobodyさん** · 03/06/24 15:40

↓これでもこわれる？（CSVの処理はPerlメモ参考にしてます）
use strict;
use Fcntl qw(:flock);
$tmpfile = "$datafile".".$$.". time() .".csv";　　#万が一リネーム失敗したときのために、
　　　　　　　　　　#ユニークなファイル名にしておく

open (LOCKF, ">$datafile"."_lockf") or die("cannot open:$!");　　#ロックファイルを作成する
　　　　　　　　　　#（★注：ロックファイルは、各CSVごとにユニークに）
　　flock (LOCKF, LOCK_EX);　　#ロックファイルをflockする
　　open(IN, "< $datafile") or die("cannot open:$!"); # 読みのみモードで開く
　　　　open(TMP,"> $tmpfile"); #テンポラリファイルを作成
　　　　　　while ($line = <IN>){
　　　　　　　　$line .= <IN> while ($line =~ tr/"// % 2 and !eof(IN));
　　　　　　　　$line =~ s/(?:\x0D\x0A|[\x0D\x0A])?$/,/;
　　　　　　　　@values = map {/^"(.*)"$/s ? scalar($_ = $1, s/""/"/g, $_) : $_}
　　　　　　　　 ($line =~ /("[^"]*(?:""[^"]*)*"|[^,]*),/g);
　　　　　　　　#必要なものだけをEUCにして、出力時にSJISにする
　　　　　　　　foreach $value (@values){
　　　　　　　　　　&jcode::convert(\$value, "euc");
　　　　　　　　};
　　　　　　　　#CSV形式に変換
　　　　　　　　$newline = join ',', map {(s/"/""/g or /[\r\n,]/) ? qq("$_") : $_} @values;

　　　　　　　　print TMP "$newline\n" ;#テンポラリファイルに１レコード書き込み
　　　　　　}
　　　　close TMP;
　　close IN;
　　unlink $datafile;
　　rename ($tmpfile, $datafile) or die ("cannot rename : $!");
close LOCKF;

**３７４** · 03/06/24 15:41

＞絶対壊れないファイルロックってある訳ない

この根拠がどこからくるのかわからないが、
少なくともとてつもないアクセス集中に対応できるように非ブロックモードで
タイムアウトを備えてないとまず無理だということは教えておこう。

**378** · 03/06/24 15:41

あ、EUCにしてからSJISにもどすの忘れてるけど、そこは気にしないで

**371** · 03/06/24 15:46

> どんなロックしててもファイルは壊れるんだから、

そんなことはない。

というか、上(大崎氏の)のルーチンでファイル壊れたんならファイルシステムに
不備があるか、打ち間違いがあるかパーミッションやらの設定を誤ってるかどれか。
ファイルシステム上でrenameが衝突しないという条件の元でならうまく行くはず。

アクセス集中でファイルが壊れるのはロックの機構に不備がある
だけで、正しい状況下で行われたUNIX系OSでのflockでは、ファイルシステム
にバグがあるか、ファイルシステム自体のクラッシュでもない限り壊れない。

>>375
flockはNFS越しの場合に失敗するから、ファイスシステムを予め
調べておく必要がある。
NFS越しだとPOSIXモジュール使うかfcntl使う必要があった気がする。

>>376
> どんなに集中アクセスを受けても、
> 絶対壊れないファイルロックってある訳ない。
> あったら、ぜひ見て見たい。

非ネットワークファイルシステム＋UNIX系OSでのflock。stableなバージョン上で
これで壊れたって話は逆にあったら見てみたい。

**371** · 03/06/24 15:48

>>377
ネットワークファイルシステムを使ってる場合はね。
それ以外で壊れるという話は(ファイルシステム開発中のバグ以外は)
聞いたことない。再現できたら結構すごいと思うが。

**371** · 03/06/24 15:54

変な憶測並べる前にFAQくらいみんな読もうよ。

http://elib.cs.berkeley.edu/~loretta/perl/nmanual/pod/perlfaq5/How_can_I_lock_a_file_.html

**nobodyさん** · 03/06/24 18:50

追加書き込みすれば壊れない。

**371** · 03/06/24 19:10

>>384
2つのプロセスが同時に追加書込しようとしたら、
その部分は壊れるよ。

**nobodyさん** · 03/06/24 20:17

>>371
って言うかOSが関与しないファイルロックで信頼できるアルゴリズムってあるの？

**nobodyさん** · 03/06/24 20:18

>>385
何を以て壊れるとするかだな。

**378** · 03/06/24 20:27

>>378
はどうですか？

**nobodyさん** · 03/06/24 20:34

>>388
ええ、ばっちりシステムコールのflockがいらっしゃいますね。

**371** · 03/06/24 20:45

>>386
symlinkにしろ、rewriteにしろ、mkdirにしろ、OSがファイルシステム上で衝突しないように
設計されているという大前提で作られてるし、実際衝突するかどうかはOS次第なので、
OSに非依存で汎用可能なアルゴリズムっていうのは原理的に不可能じゃないかと。

**nobodyさん** · 03/06/24 20:47

>>390
その意見には激しく同意。
じゃあ、議論するだけ無駄だと思うわけだ。

**nobodyさん** · 03/06/24 20:48

＞OSがファイルシステム上で衝突しないように設計されているという大前提で作られてるし。

OS側でAtomicでもプログラム側がそうでなけりゃ・・・。