limitは使っていいのかな。
select keycol
, seq
,(select val
from OmitTbl o2
where o1.keycol = o2.keycol
and o1.seq >= o2.seq
and o2.val is not null
order by o2.seq desc
limit 1)
from OmitTbl o1
こういうのは何故解けるかというとなんとなくわかっちゃうんだけど、そうじゃなくてデザパタみたいにSQLをパターンで整理できたらいいなぁとか思う。
※追記 おもいっきり題意読み違えてましたorz
]]>なので、とても大きいテーブルのごく一部のデータだけ残して他を消す手順としては、
この手順であればテーブルのOIDも変わりません。
残すレコードが多ければ、3と4の間で一旦インデックスを削除して、5の後でインデックスを作り直した方がいいかもしれません。あと、一時保存先のテーブルは、CREATE TEMPORARY TABLEを使った方が速い(し、最後にテーブルをdropする手間も省ける)と思います。
なので全体的な操作としては、
CREATE TEMP TABLE items_temp SELECT * FROM items LIMIT 0;
INSERT INTO items_temp SELECT * FROM items WHERE ...;
TRUNCATE items;
INSERT INTO items SELECT * FROM items_temp;
といった感じです。もう一つついでに。
CREATE TABLE items_new AS SELECT * FROM items LIMIT 0;
は、
CREATE TABLE items_new (LIKE items);
と書くこともできます。この"LIKEほげほげ"は、(今回は必要ありませんが)オプションによって制約やデフォルト値もコピーでき、 また以下のように、カラムを追加することもできるので、「似てるけどちょっと違うテーブル」を作る時に便利です。
CREATE TABLE items_new (newcol1 int, LIKE items, newcol2 int);
どうやらSecurityコンポーネントのrequireAuthを使ってると、requestAction()が呼ばれた時にセッション側のトークンが書き換えられてしまうので絶対トークンが一致しない様子。うーん困った。
あと、セッションの中にはトークンのキーと同時に有効期限が
セットされるんだけど、
Sessionコンポーネントの有効期限がCAKE_SECURITY * CAKE_SESSION_TIMEOUT
なのに、トークンの有効期限はCAKE_SECURITYだけで決まっちゃってる気がする。
それより、あるオブジェクトのメソッドがどのクラスで定義されているか調べる方法を知りたいなぁ。
と昨日書いたけど、わかった気がする。__dict__を調べればいいんじゃないだろうか。
import inspect
def definedat(method):
attname = method.func_name
cls = method.im_class
for c in inspect.getmro(cls):
if attname in c.__dict__:
return c
こんな感じ。
>>> class A:
def msg(self): return "A"
>>> class B(A):
pass
>>> a = A()
>>> b = B()
>>> definedat(a.msg)
<class __main__.A at 0x012B5150>
>>> definedat(b.msg)
<class __main__.A at 0x012B5150>
ちゃんと基底クラスを返してくれます。さらに多重継承の例。
>>> class C(A):
def msg(self): return "C"
>>> class D1(B,C):
pass
>>> class D2(C,B):
pass
>>> d1 = D1()
>>> d2 = D2()
>>> d1.msg()
'A'
>>> d2.msg()
'C'
>>> definedat(d1.msg)
<class __main__.A at 0x012B5150>
>>> definedat(d2.msg)
<class __main__.C at 0x012BA600>
うん、よさそう。実はインスタンス化しなくてもdefinedat(D1.msg)でも動きます。
追記：ほぼ同じコードを発見してしまったorz
]]>それ、トランザクショントークンっていいます。 ざっと調べてみたら、2003年頃からある手法らしい。
Strutsでは，Transaction Tokenという機能により，これらの現象を検出できる。
JavaWorld DAY 2003での発表資料からの抜粋で、Struts Transaction Tokenを紹介している。Submitボタンの2度押しやブラウザの戻るボタンによるトランザクションの混乱を防御する仕組みのようだ。
かく言う僕も、以前はこれ知らずに発見した気になっていたけどw
CakePHPだと、この手の処理はSecurityコンポーネントを使うと自動でこの手の処理をやってくれます。
]]>inspect.getfile()とかinspect.getsourcelines()とかがそのものでした。
subtech - 冬通りに消え行く制服ガールは、夢物語にリアルを求めない。 - Ruby で、メソッドがどこで定義されたか外から知る方法
>>> import inspect
>>> inspect.getfile(inspect)
'C:\\Python24\\lib\\inspect.pyc'
>>> from os.path import abspath
>>> inspect.getfile(abspath)
'C:\\Python24\\lib\\ntpath.py'
それより、あるオブジェクトのメソッドがどのクラスで定義されているか調べる方法を知りたいなぁ。 ガシガシ多重継承しているソースを読む場合、けっこう便利かもしれない。
追記：続きあります。 memo-space :: Pythonで、メソッド定義されたクラスを知る方法
]]>PHPのarray_multisort関数が激便利だったので紹介 : akiyan.com
<?php
$sales = array(
2 => array(
'title' => 'ほげほげ１',
'amount' => 3,
),
1 => array(
'title' => 'ほげほげ２',
'amount' => 2,
),
0 => array(
'title' => 'ほげほげ３',
'amount' => 5,
),
);
$cmp = create_function('$a, $b', 'return $a["amount"] - $b["amount"];');
usort($sales, $cmp);
var_dump($sales);
?>
複数条件でソートする場合は、他の言語のように値を返すor演算子があれば
'return $a["amount"] - $b["amount"] || strcmp($a["title"], $b["title"]);'
とか書けるんだけど。せいぜいこんな感じか。
$cmp = create_function('$a, $b', 'return ($c = $a["amount"] - $b["amount"]) ? $c : strcmp($a["title"], $b["title"]);');
読み込むファイルはまずカレントのワーキングディレクトリからの相対パスとしてinclude_path で探され、それから、カレントのスクリプトのディレクトリからの相対パスとしてinclude_path で探されます。 (中略)ファイル名が ./ あるいは ../ で始まっている場合は、 カレントのワーキングディレクトリからの相対パスとして探されるのみとなります。 (PHP: include - Manual)
以下実験。include_pathは.:/php/includes:/usr/share/pearとなっています。
で、例えばこんなディレクトリ構成になっているとします。
+- foo/
| +- bar/
| +- a.php
| +- b.inc
+- b.inc
+- c.inc
それぞれのファイルの内容はこんな感じ。
foo/bar/a.php
<?php
include "b.inc";
include "./b.inc";
include "../../c.inc";
?>
foo/bar/b.inc
This is foo/bar/b.inc
b.inc
This is b.inc
c.inc
This is c.inc
で、fooディレクトリの上のディレクトリから実行してみます。
$ php foo/bar/a.php
This is b.inc
This is b.inc
PHP Warning: include(../../c.inc): failed to open stream: No such file or directory in /path/to/foo/bar/a.php on line 4
...
実行結果は、すべてのファイルをスクリプトのあるディレクトリではなく現在の実行ディレクトリから探そうとしていることを意味していますね。
include "b.inc"の場合は、ワーキングディレクトリ⇒スクリプトディレクトリの順で探すので、ここでb.incを削除してみると、
$ php foo/bar/a.php
This is foo/bar/b.inc
PHP Warning: include(./b.inc): failed to open stream: No such file or directory in /path/to/foo/bar/a.php on line 3
...
PHP Warning: include(../../c.inc): failed to open stream: No such file or directory in /path/to/foo/bar/a.php on line 4
と、include "b.inc"は成功しますが、include "./b.inc"はエラーとなります。
straceを見ると、いくつかのパスをトライしている様子が見えます。
open("foo/bar/a.php", O_RDONLY) = 3
# include("b.php") の場合、
# 最初にワーキングディレクトリ
open("/path/to/b.inc", O_RDONLY) = -1 ENOENT (No such file or directory)
# 次にinclude_path
open("/php/includes/b.inc", O_RDONLY) = -1 ENOENT (No such file or directory)
open("/usr/share/pear/b.inc", O_RDONLY) = -1 ENOENT (No such file or directory)
# 次スクリプトディレクトリで発見
open("/path/to/foo/bar/b.inc", O_RDONLY) = 3
This is foo/bar/b.inc
# include("./b.php") の場合、ワーキングディレクトリに
# 無ければすぐ諦める
open("/path/to/b.inc", O_RDONLY) = -1 ENOENT (No such file or directory)
PHP Warning: include(./b.inc): failed to open stream: No such file or directory in /path/to/foo/bar/a.php on line 3
でも何でこんな仕様になってるんだろう。
]]>scaffold :modelという一行が何なのか理解できずに悩む。paramsやsessionは何故@paramsや@sessionではないのか悩む。Module#attr_internalの存在を知り、気が遠くなる。←今ここどうもRubyのコードは苦手だ。
masuidrive on rails ≫ Blog Archive ≫ Railsでアプリを組むのは簡単か?
Railsでアプリを組むのは、PHPやJavaより楽だけど、Ruby/Railsが使えるようになった人間が、アプリを組むのが楽だって言うだけで、Ruby/Railsを覚えるのがPHP/Javaより簡単って訳じゃない。
なるほど。 RailsはWebアプリケーションを作るための便利な黒魔術集といったところか。
フレームワークとしてうんぬんより、script/generateは便利といった印象。 ただしそのscript/generateの使い方をどこで調べたらいいのかよくわからないけど。
]]>いや実際MySQL Proxyとは全然似てないんですが。MySQL Proxyはクライアントとサーバーの間に挟まる立したサービスのようですが、 PL/Proxyは、dblinkやdbmirrorのように、バックエンドから別のバックエンドに接続することでProxyとして動作します。複数のバックエンドに接続することで、クラスタリングやロードバランスを行なうこともできます。
えーっと順を追って話すと、PL/Proxyは、名前にPLとあるように、PostgreSQLサーバの中で動く手続き言語です(PL/pgSQLのように)。
このPL/Proxyで書いたユーザ定義関数を呼ぶ→別のバックエンドに接続して同じシグネチャの関数を呼ぶ→その戻り値を返す。ということをやります。
実際、上記の3つのURLに書かれていることが全てです。とてもシンプル。
$ tar zxf plproxy-2.0.2.tar.gz
$ cd plproxy-2.0.2
$ gmake; gmake install
$ psql -f /usr/local/pgsql/share/contrib/plproxy.sql データベース名
CREATE FUNCTION
CREATE LANGUAGE
db1、db2、db3と3つのデータベースがあって、db1にPL/Proxyをインストールしたとします。で、db2、db3にはそれぞれ、hello()というSQL関数を作ります。
db2=# create function hello() returns text as $$select 'HELLO db2'::text;$$ language sql;
CREATE FUNCTION
db2=# \c db3
You are now connected to database "db3".
db3=# create function hello() returns text as $$select 'HELLO db3'::text;$$ language sql;
CREATE FUNCTION
で、db1で、PL/Proxyでhello()関数を作ります。
db1=# create function hello() returns text as $$
CLUSTER 'cluster1';
RUN ON ANY;
$$ language 'plproxy';
CREATE FUNCTION
RUN ON ANYというのは、クラスタのどれか一つで実行してよ(要するにロードバランス)を意味しています。他にはRUN ON ALLや、特定のノードを指定して実行させることもできます。
ところでそのクラスタの構成はどこで設定するかというと、設定ファイル等があるわけではなく、実はSET RETURN FUNCTION(行を返す関数)で定義します。
db1=# create schema plproxy;
CREATE SCHEMA
db1=# create or replace function plproxy.get_cluster_version(cluster_name text)
db1-# returns integer as $$
db1$# select 1;
db1$# $$ language sql;
CREATE FUNCTION
db1=# create or replace function plproxy.get_cluster_partitions(cluster_name text)
db1-# returns setof text as $$
db1$# select 'dbname=db2'::text
db1$# union
db1$# select 'dbname=db3'::text;
db1$# $$ language sql;
CREATE FUNCTION
db1=# create or replace function plproxy.get_cluster_config(cluster_name text,
db1(# out key text, out val text)
db1-# returns setof record as $$
db1$# begin
db1$# return;
db1$# end;
db1$# $$ language plpgsql;
CREATE FUNCTION
3つ関数を定義していますが、キモはplproxy.get_cluster_partitionsです。
これは、クラスタの各ノードへの接続文字列(
PQconnectdb
の引数)を返すように定義します。
今回は単にunionクエリにしてありますが、ここに色々複雑なロジックを書いても
いいわけです。逆に、単にテーブル上に定義したければ、それでもかまいません。
db1=# select * from cluster_config;
id | conn_str
----+------------
1 | dbname=db2
2 | dbname=db3
(2 rows)
db1=# create or replace function plproxy.get_cluster_partitions(cluster_name text)
db1-# returns setof text as $$
db1$# select conn_str from cluster_config;
db1$# $$ language sql;
CREATE FUNCTION
今回は同じマシン上で実行していますが、当然'host=... 'と書けば別のマシン
に接続させることもできます。
さてこれで準備ができたので、db1上で関数hello()を実行してみましょう。
db1=# select hello();
hello
-----------
HELLO db2
(1 row)
db1=# select hello();
hello
-----------
HELLO db3
(1 row)
db1=# select hello();
hello
-----------
HELLO db3
(1 row)
db1=# select hello();
hello
-----------
HELLO db2
(1 row)
db1=# select hello();
hello
-----------
HELLO db3
(1 row)
非常に地味ですが。ロードバランスされていることがおわかりでしょうか。
というわけで、繰り返しになりますが、やってることとしては、 「自分が呼び出されたら、別のところに接続して同じものを呼び出す」 だけというシンプルなものです。なんだよ関数呼び出しだけかよと 思うかもしれませんが、 PostgreSQLのpl/pgsqlやViewやRuleなどと組み合わせると、 結構色々な使い方ができるんじゃないかなと思います。
]]>-- スタンダードに
select case
when i%15=0 then 'FizzBuzz'
when i%5=0 then 'Buzz'
when i%3=0 then 'Fizz'
else i::text end
from generate_series(1,100)as s(i);
-- ちょっとアグレッシブに(8.2以降)
select coalesce(v15.t, v3.t, v5.t, s.i::text)
from generate_series(1,100)as s(i)
left join(
values(0,'FizzBuzz')) as v15(i,t) on (s.i%15=v15.i)
left join(
values(0,'Fizz')) as v3(i,t) on (s.i%3=v3.i)
left join(
values(0,'Buzz')) as v5(i,t) on (s.i%5=v5.i)
あ、valuesじゃなくて普通にサブクエリでいいのか。まあvaluesって書いてみたかっただけです。
]]>いちばん手っ取り早いのは、mbstring.func_overloadを設定しちゃうことだと思いますよ。自分でプラグイン書く必要とか無いです。
]]>「これは自分しか出来無い」なんてプレッシャーの中で仕事をしていくことが僕のゴールなのだろうか。
]]>元ネタ: cl.pocari.org - PHP の apache_setenv と virtual を利用して，ファイルへの直リンクを防止する
この foo.php のファイル名を時間によって変えるなどすれば，まあ，直リンクを防止することができる……のかな？ちと強引ですが．
つまり、「直リンクを防止する」ことを考えるより「ある一定時間しか有効でないURLを作る」ことを考えれば良いということじゃないでしょうか。
で、foo.phpのファイル名を変えちゃうと、外部からの直リンクは防げても、内部からの普通のリンクを貼る時に困りそうです(それならぶっちゃけ、画像のファイル名そのものを時間によって変えちゃってもいいわけだし)。
なので、時刻をパラメータとして渡す方針で。
フェーズ1
foo.php?t=....のようにfoo.phpにタイムスタンプを渡す$_GET['t']と現在時刻を比較し、n分以上たっていればはじくなので、フェーズ2
$_GET['t']と現在時刻を比較し、n分以上たっていればはじくな感じじゃないでしょうか。本当はapache moduleとかで書いた方が楽そうですが。
]]>