1. ある用語が別の用語を包含していると、化ける場合がある
   例：「ネズミ目」と「目」という用語がある場合、うまく用語にマッチせず、かつ%%%という変な文字列が挿入されることがある↓
   ←変な%%%が
2. 文中の用語がリンクされない場合がある（空白や記号で挟まれていないと発症）
   ←「固有種」も用語にあるが
3. これは仕方ないんだけど、用語リストが正しくあいうえお順ではなく、文字コード順になる
   ←「ねずみもく」の次が「あしゅ」

これらを解消するために、 IMM-Glossary.php を下記のように修正しました。

適用したのは IMM-Glossary ver.2.1.1 です。

その１：日本語キーワードは非単語文字で区切らない

そもそも英語など１バイト系文字を前提としているため、用語は \W （空白などの非単語文字（0-9a-zA-Z_でない文字））で区切られることになっています。
日本語の場合それでは不都合なので、1246行目付近と1248行目付近、 \W でマッチしているところを [^%] でマッチさせるよう修正します。

// $Content = preg_replace ( '#(\W)(' . preg_quote ( $Term['Title'] , '#' ) . ')(\W)#Ui' , '${1}%%%${2}%%%${3}' , $Content , $Limit ) ;
$Content = preg_replace ( '#([^%])(' . preg_quote ( $Term['Title'] , '#' ) . ')([^%])#Ui' , '${1}%%%${2}%%%${3}' , $Content , $Limit ) ;
// $Private['#(\W)%%%(' . preg_quote ( $Term['Title'] , '#' ) . ')%%%(\W)#Ui'] = $Link ;
$Private['#([^%])%%%(' . preg_quote ( $Term['Title'] , '#' ) . ')%%%([^%])#Ui'] = $Link ;

直りました。

←直ったみたい
←「固有種」もＯＫだけど

さて、これをすると１つ新たな障害が。たとえば上図例でいうと「サル目」「目」という用語がある場合、より長い用語（「サル目」）にマッチしてほしいところ、用語を登録した順序によっては（先に登録した用語を優先的に変換するようなので）「目」にマッチしてしまう場合があります。

これを修正するため、DBよりデータ取得する際にID順ではなく文字列長降順で取得するよう変更。
用語数が多くなったらパフォーマンスに問題出るかもしれませんが、とりあえず。

1118行目:

// $Temporary = IMM_Glossary_MySQL_Records_Get ( 'DISTINCT `Title`' , $GLOBALS['IMM-Glossary']['Variables']['Table'] , '' , '`ID` ASC' , '' ) ;
$Temporary = IMM_Glossary_MySQL_Records_Get ( 'DISTINCT `Title`' , $GLOBALS['IMM-Glossary']['Variables']['Table'] , '' , 'LENGTH(`title`) DESC' , '' ) ;


これで正しく表示されるようになりました。

←これでＯＫ

用語リストをあいうえお順に（運用でカバー）

これは気にしなくてもいい（ほっといてもいい）のかもしれませんが。

半分運用でカバーすることにします。つまり、用語説明の先頭に必ずふりがなを入れることにします。ZooTubeはちびっこも見るかもしれないので、ふりがな必須にするのはいいことだ。
それで、並び順は用語の昇順ではなく用語説明の昇順とすることにします。

561行目:

// $Terms = IMM_Glossary_MySQL_Records_Get ( '*' , $GLOBALS['IMM-Glossary']['Variables']['Table'] , '' , '`Title` ASC' , $Limit ) ;
$Terms = IMM_Glossary_MySQL_Records_Get ( '*' , $GLOBALS['IMM-Glossary']['Variables']['Table'] , '' , '`Definition` ASC' , $Limit ) ;


752行目:

// $Terms = IMM_Glossary_MySQL_Records_Get ( '*' , $GLOBALS['IMM-Glossary']['Variables']['Table'] , '' , '`Title` ASC' , $Limit ) ;
$Terms = IMM_Glossary_MySQL_Records_Get ( '*' , $GLOBALS['IMM-Glossary']['Variables']['Table'] , '' , '`Definition` ASC' , $Limit ) ;


これで、あいうえお順に並ぶようになりました。

←あしゅ＜いくじのう＜うしもく、OK

おわり。

…と、
以上、たいした修正でもないのに、意味なく気合い入れて書いてみました。
現時点で日本語情報があまりなかったので。おすすめプラグインですよ。

1. プラグインの入手
IMM-Glossary WordPress Plugin より、現時点で最新の Ver.2.1.1 をありがたくダウンロード。（少し下にスクロールすると青いDOWNLOADボタンがある）

2. 文字化け対応

このままだと管理画面（更新画面）で文字化けするので、WordPress用語辞典プラグイン！＠愛solation-ward にあった文字化け修正の方法にて修正。
ZooTubeの場合は UTF-8 なので、EUC ではなく UTF-8 とした。
<input type="text" id="Title" name="Title"
 value="<?php echo htmlentities ( $Term['Title'] , ENT_QUOTES, 'UTF-8') ; ?>" size="35"/>
（中略）
<textarea id="Definition" name="Definition" rows="10" cols="80"><?php echo htmlentities ( $Term['Definition'] , ENT_QUOTES, 'UTF-8') ; ?></textarea>


3. プラグインフォルダにおき、管理画面の[プラグイン]で有効化

4. [設定]-[IMM-Glossary] で表示設定。
ZooTube では その場で(DHTMLで)ポップアップする設定とした。

5. [管理]-[ページ] を見ると IMM-Glossaryというページができているので、任意のページ名やスラッグに変更。

6. あとは[管理]-[IMM-Glossary] で、ちくちくと用語を足していくのみ。

7. 見た目を変える場合は、IMM-Glossary/Style_Sheets/Style_Sheet.css をいじる。
なお、背景が透明っぽくなる（本文の字が透けて見える）場合は、.IMM_Glossary_-_Tool_Tip クラスに z-indexを（大きめに）指定すると直った。

8. 登録した用語にマッチするとこんなふうになります。とっても便利。

日本語で運用するに当たっていくつか修正やカスタマイズを施したので、それは次以降のエントリで。

ZooTube（YouTube動物図鑑）

ふつうに楽しいサイトに仕上がったので、ぜひお楽しみください　;-)

説明文(Wikipedia)部分は手でコピペ→読みやすいように加工して、動画収集にはYouTube API を使っています。
WordPress上で動いています。プラグイン化する腕はないので、テンプレートにそのまま記述しています。（カスタムフィールドに検索キーワード登録→YouTubeから検索→独自アルゴリズム（←そんなえらそうなもんじゃない（笑））でランク付け＆関係なさそうな動画を除外など）

自分用のメモとして、YouTube API を使ってみたごく簡単な手順を以下に記しておきます。

（１）Zend Gdataライブラリ入手
PHPで楽して書きたいので、Zend Gdataライブラリをを使うことにする。
ライブラリをダウンロードして適当なディレクトリに展開。
とりあえず今回は全部展開してディレクトリに置いたが、本当は library/ 配下のみ置けば用は足りるはず。

（２）PHP5環境を用意
Zend GdataライブラリにはPHP5が動く環境が必要。
（なので、ついでに当ぢぢらぶろぐも ロリポップ→heteml に乗り換えました）

（３）今回は検索だけなので Developer Key は不要。でもなんとなくとってみる。

（４）ソース。

その１：YouTubeライブラリを呼ぶ。
Zend Gdataのライブラリディレクトリに include_path が通っている必要がある。とりあえず実行時に通すことにする。


// YouTubeローダ
$ZEND_LIB_DIR = ライブラリを置いてるディレクトリ. 'ZendGdata-1.5.2/library/';
set_include_path(ini_get('include_path') . ($_SERVER['WINDIR']>'' ? ';' : ':') . $ZEND_LIB_DIR);
require_once 'Zend/Loader.php';
Zend_Loader::loadClass('Zend_Gdata_YouTube');


その２：検索は簡単。

    $yt = new Zend_Gdata_YouTube(); 
    // 検索条件設定
    $query = $yt->newVideoQuery();
    $query->setVideoQuery ('cattle|cow|bull');  // ウシに関する動画を探してみようと思う
    $query->setCategory('Animals');  //　動物カテゴリから
    // 検索実行
    $feeds =  $yt->getVideoFeed($query);


キーワードの羅列は | で区切る。
カテゴリは先頭大文字で、キーワードは先頭小文字でセットする。

ここで注意する点：
英語のキーワードと日本語のキーワードが混在しているとうまく検索できないっぽい（確か英語の検索結果のみ表示される）。
ZooTubeでは日本語のみと英語のみで2度に分けてクエリを投げて、あとからマージする処理をしている。

その３：あとは適当にループまわして表示する

foreach($feeds as $entry) {
    
    // エントリのIDを取得
    $id = substr($entry->getVideoWatchPageUrl(), -11);
    
    // タイトル
    $title = $entry->getVideoTitle();
    
    // 詳細
    $desc = $entry->getVideoDescription();
    
    // URL
    $url = $entry->getFlashPlayerUrl();
    
    // 評価：未評価だと getRating() で nullが返る
    if ($entry->getRating()) {
        $rate = (string)$entry->getRating()->getAverage();
    }
    
    // 時間（秒）
    $duration = $entry->getVideoDuration();
    
    
    print <<<END_OF_HTML
<div class="entry">
（略：適当に表示）
    ：
END_OF_HTML;
}


実際はもうすこしごにょごにょやってますが（表示順を整えたり、かぶってる動画や関係なさそうな動画を除去したり）、まぁこんなに簡単に動画収集サイトができるのはありがたいことだ。
つい最近APIがらみのドキュメントも日本語化されたことだし（もーちょっと早く出てくれれば自分も恩恵にあずかれたのだが ）、これからどんどん YouTube API を活用したサイトが出てくると楽しくなるなと思います。

例：

$arr = array('casino', 'viagra', 'rolex');
print_r($arr);
// Array
// (
// [0] => casino
// [1] => viagra
// [2] => rolex
// )
　
$re = array_map(create_function('$x', 'return "/".$x."/i";'), $arr);
print_r ($re);
// Array
// (
// [0] => /casino/i
// [1] => /viagra/i
// [2] => /rolex/i
// )

rNote から WordPressに乗り換えました。
旧zumomo.orgはエラーが頻出＆動作が遅すぎでとても見るに耐えない状態でした。おそらくrNoteの問題ではなく私が勝手にいじったところがやばかったんだと思います。
もうすっかり放置しっぱなしでrNoteについてもすっかり忘れてしまっていたので、心機一転で新しいCMSに乗り換えることとした次第です。
まだ移行途中のデータに不備があったりいろいろすると思いますが、漸次直していきます。

あわせてサーバも移転しました。ドメイン移動中なのでしばらく（数日）は不具合がでるかもしれませんが、ご容赦のほど。

放置していた2年余りの間に、公私ともに（そもそも「私」のみに）環境が変わりました。
いろいろネタはたまっているので、おいおい書いていこうと思います。

今後は、ぶろぐほどでもないネタはこちらへ。

Web2.0な文脈でよく引き合いに出されているものの今まで使ったことなかったんですが、タグってすげー面白い！

RSSが提供されてるので、RSS Reader プラグイン を使ってサイドバー(画面右下)に表示してみた。非常にいい感じです。

ただ「せっかくだからdel.icio.usのタグも出してみたい～」とかいろいろ思うと、別途プラグイン作ったほうがいいのかもしれない。今でも充分ナイスだが、迷えるところだ。

それにしても、MyClip＋MyBlogListサービス終了→ドリコムRSS なわけですが、ドリコムRSS激しく使いづらい…。MyClipのシンプルさ＆カスタマイズ性がよかったのにー。

凝ったインタフェースつくったみたいだけどそのせいでユーザ離れしてるようで。（よい評判を聞いたためしがない。当家ではｳﾝｺだと評価が一致）

せっかくがんばって開発したプログラマさんｶﾜｲｿｽ

家事中は結構あちこち移動するので、PCやステレオ等から流すより、音が自分についてくるiPod(などのポータブルプレイヤー)で聞くのがよろしいですね。

あと「家事中はこれらを聞きながらやろう」と決めてやると、家事にまつわる「どーしてもやんなきゃいけない義務」感が多少軽減されるのがいい感じです。

iPod Shuffle の 1GB がもったいないけど、せいぜい7～8個を入れといて何度もリピートして聞いています。

English as a Second Language Podcast(ESL Podcast)

約15分。月曜～金曜更新。

月水金は通常プログラム。3部構成になっていて、(1)スクリプトをゆっくり読む (2)スクリプト中に出てきた単語・熟語の解説 (3)スクリプトを普通のスピードで読む って感じ。

火木は雑談＆リスナーからの（英語にまつわる）質問に答えるプログラム。これも単語・熟語はその場で解説してくれる。

スクリプトはディスプレイつきiPodだとディスプレイで見られるらしい。自分のは iPod Shuffle(ディスプレイなし)なので見られませんが、Webで公開されてるのを見てます。

自分には(お恥ずかしながら)このぐらいのスピードがちょうどいい。ぎりぎりシャドウイングできる感じ。

あと(2)を聞いた後で(3)を聞くとなんかちゃんと聞き取れるようになってるのが、非常に嬉しくてモチベーションを高めてくれます。目下の最お気に入りです。

2ch英語板【iPod】　Podcastでリスニングの練習 (現在は2スレ目) で話題になっていて知りました。

The Way We Say It

1分ちょい。週1ぐらい更新。

こんな時はこう言う！のフレーズの説明と、簡単な対話例。

スクリプトは上記URLで公開。

ポッドキャスト留学(英語リスニング力の向上に役立つポッドキャストの紹介)で知りました。

English Idioms and Slang

こちらも1分ちょい、週1ぐらい。

割とインフォーマルな感じの熟語や言い回しなど。あと最後に以前の表現の復習クイズをしてくれるのもいい感じかも。

スクリプトは上記URLで。

こちらもポッドキャスト留学(英語リスニング力の向上に役立つポッドキャストの紹介)から。

AWStats 6.0完全日本語版のページから日本語版をいただき、そのまんまの手順で置いただけです。Lightly and Leniently/AWStatsとは も とても参考になりました。

ただ、前述のとおり複数ドメイン分のログがあるので、うまいこと処理したいなと思い、awstats.*.conf と前段の日本語UTF化部分をいじりました。

そういえばついでに(?)玄箱くんにApacheもインストールしました。って apt-get install apache して設定ちょいといじっただけですが。

ゴール

各ドメインごとに統計が見られるといいな。もちろん全部入り統計も見たいな。

awstats.*.conf の設定

ドメインごと統計用設定ファイル

自環境に合わせて各ディレクトリ設定など変えてますが、それはさきのサイトやconfファイル内の解説どおりで。

んで、各ドメインごとに設定ファイルをつくりました。

zumomo.org 用に awstats.zumomo.org.conf、

www.zumomo.org 用に awstats.www.zumomo.org.conf って感じで。

それぞれ、zumomo.org.log, www.zumomo.org.log, … を解析対象とします。こいつらがどっから出てくるのかは後述。

変更した部分のみ抜粋 (zumomo.org用 awstats.zumomo.org.confの場合)：

LogFile="/home/katamari/log/zumomo.org.log" SiteDomain="zumomo.org" HostAliases="localhost 127.0.0.1 REGEX[zumomo\.org$] yoppa.gonna.jp"

各ドメインごとに下線部分を変更(zumomo.org, www.zumomo.org, yoppa.gonna.jp, …)するわけです。

なんか冗長だよ2箇所違うだけじゃんかよ１つのconfファイルで回せないのかよと思って試行錯誤してみましたが、自分の力量ではうまくいきませんでした orz (詳細は後述)

賢い方法ありましたら教えてくださいです。。。

全部入り統計用設定ファイル

AWStatsには複数のログをマージしてくれるツール(tools/logresolvemerge.pl)がついてますので、それを使うことにします。設定内でパイプも使えるのね。

全部用設定は awstats.zumomo_all.conf としときました。変更した部分のみ抜粋：

LogFile="/home/katamari/awstats/tools/logresolvemerge.pl ?/home/katamari/log/*.log |"   (←↑実際は1行です) SiteDomain="*.zumomo.org" HostAliases="localhost 127.0.0.1 REGEX[zumomo\.org$] yoppa.gonna.jp"

ログの準備＆awstatsの実行

元ネタは、awstats.cron として準備されてる奴です。

各生ログは zumomo.org.20050115.gz, www.zumomo.org.20050115.gz のような形で落としてあるので、「前日の各ログを展開→UTF化→それぞれ”ドメイン名.log”として保存」することにします。

これを毎日(ログファイルのダウンロード後) cron にて実行するわけだ。

awstats.sh.txt →awstats.sh にリネームし、chmod +x

(※無保証です。サポート等いたしません。)

やってることは、

1. 昨日の日付(引数ありで呼んだときはn日前)の、各ドメインについて:
   1. ドメイン名.日付.gz を展開 → UTF8に変換 → ドメイン名.log※当然、日付が変わると一昨日の ドメイン名.log は昨日のログで上書きされます。
   2. awstats.ドメイン名.conf にてアクセス解析実行＆今月のページを静的生成
2. 全ドメイン処理すると ドメイン名.log が複数個残ってるので、そいつらを対象として awstats.全部入り.conf にてアクセス解析実行＆今月のページを静的生成(awstats.zumomo_all.conf 内の LogFile設定↓にて、1.-1. で作った各ドメインのログがワイルドカードにひっかかるわけだ)

   LogFile="略) logresolvemerge.pl /home/katamari/log/*.log"

お化粧

くだらないですがガワを作りました。ただのベタなHTMLフレームなので(各ドメインの結果HTMLにリンクはっただけ)詳細は略。次↓見りゃ分かりますね。

注意することは、ファイル名を index.html にしないこと。awstats 実行時になんかエラーがあった場合、エラーメッセージがindex.htmlに吐かれるからです。上書きされちゃいます。

(awstats.*.conf の DefaultFile=”index.html” をいじればいいのかも。試してません。)

そいでこうなった

*
わー素敵。

参考：試行してみたけどうまくいかなかったこと

(1)awstats.ドメイン.conf は ドメインごと設定がちょっとずつ違うだけなんで、何とか共通化できないか？

設定ファイルで環境変数を指定して呼び出せるとのことなので、それが使えないかと思って試してみた↓

• 呼び出し側：ドメインごとループで環境変数を指定。awstats実行時は同じ設定ファイル(awstats.zumomo_each.conf)を使用する。

  for DOMAIN in ${DOMAINS[@]} ; do       :     # 環境変数設定 export AWSTATS_TARGET_DOMAIN=$DOMAIN      # 解析実行 perl $AWSTATS_HOME/awstats.pl -config=zumomo_each -update       :  done;

• 呼ばれる awstats.zumomo_each.conf の変更した部分のみ抜粋:

  LogFile="/home/katamari/log/__AWSTATS_TARGET_DOMAIN__.log" SiteDomain="__AWSTATS_TARGET_DOMAIN__"

→うまくいきました。静的HTML生成は。

ところが、その生成された HTML のリンク先や年月指定などのフォームアクション先は動的ページ(CGI)になるので、実行時には__AWSTATS_TARGET_DOMAIN__ は当然指定されておらず、エラーになっちゃいますた。

(2)全部入り解析後、せっかく awstats.*.conf の設定で PurgeLogFile=1 (処理済みのログを切り詰める)ってのがあるんだから、これで処理済ログをお片付けしてもらったらラクだな。

→怒られちゃいました。ログファイルでパイプ使ってるときはだめよ～だって。

Error: A pipe in log file name is not allowed if PurgeLogFile and ArchiveLogRecords are not set to 0

当zumomo.orgは、ロリポップ(lolipop)上に身を置かせてもらっています。

このロリポップ、Analogによるアクセス解析とApacheの生ログを提供してくれているんですが、微妙に使いづらんよねー。ユーザ専用ページからアクセスして、いちいちパラメータ(日付とかドメインとか(*1))指定してSubmitしなくちゃいけない。

これ自動化してラクしたいよなーとか思って、とりあえず生ログをダウンロードするへたれスクリプトを書いてみましたのでその記録です。今日作ったばっかですが、これcronで1日1回まわしたらハッピーな予感。

家庭内ファイルサーバである玄箱くん(Debian化済み)にて動かしてます。なのでLinux環境で動くはず。(WindowsではNGっす、念のため。Mac は OS X が実質UNIXだと聞いてるがどうなんだろう？bash動くのかな？)

(*1)
自分は サブドメインコースで契約→独自ドメインを上に乗っけた ので、

• lolipopサブドメイン(yoppa.gonna.jp)
• www.独自ドメイン (www.zumomo.org)
• 独自ドメイン(zumomo.org)

の３つあるんです。。。

ログファイルダウンロードスクリプト

1. curl (SSL対応版) をインストールもちろん、既にインストール済みなら省略。

   # apt-get curl curl-ssl

   wgetでもいいんですが、apt-getで入れられるwgetは1.8.1(POST未対応)のようでした。

   1.9系(以上)をソースから入れるのもめんどくさいんでcurl使うことにしちゃいました。

2. ファイルをダウンロードするディレクトリを適当に作成
3. スクリプト編集ブラウザでの動作をエミュレートするスクリプト。

   (ユーザページログイン→アクセスログドメイン解析ページ→アクセスログダウンロード)

   せっかくなんで公開します。bashです。curl使ってます。

   dl_lolipop_logs.sh.txt

   ※無保証です。サポート等いたしません。

   ファイルダウンロードして、dl_lolipop_logs.shとかにリネーム、chmod +x dl_lolipop_logs.sh する。

   先頭に設定部分がありますので、各自サーバに合わせて修正のこと。

   ちなみにサブドメインプランの場合のドメインIDの対応はこう↓なってるみたいです。

   bashについては RS WebPage/プログラミング言語としてのbash、curlについては Cocoaはやっぱり!インターネットにアクセスしよう/番外編 : curlの使い方 を激しく参考にさせていただきましたー。

4. スクリプト実行してみる

   $ ./dl_lolipop_logs.sh    <-- 1日前のログがおちてくるはず $ ./dl_lolipop_logs.sh 3  <-- 3日前のログがおちてくるはず

   落ちてきたらおめでとうです。

   $ ls log/ yoppa.gonna.jp.20060114.gz  www.zumomo.org.20060114.gz zumomo.org.20060114.gz  $ gunzip -d -c log/www.zumomo.org.20060114.gz 24.203.*.* - - [14/Jan/2006:04:15:09 +0900] "GET /blog/index.php?p=47 HTTP/1.0 " 200 420 "-" "-" 66.249.*.* - - [14/Jan/2006:04:28:53 +0900] "GET /i/appli/index.html HTTP/1.1 " 200 471 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bo t.html)" 24.203.*.* - - [14/Jan/2006:04:39:20 +0900] "GET /blog/index.php?p=28 HTTP/1.0 " 200 12573 "-" "-"  :  : (後略)

5. cron設定とりあえず毎朝7時 昼の12時15分ごろ に昨日のを拾ってくる感じ↓にしてます(crontab -e にて)。あまり早い時間にするとログが用意されてないかもしれません。

   # download lolipop logs 15 12 * * * /home/katamari/dl_lolipop_logs.sh

   追記 (2006/01/17)

   なんか前日のログが準備されるのは昼12時ごろのようだ。お寝坊さんだな＞ロリポップ

ロリポップのサブドメインとドメインID対応

以下、無駄に長いです。

ここにない(新しい)ドメインがあったら、https://user.lolipop.jp/ のHTMLソースを参考にしてください。とか。