LogParser

IIS.NET DownloadCENTER スタート(マイクロソフト以外もツール等登録可能みたい)

米田 — Fri, 02 Feb 2007 07:13:00 GMT

　米田です。

　IIS.NET DownloadCENTER スタートしたそうです。

http://blogs.technet.com/windowsserver/archive/2007/01/29/iis-net-downloadcenter-now-live.aspx
Windows Server Division WebLog : IIS.NET DownloadCENTER Now Live

　見たところ、マイクロソフトとサードパーティー(おそらく個人も?)の持ち寄ったツール等を一元で提供

しているようです。

http://www.iis.net/downloads/default.aspx?tabid=3

http://www.iis.net/DownloadCENTER/all/rss.aspx
IIS.net : DOWNLOADS : Microsoft Internet Information Services

>This is your single source for Microsoft Internet Information Services tools,

>samples, extensions, filters and modules
　TOPには、おなじみのLog Parser、PHP高速化で話題になったFastCGI for IIS等の登録が読み取れました。

・FastCGI for IIS 5.0\6.0 (x64)
・FastCGI for IIS7 (x64)
・ASP.NET ViewState Helper
・Logging UI for IIS 7.0 on Windows Vista
・IISxpress
・Log Parser 2.2
・Web Performance Monitor
・WordPress URL Rewrite
・Server Header
・IIS Aid PHP Installer

　試しに気になったIISxpressをのぞいたところ、機能面では圧縮、非商用は無償、商用はサーバー

ごとに50ドルとのことです。

>IISxpress is a powerful and highly configurable compression plug-in for IIS.
>IISxpress is FREE for non-commercial and non-governmental use, otherwise the price is $50 per web server.

　ripcordsoftware社のツールです。

http://www.ripcordsoftware.com/IISxpress/Default.aspx

　
　おそらく、日本からの登録も可能だと思います。

検索結果用のRSS2.0上位互換拡張「OpenSearch」

米田 — Wed, 16 Mar 2005 22:08:00 GMT

　米田です。

　検索結果用のRSS2.0上位互換拡張「OpenSearch」ですか。

たとえば SELECT 結果出力や、LogParser 入力、出力用に流用した場合、面白みがありますかね。

http://internet.watch.impress.co.jp/cda/news/2005/03/16/6878.html

米A9.com、検索結果表示用のXMLフォーマット「OpenSearch」発表

>米Amazon.comの子会社で独自のサーチエンジンを開発しているA9.comは15日、検索結果を

>利用しやすくするための標準規格「OpenSearch」を発表した。RSS 2.0の上位互換にあたるXML

>ベースのフォーマットであるため、拡張された部分を除けば既存のRSSリーダーでもすぐに利用できる。

http://opensearch.a9.com/

LogParser2.2英語版で重複したファイルを管理する

米田 — Thu, 20 Jan 2005 22:50:00 GMT

　米田です。

http://www.exconn.net/Forums/ShowPost.aspx?PostID=225
ツール:LogParser:ログ解析ツール : フォーラム : eXperts Connection
LogParser2.2英語版リリースです。
http://www.microsoft.com/downloads/details.aspx?FamilyID=890cd06b-abf8-4c25-91b2-f8d975cf8c07&displaylang=en
Download details: Log Parser 2.2

　早速ファイルの管理に活用してみます。
　有力な新機能として、HASHMD5_FILE(Path) があります。
ファイル内容の MD5 値を文字列として返します。
　サンプルでは、GROUP BY Hash HAVING NumberOfCopies > 1 として、
・ MD5 値が一致する=重複した内容のファイルの数と MD5 値を得ています。
ただ、これだけだと次の打ち手が難しいので、SQL っぽい逃げ手として、
ファイルのフルパスを集合関数経由で取り出します。
LogParser "SELECT MAX(Path) AS PATH1,MIN(Path) AS PATH2,HASHMD5_FILE(Path) AS Hash, COUNT(*) AS NumberOfCopies INTO DupFiles.tsv FROM C:\tool\*.* GROUP BY Hash HAVING NumberOfCopies > 1" -i:FS -o:TSV
　実行結果は
C:\tool\Reflector414\TreemapControl.dll C:\tool\Reflector405\Tools\TreemapControl.dll 54D353149B81336BCA2BFC6D109F7A81 5
こんな行になります。
　同一内容のファイルが2つであれば、MAX(Path),MIN(Path) にそれぞれ出てきますから、
十分と期待してるわけです。
(この場合 5 ファイルですので、3つはとりこぼしている状態ですが)

　資料を確保するなら、これでも十分なんですが、重複したファイルの削除や移動を考えるならもう一工夫ほしくなります。
　例えば、
・目印にファイル名の先頭に DUP_ を足す
・直接影響がでると怖いので、スクリプトを出力、管理者が確認、納得後実行
とします。

LogParser "SELECT STRCAT('REN \"',STRCAT(MAX(Path),STRCAT('\" \"DUP_',STRCAT(EXTRACT_FILENAME(MAX(Path)),'\" &ECHO ')))) AS REM,MIN(Path) AS PATH2,HASHMD5_FILE(Path) AS Hash, COUNT(*) AS NumberOfCopies INTO c:\DupFiles.cmd FROM U:\*.* GROUP BY Hash HAVING NumberOfCopies > 1 AND Hash IS NOT NULL" -i:FS -o:TSV

2GB強、9KFile を対象に
Execution time: 638.41 seconds (00:10:38.41)
となりました。