gethtmldat

 

 

var HTTP_HEADERS = {

  "User-Agent" : "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36"

var HTTP_TIMEOUT = 120 * 1000;

var IDX_STATE = { "2ch":3 , "jbbs":3 }; //=0:現役 =3:dat落ち =10:過去ログ

var ABN_MSG = "透明あぼ～ん<>透明あぼ～ん<>透明あぼ～ん ID:DELETED<>透明あぼ～ん<>透明あぼ～ん";

var ABN_MSG_PINK = "うふ～ん<>うふ～ん<>うふ～ん ID:DELETED<>うふ～ん<>うふ～ん";

var NOT_GET_MSG = "未取得<>未取得<>未取得 ID:NONE<>未取得<>";

 

var fso   = new ActiveXObject("Scripting.FileSystemObject");

var shell = new ActiveXObject("WScript.Shell");

var sha   = new ActiveXObject("Shell.Application");

var strm  = new ActiveXObject("ADODB.Stream");

var http;

var USED_WINHTTP = true;

try { http = new ActiveXObject("WinHttp.WinHttpRequest.5.1"); } catch(e){}

if (!http) try { http = new ActiveXObject("Msxml2.ServerXMLHTTP.6.0"); } catch(e){}

if (!http) try { http = new ActiveXObject("Msxml2.ServerXMLHTTP.3.0"); } catch(e){}

if (!http) var USED_WINHTTP = false;

if (!http) try { http = new ActiveXObject("Msxml2.XMLHTTP.6.0"); } catch(e){}

if (!http) { http  = new ActiveXObject("Msxml2.XMLHTTP.3.0"); }

var basp; /*@if (@EnabledBASP21) try { basp = new ActiveXObject("basp21"); } catch(e){} @end @*/

 

var JANE_PATH = shell.CurrentDirectory.replace(/[^\\]$/,"$&\\");

var SCRIPT_PATH = fso.GetParentFolderName( WScript.ScriptFullName ).replace(/[^\\]$/,"$&\\");

var JANE_EXE  = "Jane2ch.exe";

var JANE_INI  = "Jane2ch.ini";

var JANE_BRD  = "Jane2ch.brd";

var JANE_LOGS = "Logs\\2ch\\";

var JANE_BAK  = "Logs\\bak\\";

var JANE_BRDCUSTOMIZE_INI = "brdcustomize.ini";

var MY_NAME   = WScript.ScriptName.split(/\.(?=[^.]+$)/)[0];

var TRACE_LOG = replaceEnv("%temp%\\"+MY_NAME+".log").replace(/\\\\/g,"\\");

 

var CFG_FILE = SCRIPT_PATH + MY_NAME + ".cfg";

 

var FILL_ABONE = 0; //0:問い合わせる 1:常に穴埋めする 2:常に詰める

var REWRITE_DAT = 0; //0:問い合わせる 1:上書きする 2:一致の場合は中止する 3:常に中止する

 

var IMG_TO = "sssp:";

 

var OPT_BBS = {

    "//bakusai.com": [thread_bakusai, "【仮想板:爆サイ】", /\/\/(bakusai\.com[^\/]*)/ ]

var MAX_READ_PAGES_OF_THREAD_LIST_CREATE = 3; //subject.txt作成時

var MAX_READ_PAGES_OF_THREAD_LIST_UPDATE = 1; //subject.txt更新時

var BROWSER_PATH = "";

 

 

function o(s) { /*@if (@DEBUG) WScript.Echo(s); @end @*/ }

function q() {WScript.Quit();}

String.prototype.expand = function(v) { return this.replace(/\$(\d)/g, function(m, n) { return v[n]; }); }

String.prototype.convDontUseStr = function() {

    var tbl0 = { "CON":"$CON", "AUX":"$AUX", "NUL":"$NUL" /*, "PRN":"$PRN", "COM([0-2])":"$COM$1", "LPT([0-2])":"$LPT$1" */ }

    var tbl1 = { "\\":"$Backslash", "/":"$Slash", ":":"$Colon", "*":"$Asterisk", "?":"$Question" }

    var s = this.replace(/[. ]+$/,"");

    for(var i in tbl0) { s=s.replace( new RegExp("^"+i+"$","i") , tbl0[i]); }

    return s.replace(/[\\/:*?]/g, function (w){return tbl1[w];});

var trace = function(){};

function Err(s,t) {s=ErrMsg(s,t); trace("---- "+s+" ----",2); throw new Error(s);}

function ErrMsg(s,t) { return (ERROR_MSG[s]?ERROR_MSG[s]:"Unknown error") + (t?t:"");}

 

var ERROR_MSG_STOP = "処理を中止しました";

var ERROR_MSG = {

     "E_already_there" : "このスレは既に取得しています"

    ,"E_illegal_url" : "このURLでは処理できません"

    ,"E_remained_garbage" : "レスデータのみの抽出に失敗しました"

    ,"E_block_not_found" : "htmlからスレブロックが見つかりません"

    ,"E_title_not_found" : "スレタイトルが見つかりません"

    ,"E_require_sqlite" : "sqlite3.exe 又は SQLite3 ODBC Driver が必要です"

    ,"E_require_sqlODBC" : "SQLite3 ODBC Driver が必要です"

    ,"E_stop" : ERROR_MSG_STOP

    ,"E_no_data" : "取得データはありません"

    ,"E_http_timeout" : "受信タイムアウト"

    ,"E_http_recieve" : "http受信エラー"

    ,"E_bbs_not_found" : "掲示板番号が不正です"

    ,"E_key_not_found" :"スレッド番号が不正です"

    ,"E_thread_not_found" : "スレッドがありません"

    ,"E_brditem_not_found" : "dat格納場所が見つかりません"

    ,"E_loadfile" : "ファイル読み込みエラー"

    ,"E_savefile" : "ファイル書き込みエラー"

    ,"E_not_suported_proxy" : "PROXY指定はできません（IEの設定が使われます）"

    ,"E_data_error" : "レスデータの抽出で異常を検出しました"

    ,"E_data_not_found" : "データがみつかりません"

    ,"E_no_support" : "この機能はサポートしません"

 

function object(o) {

    var f = object.f, i, len, n, prop;

    f.prototype = o;

    n = new f;

    for (i=1, len=arguments.length; i<len; ++i) for (prop in arguments[i]) n[prop] = arguments[i][prop];

    return n;

object.f = function(){};

var vb = {};

vb.Function = function(func) { return function() { return vb.Function.eval.call(this, func, arguments); }; };

vb.Function.eval = function(func) {

    var args = Array.prototype.slice.call(arguments[1]);

    for (var i = 0; i < args.length; i++) {

        if ( typeof args[i] != 'string' ) { continue; }

        args[i] = '"' + args[i].replace(/"/g, '" + Chr(34) + "') + '"';

    }

    var vbe;

    vbe = new ActiveXObject('ScriptControl');

    vbe.Language = 'VBScript';

    return vbe.eval(func + '(' + args.join(', ') + ')');

var InputBox = vb.Function('InputBox');

var MsgBox = vb.Function('MsgBox');

 

 

var args = parmParse(WScript.Arguments);

 

var URL_2ch = {

  RE_HOST : new RegExp("^http://\\w+\\.(?:2ch\\.net|bbspink\\.com)/")   //この定義はdat取得できないサイトの判別に使う

 ,RE_URL  : new RegExp("^http://((\\w+(?=\\.\\w+\\.))?(\\.?(\\w+)[^\\/]+?))/(?:(?:test|bbs)/.+?/)?(\\w+)/(?:kako/.+?/)?(((\\d+)\\d)\\d{5})(/|\\.html|\\.dat(?:\\.gz)?)?")

 ,range   : ""

 ,set_prm : function(url) { this._set_prm(url, 1, null, 5, 6); this.kako = /\/kako\//.test(url) && delete args.append; }

 ,otherURLType : 0

 ,otherURL : ""

 ,_set_prm: function(url,p1,p2,p3,p4) {

                var r;

                this.prm  = url.match(this.RE_URL) || Err("E_illegal_url");

                if(/\d$/.test(this.prm[0])) this.prm[0] += "/";

                this.url  = this.prm[0];

                this.url2 = this.prm[0];

                switch(this.otherURLType) {

                    case 1: this.url = this.otherURL+this.url; break;

                    case 2: this.url = this.otherURL; break;

                    default: break;

                }

                this._setRange(url);

                this.site     = this.prm[p1];

                this.category = (p2) ? this.prm[p2] : "";

                this.brdID    = this.prm[p3];

                this.thrID    = this.prm[p4];

            }

 ,_setRange :   function(url) {

                    var range;

                    if(this.prm[0].slice(-1)=="/") {

                        range = url.match(/\/n?((\d*)n?(-?)[^\/]*)$/)||[];

                        this.url2 += (args.opt_n||range[2]||"");

                        if(range[3]) this.range = ((range[2]?"":"1")+range[1]||"").replace(/n/ig,"");

                        else if(range[2]) this.range = range[2] + "-" + range[2];

                    }

                }

 ,appendRange : function(top) {

                    if (args.overwrite) this.url += this.range;

                    else                this.url += ((args.append && top) ? top+"-n" : "");

                }

 ,getUrl2 : function() { return this.url2; }

 ,entryCheck : function(url) {

                var r,i;

               

                var ptn=[

                  [ /^https?((?::\/\/www\.google\.co\.jp\/url\?q=https?)?:\/\/webcache\.googleusercontent\.com\/search(?:\?q=|%3Fq%3D)cache:.+?:.*https?:\/\/([^+&%]+).*=(?:(?!http).)+)/ , 1]

                  ,[ /^https?(:\/\/webcache\.googleusercontent\.com\/search\?q=cache:.+?:([^+&%]+).*=(?:(?!http).)+)/ ,2 ]

                  ,[ /^https?(:\/\/cache\.yahoofs\.jp\/search\/cache\?.*&u=([^&]+)(?:&.*=(?:(?!http).)+)?)/ ,2 ]

                  ,[ /http:(\/\/(bakusai\.com(?:\.[^\/]+)?\/thr_(?:res|tl)\/acode=\d+\/ctgid=\d+(?:\/test\/read\.cgi)?(?:\/(?:\w+=)?[\d-]+)+\/))/ , 3 ]

                ];

               

                for(i=0;i<ptn.length;i++) {

                    r = url.match(ptn[i][0]);

                    if(r) {

                        this.otherURLType=ptn[i][1];

                        switch(this.otherURLType) {

                            case 1: this.otherURL = r[1]; return "http"+r[2];

                            case 2: this.otherURL = "http"+r[1]; return "http://"+r[2].replace(/%2F/ig,"/");

                            case 3: this.otherURL = r[0]; return "http://"+r[2];

                        }

                    }

                }

                return url.replace(/^https?(:.+?)(?:http.+)?$/,"http$1");

            }

 ,isOPT_BBS : function(url) {

                var i,r;

                for(i in OPT_BBS) { if(url.indexOf(i)>0) r=i; }

                this.optItem = r;

                return r;

            }

var URL_jbbs = object(URL_2ch,{

  RE_HOST : new RegExp("^http://jbbs\\.(?:shitaraba|livedoor)\\.(?:net|jp|com)/")

 ,RE_URL  : new RegExp("^http://(jbbs\\.shitaraba\\.net)/bbs/\\w+\\.cgi/(\\w+)/(\\d+)/(\\d+)/?")

 ,set_prm : function(url) { this._set_prm(url,1,2,3,4); }

var URL_machi = object(URL_2ch,{

  RE_HOST : new RegExp("^http://(?:\\w+\\.)?machi\\.to/")

 ,RE_URL  : new RegExp("^http://((?:\\w+\\.)?machi\\.to)/bbs/\\w+\\.cgi/2/(\\w+)/(\\d+)/?")

 ,set_prm : function(url) { this._set_prm(url,1,null,2,3); }

 ,getUrl2 : function() { return this.url2.replace(/\/offlaw\.cgi\/2\//,"/read.cgi/"); }

var URL = URL_2ch;

 

var Jane_2ch = {

 ini          : loadFile2(JANE_INI)

 ,brd         : ""

 ,LogBasePath : ""

 ,init        : function() { this._setLogBasePath(); this._loadBRD(); }

 ,getINI      : function(p) { var m=this._search(this.ini, this._re_ini, p); return m && RegExp.$1 || p[3]; }

 ,getBRD      : function(p) {

                    var m = this._search(this.brd, this._re_brd, p);

                    var b1=RegExp.$1, b2=RegExp.$2;

                    return (m) ? b1.convDontUseStr()+"\\"+b2.convDontUseStr()+"\\" : null;

                }

 ,_re_ini     : "^\\[$1\\]\\r\\n(?:.*\\r\\n)*?(?:$2=(.*)|\\[.*\\])\\r\\n"

 ,_re_brd     : "^([ \\S]+).*\\r\\n(?:\\t.*\\r\\n)*\\t\\w*$3\\t$5\\t([^\\t\\r\\n]+?) *\\r\\n"

 ,_search     : function(f,s,p) { return f.match(new RegExp(this._expand(s,p),"img")); }

 ,_expand     : function(s,p) { return s.replace(/\$(\d)/g, function(m, n) { return (""+p[n]).replace(/\./g,"\\."); }); }

 ,_setLogBasePath : function() { this.LogBasePath = this.getINI([,"PATH","LogBasePath",""]).replace(/[^\\]$/,"$&\\");}

 ,_loadBRD     : function() { this.brd = loadFile2(this.LogBasePath + JANE_BRD); }

var Jane_jbbs = object(Jane_2ch,{

  _re_brd : "^([ \\S]+).*\\r\\n(?:\\t.*\\r\\n)*?\\t$1/$2\\t$3\\t([^\\t\\r\\n]+?) *\\r\\n"

var Jane_machi = object(Jane_2ch,{

  _re_brd : "^([ \\S]+).*\\r\\n(?:\\t.*\\r\\n)*?\\t$1\\t$2\\t([^\\t\\r\\n]+?) *\\r\\n"

 

var Jane = Jane_2ch;

Jane.init();

 

if (args.trace !== void 0) { trace = new Trace(); }

trace("--- start ---   "+args.url,1);trace("",1)

 

 

var DatInfo = {

  cnt      : 0

 ,offset   : 0

 ,title    : ""

 ,msg      : (args.overwrite) ? [] : ""

 ,setInfo  : function(dat,bak,brd) {

                this.dat = dat;

                this.bak = bak;

                this.brd = brd;

                if (fso.FileExists(dat)) {

                    trace();

                    var msg = loadFile(dat);

                    this.cnt  = msg.split("\n").length-1;

                    this.title = (msg.match(/^(?:(?:(?:(?!<>).)*)<>|(?:[^,]*),){4}(.*)$/m)||[])[1];

                    if (args.overwrite) { this.msg = msg.slice(0,-1).split("\n"); }

                    else this.msg="";

                    trace("load file "+dat.replace(/^.*\\(\d+\.dat)/,"$1")+" : "+this.title+" lines="+this.cnt);

                }

             }

 ,copyDat  : function() {

                if (fso.FileExists(this.dat)) {

                    path(this.bak);

                    if (args.bak<0 || !fso.FileExists(this.bak) )

                        try{ trace(); fso.CopyFile(this.dat, this.bak, true); trace("copy file:"+this.bak);} catch(e) {}

                }

             }

 ,setNewDatInfo : function(title, lines) {

                    this.title = title;

                    this.lines = parseInt(lines,10);

                  }

 ,update :  function(msgs) {

                this.msg = msgs;

                this.cnt = this.msg.length;

            }

 

 

 

var Thread = {

  re_sel      : -1

 ,REG_PATTERN : [ {} ]

 ,msg         : ""

 ,bin         : null

 ,resNo       : []

 ,resNo_offset : 0

 ,requireFillAbn  : false

 ,prepare     : function() {}

 ,urlReplace  : function(u) { return u; }

 ,preReplace  : function() {}

 ,mainReplace : function() { this.msg = this.msg.replace(this.REG_PATTERN[this.re_sel].msg, this.REG_PATTERN[this.re_sel].rep); }

 ,postReplace : function() {}

 ,createBrdFolder : function() { return null;}

 ,testTBlock : function() {

                 var i,rc,ss;

                 for(i=0; i<this.REG_PATTERN.length; i++) {

                    if(ss=this.msg.match(this.REG_PATTERN[i].thr)) {this.re_sel =i; break;}

                 }

                 rc = ss ? true : false;

                 return rc;

               }

 ,setTBlock : function() {

                var s;

                if(this.re_sel>=0) {

                    s=this.msg.match(this.REG_PATTERN[this.re_sel].thr);

                    if(s) { this.msg=s[1]||""; s=s[2]; }

                }

                return s;

              }

 ,getTitle    : function(s) { this.title = (s.match(/<title>(.*?)\n*<\/title>/i)||[])[1]; }

 ,readHTTP    : function(url) {

    trace("try URL="+url,9);

    this.msg = readHTTP(url)[0];

    this.testTBlock(); //re_selの設定

    this.preReplace();

    this.getTitle(this.msg);

    if (this.re_sel<0) Err("E_block_not_found","\n\nTITLE="+this.title+"\n文字数="+this.msg.length);

    this.setTBlock();

    return true;

  }

 ,getFirst    : function() { return (args.overwrite) ? parseInt(URL.range,10) : (args.append) ? DatInfo.cnt + 1 : 1; }

 ,getLast     : function() { return parseInt((this.msg.match(/(?:^|\n)(\d+).+\n$/i)||[])[1],10)-this.resNo_offset; }

 ,delContents : function(s) { return s.replace(/^(?:(?:(?!<>).)*<>|(?:[^,]*,)){4}.*$/mg, ""); }

 ,checkData   : function(s) {

                    var ln = this.checkData0(s);

                    if(FILL_ABONE==2) return;

                    var resTbl=this.msg.match(/^(\d+)/mg)||[];

                    for(var i=1; i<resTbl.length; i++) {

                        if(args.overwrite && i==1

                            && parseInt(resTbl[1],10)==this.first && parseInt(resTbl[0],10)==1) continue;

                        if(parseInt(resTbl[i],10)!=parseInt(resTbl[i-1],10)+1) {

                            this.requireFillAbn = true;

                            break;

                        }

                    }

                    if (FILL_ABONE==0 && this.requireFillAbn) {

                        switch(shell.Popup("抽出したレス数が合いません。"

                                            +"(先頭="+this.first+" 末尾="+this.last+" レス数="+ln.length+")"

                                            +"\n抜けているレス番を穴埋めしますか？ [はい] [いいえ]"

                                            +"\n又は、ここで処理を中断するなら [キャンセル]"

                                            +"\nを選択してください。", 0, MY_NAME, 3+48)) {

                            case 6: this.requireFillAbn = true; break;

                            case 7: this.requireFillAbn = false; break;

                            default: Err("E_stop"); //case 2

                        }

                    }

                }

 ,checkData0  : function(s) {

                    var ln = this.delContents(s);

                    if (ln.replace(/\n/g,"").length > 0) Err("E_remained_garbage");

                    return ln;

                }

 ,addTitle    : function() { this.msg = this.msg.replace(/^.*?$/m, "$&"+this.title); }

 ,delDupData  : function() { //わざと重複して要求した先頭レス番データ削除

                    if ((this.msg.match(/^(\d+)/i)||[])[1] == DatInfo.cnt) { this.msg = this.msg.replace(/^.*\n/m, ""); }

                }

 ,fillAbn     : function() {

                    // 透明あぼーんレスを挿入する

                    var d = [], n = this.first, m;

                    var s = this.msg.split("\n");

                    for (var i=0; i<s.length; i++) {

                        m = parseInt(s[i].replace(/^(\d+).+$/, "$1"),10);

                        if(n>m) continue; //レス番重複または逆転時はスキップ

                        for (var j=n; j<m; j++) {

                            d.push(j+"<>"+(/\.bbspink\.com$/.test(URL.site)?ABN_MSG_PINK:ABN_MSG));

                            n++;

                        }

                        d.push(s[i]); n++;

                    }

                    this.msg = d.join("\n");

                }

 ,delResNo    : function() { this.msg = this.msg.replace(/^\d+<>/mg, ""); }

 ,overwriteMsg : function() {

                    var data = this.msg.split("\n");

                    var msg = DatInfo.msg;

                    var i;

                    for (i=0; i<data.length; i++) msg[parseInt(data[i],10)-1] = data[i].replace(/^\d+<>/,"");

                    for (i=0; i<msg.length; i++) if(!msg[i]) msg[i] = NOT_GET_MSG;

                    this.msg = msg.join("\n");

                    if(this.msg.slice(-1)!="\n") this.msg += "\n";

                 }

 ,rebuildSubject : function() { Err("E_no_support"); }

 ,proc        : function() {

                    this.prepare();

                    URL.set_prm(this.urlReplace(args.url));

                    var brd = Jane.getBRD(URL.prm);

                    if (!brd) brd = this.createBrdFolder();

                    if (!brd) Err("E_brditem_not_found");

                    var dat = Jane.LogBasePath + JANE_LOGS + brd + URL.thrID + ".dat";

                    var bak = Jane.LogBasePath + JANE_BAK + brd + URL.thrID + ".dat";

                    DatInfo.setInfo(dat, bak, brd);

                    if (args.subject) { this.rebuildSubject(); return; }

                    if (args.browser) { invokeBrowser(URL.url); return; }

                    URL.appendRange(DatInfo.cnt);

                    if (trace()|this.readHTTP(URL.url)|trace("HTTP total read time")) {

                        if(!this.msg) Err("E_block_not_found","\n\nTITLE="+this.title);

                        if (!this.noChkTitle && !this.title) Err("E_title_not_found");

                        trace(); this.mainReplace(); trace("html->dat main Replace");

                        if (args.append) {

                            trace(); this.delDupData(); trace("del dupdata time");

                            if(this.msg=="") Err("E_already_there");

                        }

                        this.first = this.getFirst();

                        this.last  = this.getLast();

                        this.checkData(this.msg);

                        if (this.first==1) { this.addTitle(); }

                        if(this.requireFillAbn) { trace(); this.fillAbn(); trace("透明abnレス挿入"); }

                        trace(); this.postReplace(); trace("post Replace");

                        if(args.overwrite) this.overwriteMsg();

                        else               this.delResNo();

                    }

                    trace("スレタイトル:"+this.title+"\tレス数:"+this.last,9);

                    saveDat(dat, this.msg, this.bin);

                    DatInfo.setNewDatInfo(this.title, this.last);

                    saveIdx("http://"+URL.site+((URL.category)?"/"+URL.category:"")+"/"+URL.brdID);

                    invokeJaneStyle(URL.getUrl2());

                    trace("---- end ----",1);

                }

 

var Thread_2ch = object(Thread,{

  read_cgi_ver : ""

 ,REG_PATTERN : [

   // ver 07.0.0 / ver.07.0.1

   { "thr" : /<div class="thread">(<div class="post"[^>]*><div class="meta">[\s\S]+<\/span><\/div><\/div>)((?:<br>)?<\/div>|[\s\S]*?$)/i

     ,"msg" : /[\s\S]*?<div class="post"[^>]*>(?:<[^>]*?>)*<span class="number">(\d+).+?<span class="name"><b>(?:<a href="mailto:(.+?)">)?(.*?)(?:<\/a>)?<\/b><\/span><span class="date">(.*?)<\/span>(<span class="be[^>]*><a[^>]*>[^<]*<\/a><\/span>)?<\/div><div class="message"><span class="escaped">(.*?)<\/span><\/div><\/div>/ig

     ,"rep" : "$1<>$3<>$2<>$4$5<>$6<>\n"

     ,"preReplace" : [ [/(?:<div class="post"[^>]* id="0"|<div (?:class|id)=[^>]*banner)[\s\S]*?(?=<div class="post"|(?:<br>)?<\/div><div class="push">|$)/ig,""]

                      ,[/<a href="(?:https?:)?\/\/(?!be\.2ch\.net\/).*?>([^<]*)<\/a>/ig, "$1"] ]

    ,"postReplace" : [ [/<span class="be[^>]*><a href="[^"]+\/(\d+)"[^>]*>\?(.*?)<\/a><\/span>/ig," BE:$1-$2"]

                      ,[/^(\d+<>.*?<>.*?<>.*? BE:\d+-[^ <]+) BE:\d+-[^ <]+/mg,"$1"]

                      ,[/<\/span><span class="uid"[^>]*>/ig, " "]

                      ,[/<img src="(?:https?:)?(\/\/img\.2ch\.net\/.+?)">/ig, "sssp:$1"]

                      ,[/<img src="(?:https?:)?(.*?)">/ig, IMG_TO+"$1"] ]

 

  ,{ "thr" : /<div class="thread"[^>]*>((?:<div class="post".+?<\/div><\/div>)+)(<\/div>)?/i

    ,"msg" : /.*?<div class="number">(\d+).+?<\/div><div class="name"><b>(?:<a href="mailto:(.+?)">)?(.*?)(?:<\/a>)?<\/b><\/div><div class="date">(.*?)<\/div><div class="message">(.*?)<\/div><\/div>(?=<div class="post"|$)/ig

    ,"rep" : "$1<>$3<>$2<>$4<>$5<>\n"

    ,"preReplace" : [ [/(?:<div class="post"[^>]* id="0"|<div (?:class|id)=[^>]*banner)[\s\S]*?(?=<div class="post"|<\/div><div class="cLength"|$)/ig,""]

                     ,[/<a href="(?:https?:)?\/\/(?!be\.2ch\.net\/).*?>([^<]*)<\/a>/ig, "$1"] ]

     ,"postReplace" : [ [/<\/div><div class="be[^>]*><a href="[^"]+\/(\d+)"[^>]*>\?(.*?)<\/a>/ig," BE:$1-$2"]

                       ,[/<img src="(?:https?:)?(\/\/img\.2ch\.net\/.+?)">/ig, "sssp:$1"]

                       ,[/<img src="(?:https?:)?(.*?)">/ig, IMG_TO+"$1"] ]

    }

 

   // ver 06.0.0 ppspink

   ,{ "thr" : /(<section class="thread"[\s\S]+<\/dd><\/dl>)(<\/section>)/i

     ,"msg" : /[\s\S]*?<dl class="post"[^>]*>(?:<[^>]*?>)*<span class="number">(\d+).+?<span class="name"><b>.*?(?:<a href="mailto:(.+?)">)?(.*?)(?:<\/a>)?<\/b><\/span><span class="date">(.*?)<\/span>(<div class="be[^>]*><a[^>]*>[^<]*<\/a><\/div>)?<\/dt><dd class="thread_in">(.*?)(?:<\/dd><\/dl>|$)/ig

     ,"rep" : "$1<>$3<>$2<>$4$5<>$6<>\n"

     ,"preReplace" : [ [/(?:<dl class="post"[^>]* id="0"|<div (?:class|id)=[^>]*banner)[\s\S]*?(?=<section|<dl class="post"|$)/ig,""]

                      ,[/<a href="(?:https?:)?\/\/(?!be\.2ch\.net\/).*?>([^<]*)<\/a>/ig, "$1"] ]

    ,"postReplace" : [ [/<div class="be[^>]*><a href="[^"]+\/(\d+)"[^>]*>\?(.*?)<\/a><\/div>/ig," BE:$1-$2"]

                      ,[/^(\d+<>)<font color="green">(.*?)<\/font>(?=<>)/img, "$1$2"]

                      ,[/<img src="(?:https?:)?(\/\/img\.2ch\.net\/.+?)">/ig, "sssp:$1"]

                      ,[/<img src="(?:https?:)?(.*?)">/ig, IMG_TO+"$1"] ]

 

  ,{ "thr" : /^[\s\S]*?<dl[^>]*>\s*(?:<font[^>]*>.*<\/font>.*\s*)?((?:\s*<dt[^>]*>.+?<dd>.+\r?\n?)+)(\s*<)?/i

    ,"msg" : /[ \t]*<dt.*?>([0-9]+).+?(?:"mailto:(.+?)">)?<b[^>]*>(.*?)<\/b>(?:<\/font>|<\/a>)?(?: ?投稿日)? ?：(.*?)<dd>(.*?)(?:<br>)*(?=<dt.*?>|$)/img

    ,"rep" : "$1<>$3<>$2<>$4<>$5<>"

    ,"preReplace" : [ [/(?:<div (?:class|id)=[^>]*banner)[\s\S]*?(?=<dt|<\/dl>|$)/ig,""]

                     ,[/<a href="(?:https?:)?\/\/.*?>([^<]*)<\/a>/ig, "$1"]

                      ,[/(<a href=)"\/cdn-cgi\/l\/(email-protection\#.*?">)/ig,'$1"mailto:$2'] ]

     ,"postReplace" : [ [/<a href="javascript:be\(([^\)]+?)\)[^>]*>\?(.*?)<\/a>/ig, "BE:$1-$2"]

                      ,[/<img src="(?:https?:)?(\/\/img\.2ch\.net\/.+?)">/ig, "sssp:$1"]

                      ,[/<img src="(?:https?:)?(.*?)">/ig, IMG_TO+"$1"] ]

    ,"ln_terminate" : true

        url = url.replace(/^http:\/\/(?:mattari\.plusvip\.jp|jane\.s28\.xrea\.com)\/test\/\w+\.cgi\/(?:jane2ch|bbs)\//, "http://jane2ch.net/test/read.cgi/community/")

                 .replace(/^(http:\/\/next2ch\.net\/)(\w+\/)(?:kako\/\d{3,4}\/(?:\d{5}\/)?)?(\d+)(?:\/|\.html)?$/,"$1test/read.cgi/$2$3/")

                 .replace(/\/read\.cgi\?(?=.*?bbs=(\w+))(?=.*?key=(\d+))(?=.*?st=(\d+))?(?=.*?to=(\d+))?.*$/i, "/read.cgi/$1/$2/$3-$4").replace(/\/-$/,"/");

        if(!args.keep_kako)

            url=url.replace(/^(.*?\/)(\w+\/)kako\/\d{3,4}\/(?:\d{5}\/)?(\d+)\.html$/,"$1test/read.cgi/$2$3/");

        return url;

    }

 ,preReplace  :

    function() {

        var i,list;

        if(this.re_sel==-1) this.testTBlock(); //re_selの設定

        if(this.re_sel>=0) {

            trace("");

            list = this.REG_PATTERN[this.re_sel].preReplace;

            for(i=0;i<list.length; i++) {

                this.msg = this.msg.replace(list[i][0],list[i][1]);

            }

            trace("pre Replace");

        }

    }

 ,postReplace :

    function() {

        var i,list;

        list = this.REG_PATTERN[this.re_sel].postReplace;

        for(i=0;i<list.length; i++) {

            this.msg = this.msg.replace(list[i][0],list[i][1]);

        }

    }

 ,_getKakoUrl :

    function() {

        var p = URL.prm;

        if(URL.thrID<1000000000)

            { url="http://$1/$2/kako/$3/$4.dat.gz".expand([,p[1],p[5],p[6].substr(0,3),p[6]]);}

        else

            {url="http://$1/$2/kako/$3/$4/$5.dat.gz".expand([,p[1],p[5],p[6].substr(0,4),p[6].substr(0,5),p[6]]);}

        return url;

    }

 ,readHTTP  :

    function(url) {

        var s,ss,u,msgLength;

        if(!URL.otherURLType) {

            if(!URL.kako && !URL.RE_HOST.test(url)) {

                if(!this.readHTTP0(url)) return false; //dat取得

            }

            /*@if (@EnabledTest2chJSON)

            this.kakoUrl = this._getKakoUrl();

            // keep_kakoオプションによるkako形式のURIが受け渡される場合には最初に .dat.gz/.dat のアクセスを試行する

            if(URL.kako) if(!this.readHTTP2(this.kakoUrl)) return false;

        }

        trace("try URL="+url,9);

        this.msg = readHTTP(url)[0];

        this.read_cgi_ver = (this.msg.match(/>read\.cgi ver ([\d.]+)/)||[])[1];

        this.preReplace();

        this.getTitle(this.msg);

        msgLength = this.msg.length;

        ss = this.setTBlock();

        if (ss==null && !URL.otherURLType) {

            u = this.kakoUrl.replace(/\.dat\.gz$/,".html");

            switch(this.readHTTP3(u)) {

                case 0: return false;

                case 1: url=u;  ss=this.setTBlock(); break;

                default: break // case -1

            }

        }

        if(ss==null) {

            ss = "<URL>="+url+"\n<TITLE>="+this.title+"\n<文字数>="+msgLength+"\n\n";

            ss += ((this.msg.match(/^((?=.*LoadAverage|人大杉).*$)/im)||[])[1])

                    || ((this.msg.match(/<h1[^>]*>([\s\S]*?)<\/h1>/m)||[])[1])

                    || ((this.msg.match(/<p[^>]*>\n*(.*\s+.*\s*)$/m)||[])[1])

                    || "不明";

            Err("E_block_not_found", "\nもしかしたら以下のはメッセージかも\n\n"+ss+"\n");

        }

        if (!ss) {

            if (shell.Popup("途中でデータが途切れているようですが続行しますか？",0,MY_NAME,4+48)!=6) Err("E_stop");

        }

        if(this.REG_PATTERN[this.re_sel].ln_terminate && this.msg && this.msg.slice(-1)!='\n') this.msg += '\n';

        return true;

    }

 ,readHTTP2 :

    function(url) {

        var re1 = /^(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>((?:(?!<>).)*).*\s*$/m;

        var re2 = /^(?:[^,]*),(?:[^,]*),(?:[^,]*),(?:[^,]*),(.*)$/m;

        trace("try URL="+url,9);

        var s="",r="";

        try { s=readHTTP(url); r=s[0].match(re1); if(!r) r=s[0].match(re2); }catch(e){} //9999999999.dat.gz

        if(!r) {

            url=url.replace(/\.gz$/,"");

            trace("try URL="+url,9);

            try{ s=readHTTP(url); r=s[0].match(re1); if(!r) r=s[0].match(re2); }catch(e){} //9999999999.dat

        }

        if(r) {

            this.msg = s[0];

            this.bin = s[2];

            this.last = this.checkData0(s[0]).replace(/^.*$/m,"").length;

            this.title = r[1];

            URL.kako = true;

            delete args.append;

            return false;

        }

        return true;

    }

 ,readHTTP3 :

    function(url) {

        var title=((this.msg.match(/<title>(.*)<\/title>/im)||[])[1]||"");

        trace("HTTP title="+title,9);

        if (/error|隊長|過去ログ倉庫/i.test(title)) {

            if(!URL.kako && !this.readHTTP2(this.kakoUrl)) return 0;　//最初に/kako/.../9999999999.dat.gzを試す

            trace("try URL="+url,9);

            var s = ""; try{ s=readHTTP(url)[0]; }catch(e){}  //9999999999.html

            if(/<dl.*>/.test(s)) { // hit

                this.title = (s.match(/<title>(.*)<\/title>/im)||[])[1]||"";

                this.msg = s;

                this.preReplace();

                URL.kako = true;

                delete args.append;

                return 1;

            }

            trace("HTTP title="+((s.match(/<title>(.*)<\/title>/im)||[])[1]||""),9);

        }

        return -1;

    }

 ,readHTTP0 :

    function(url) {

        var re = /^(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>((?:(?!<>).)*).*\s*$/m;

        var s;

        url = "http://"+URL.site+"/"+URL.brdID+"/dat/"+URL.thrID+".dat";

        trace("try URL="+url,9);

        try { s=readHTTP(url); } catch(e) {}

        if(s) {

            this.msg = s[0];

            this.title = (s[0].match(re)||[])[1];

            if(this.title===void 0||this.title=="２ちゃんねる専用ブラウザをご利用の皆さまへ") return true;

            this.bin = s[2];

            this.last = this.checkData0(s[0]).replace(/^.*$/m,"").length;

            delete args.append;

            return false;

        }

        return true;

    }

 

var Thread_jbbs = object(Thread,{

  prepare     : function() { Jane=Jane_jbbs; URL=URL_jbbs; }

 ,REG_PATTERN : [

    { "thr" : /^[\s\S]*?<dl\s+(?:class|id)="thread[^>]*?>\s*(<dt>(?:(?!<\/dl>)[\s\S])*?\s*)<\/dl>[\s\S]*$/i

     ,"msg" : /<DT><A.*?>([0-9]+).+?(?:<A HREF="mailto:(.+?)">)?<B> ?(?:<font color.*?>)?(.*?)(?:<\/font>)? ?<\/B>(.*?)(?:<\/A>|<\/FONT>)(?: 投稿日)?： ?(.*?)(?:<BR>)?<DD>(.*) ?<BR><BR>/img

     ,"rep" : "$1<>$3$4<>$2<>$5<>$6<>"

    }

   ,{ "thr" : /^[\s\S]*?<dl[^>]*?>(?:(?!<dt>)[\s\S])*(<dt>(?:(?!<\/dl>)[\s\S])*)<\/dl>[\s\S]*$/i

     ,"msg" : /<DT><A.*?>([0-9]+).+?(?:<A HREF="mailto:(.+?)">)?<B> ?(?:<font color.*?>)?(.*?)(?:<\/font>)? ?<\/B>(.*?)(?:<\/A>|<\/FONT>)(?: 投稿日)?： ?(.*?)(?:<BR>)?<DD>(.*) ?<BR><BR>/img

     ,"rep" : "$1<>$3$4<>$2<>$5<>$6<>"

    }

  ]

 ,urlReplace  : function(u) {

                    //したらばの事前URL変換：旧site名、/storage/ URLを現在のURLに置換

                    return  u.replace(URL.RE_HOST,"http://jbbs.shitaraba.net/")

                             .replace(/\/bbs\/lite\//,"/bbs/")

                             .replace(/\/\w+\.cgi\//, "/read.cgi/")

                             .replace(/^(http:\/\/[^\/]+\/)([^\/]+\/)([^\/]+\/)storage\/(\d+).*$/,"$1bbs/read.cgi/$2$3$4/")

                             .replace(/\/([^\/]+)\/bbs\/read\.cgi\?(?=.*?bbs=(\d+))(?=.*?key=(\d+))(?=.*?start=(\d+))?(?=.*?end=(\d+))?.*$/i, "/bbs/read.cgi/$1/$2/$3/$4-$5").replace(/\/-$/,"/");

                }

 ,preReplace :  function() {

                    if(URL.otherURLType==1) { // archive.org

                        this.msg = this.msg.replace(/<a href="\/web\/\d+\//g,'<a href="');

                    }

                    if(URL.otherURLType && /<dl.*?>\s+<dt>\s+<a/.test(this.msg)) {

                        //1と100レス毎に入る公告を除去

                        this.msg = this.msg.replace(/^\s*(.*?)\s*\n/mg,"$1")

                                           .replace(/<!--.*?-->/g,"")

                                           .replace(/<br>(?:<\/dd>)?<div[^>]*>.*?<\/div>(?=<dt>|<\/dl>)/ig,"")

                                           .replace(/<table.*?>(?:(?!<dt>).)*?<\/table>(?=<dt>|<\/dl>)/ig,"")

                                           .replace(/<br>\s*<br>(?:<\/dd>)?(?=<dt>|<\/dl>)/ig,"<br><br>\n")

                                           ;

                    }

                }

 ,mainReplace :

    function() {

        this.msg = this.msg.replace(/^(\d+<>.*?<>.*?<>.*?)(<>.*<>)((?:(?!<>).)*)$/mg, function($0,$1,$2,$3) {return ($3)?$1+" ID:"+$3+$2:$0;});

    }

 ,createBrdFolder :

    function() {

        var s = readHTTP( URL.url.replace( /\/\w+\.cgi(\/\w+\/\w+\/).*$/, "/api/setting.cgi$1") )[0];

        var bbs_title = (s.match(/^BBS_TITLE=(.*)$/m)||[])[1];

        var category = (s.match(/^CATEGORY=(.*)$/m)||[])[1];

        bbs_title || category || Err("E_brditem_not_found");

        brd = [ "【したらば】" + category.convDontUseStr() , bbs_title.convDontUseStr() , ""].join("\\");

        path(Jane.LogBasePath + JANE_LOGS + brd + URL.thrID + ".dat");

        return brd;

    }

 ,checkData   :

    function(s) {

        if (this.last-this.first+1 != s.replace(/^.*$/mg,"").length) {

            this.requireFillAbn = true;

        }

        // 末尾のIDを削除

        this.msg = s.replace(/^(.*?)<>((?!<>).)*$/mg, "$1");

    }

 ,getTitle    : function(s) {

                    this.title = (s.match(/<>((?:(?!<>).)*)<>(?:(?!<>).)*$/m)||[])[1];

                    if(!this.title) this.title=DatInfo.title;

                }

 ,addTitle    : function() {}

 ,readHTTP  :

    function(url) {

        // web.archive/google cacheからの取得

        if(URL.otherURLType) {

            this.getTitle = this.getTitle2;

            this.delDupData = this.delDupData2

            this.checkData = this.checkData2;

            Thread.readHTTP.call(this, url);

            delete this.mainReplace;

            delete this.addTitle;

            return true;

        }

        //-- 1st try : rawmode read ----

        var raw_url = url.replace(/\/\w+\.cgi\//, "/rawmode.cgi/");

        trace("try URL="+raw_url,9);

        var s = readHTTP(raw_url);

        switch( errmsg = (s[1].match(/^ERROR: *(?! )(.*?)$/m)||[])[1]||"" ) {

            case "BBS NOT FOUND": Err("E_bbs_not_found");

            case "KEY NOT FOUND": Err("E_key_not_found");

            case "THREAD NOT FOUND": Err("E_thread_not_found");

            case "STORAGE IN":

                this.getTitle = this.getTitle2;

                this.delDupData = this.delDupData2

                this.checkData = this.checkData2;

                Thread.readHTTP.call(this, URL.prm[0]);

                delete this.mainReplace;

                delete this.addTitle;

                break;

            case "": //正常取得

                s = s[0];

                this.getTitle(s);

                IDX_STATE["jbbs"] = 0;

                this.msg = s;

                break;

            default: Err("E_http_recieve", "(rawmode) : " + errmsg);

        }

        return true;

    }

 ,getTitle2   :

    function(s) { this.title = (s.match(/<h1 class="thread-title">(.*?)<\/h1>/i)||[])[1]

                  || (s.match(/<title>(.*?)<\/title>/i)||[])[1] || "";

                }

 ,delDupData2 : //append時、既存のレス数分データを読み飛ばす

    function() { while( (this.msg.match(/^(\d+)/i)||[])[1] < DatInfo.cnt+1)

                    { this.msg = this.msg.replace(/^.*\n/m,""); }

               }

 ,checkData2   :

    function(s) { var ln = this.checkData0(s);

                  if (this.last-this.first+1 != ln.length) { this.requireFillAbn = true; }

                }

 

var Thread_machi = object(Thread,{

  prepare     : function() { Jane=Jane_machi; URL=URL_machi; }

 ,noChkTitle  : true

 ,REG_PATTERN : [

    { "thr" : /^(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>((?:(?!<>).)*)<>((?:(?!<>).)*).*\s*$/m

     ,"msg" : /^((?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*<>(?:(?!<>).)*)(<>(?:(?!<>).)*<>(?:(?!<>).)*)<>((?:(?!<>).)*)(?:<>)?(.*\s*)$/mg

     ,"rep" : "$1 [ $3 ]$2$4"

    }

  ]

 ,urlReplace  : function(u) {

                    if(URL.otherURLType) Err("E_illegal_url");

                    u=u.replace(/\/test\/(?=read)/,"/bbs/")

                       .replace(/\/read\.cgi\//,"/offlaw.cgi/2/");

                    trace("replace url="+u,9);

                    return u;

                }

 ,getTitle    : function(s) { this.title = (s.match(this.REG_PATTERN[this.re_sel].thr)||[])[1] || DatInfo.title; }

 ,checkData   : function(s) {

                    if(!/^\d+<>.*?<>.+?<>.*?<>.*$/m.test(s)) Err("E_remained_garbage");

                    if (this.last-this.first+1 != s.replace(/^.*$/mg,"").length) { this.requireFillAbn = true; }

                }

 ,delDupData  : function() {}

 ,addTitle    : function() {}

 ,setTBlock   : function() {}

 

function loadFile(f) {

    var s="";

    try {

        strm.Type = 2;

        strm.Charset = 'shift_jis';

        strm.Open();

        strm.loadFromFile(f);

        s = strm.ReadText(-1);

        strm.Close();

    } catch(e) { strm.Close(); Err("E_loadfile", "\n"+e.message+"\ncurrent="+shell.CurrentDirectory+"\nfile="+f); }

    return s;

function loadFile2(f) {

    var s="";

    try {

        var file = fso.OpenTextFile( f, 1, false, 0);

        s = file.ReadAll();

        file.close();

    } catch(e) {

        if(file) file.close();

        s = loadFile(f);

    }

    return s;

 

function saveFile(f,s,add) {

    strm.Type = 2;

    strm.Charset = 'shift_jis';

    strm.Open();

    if (add) { try {strm.loadFromFile(f); strm.Position = strm.Size;} catch(e){} }

    strm.WriteText(s);

    try { strm.Savetofile(f, 2); }

    catch(e) { strm.Close(); Err("E_savefile", "\n"+e.message+"\ncurrent="+shell.CurrentDirectory+"\nfile="+f); }

    strm.Close();

function saveFile2(f,s,add) {

    try{

        var file = fso.OpenTextFile( f, (add)?8:2 , true, 0);

        file.Write(s);

        file.Close();

    } catch(e) {

        if(file) file.Close();

        saveFile(f,s,add);

    }