diff --git a/awstats_data.py b/awstats_data.py index 7557469..78ee578 100644 --- a/awstats_data.py +++ b/awstats_data.py @@ -4,23 +4,23 @@ robots = ['appie', 'architext', 'bingpreview', 'bjaaland', 'contentmatch', 'ferr search_engines = ['google\.[\w.]+/products', 'base\.google\.', 'froogle\.google\.', 'groups\.google\.', 'images\.google\.', 'google\.', 'googlee\.', 'googlecom\.com', 'goggle\.co\.hu', '216\.239\.(35|37|39|51)\.100', '216\.239\.(35|37|39|51)\.101', '216\.239\.5[0-9]\.104', '64\.233\.1[0-9]{2}\.104', '66\.102\.[1-9]\.104', '66\.249\.93\.104', '72\.14\.2[0-9]{2}\.104', 'msn\.', 'live\.com', 'bing\.', 'voila\.', 'mindset\.research\.yahoo', 'yahoo\.', '(66\.218\.71\.225|216\.109\.117\.135|216\.109\.125\.130|66\.218\.69\.11)', 'search\.aol\.co', 'tiscali\.', 'lycos\.', 'alexa\.com', 'alltheweb\.com', 'altavista\.', 'a9\.com', 'dmoz\.org', 'netscape\.', 'search\.terra\.', 'www\.search\.com', 'search\.sli\.sympatico\.ca', 'excite\.'] -search_engines_2 = ['4\-counter\.com', 'att\.net', 'bungeebonesdotcom', 'northernlight\.', 'hotbot\.', 'kvasir\.', 'webcrawler\.', 'metacrawler\.', 'go2net\.com', '(^|\.)go\.com', 'euroseek\.', 'looksmart\.', 'spray\.', 'nbci\.com\/search', 'de\.ask.\com', 'es\.ask.\com', 'fr\.ask.\com', 'it\.ask.\com', 'nl\.ask.\com', 'uk\.ask.\com', '(^|\.)ask\.com', 'atomz\.', 'overture\.com', 'teoma\.', 'findarticles\.com', 'infospace\.com', 'mamma\.', 'dejanews\.', 'dogpile\.com', 'wisenut\.com', 'ixquick\.com', 'search\.earthlink\.net', 'i-une\.com', 'blingo\.com', 'centraldatabase\.org', 'clusty\.com', 'mysearch\.', 'vivisimo\.com', 'kartoo\.com', 'icerocket\.com', 'sphere\.com', 'ledix\.net', 'start\.shaw\.ca', 'searchalot\.com', 'copernic\.com', 'avantfind\.com', 'steadysearch\.com', 'steady-search\.com', 'claro-search\.com', 'www1\.search-results\.com', 'www\.holasearch\.com', 'search\.conduit\.com', 'static\.flipora\.com', '(?:www[12]?|mixidj)\.delta-search\.com', 'start\.iminent\.com', 'www\.searchmobileonline\.com', 'int\.search-results\.com', 'chello\.at', 'chello\.be', 'chello\.cz', 'chello\.fr', 'chello\.hu', 'chello\.nl', 'chello\.no', 'chello\.pl', 'chello\.se', 'chello\.sk', 'chello', 'mirago\.be', 'mirago\.ch', 'mirago\.de', 'mirago\.dk', 'es\.mirago\.com', 'mirago\.fr', 'mirago\.it', 'mirago\.nl', 'no\.mirago\.com', 'mirago\.se', 'mirago\.co\.uk', 'mirago', 'answerbus\.com', 'icq\.com\/search', 'nusearch\.com', 'goodsearch\.com', 'scroogle\.org', 'questionanswering\.com', 'mywebsearch\.com', 'as\.starware\.com', 'del\.icio\.us', 'digg\.com', 'stumbleupon\.com', 'swik\.net', 'segnalo\.alice\.it', 'ineffabile\.it', 'anzwers\.com\.au', 'engine\.exe', 'miner\.bol\.com\.br', '\.baidu\.com', '\.vnet\.cn', '\.soso\.com', '\.sogou\.com', '\.3721\.com', 'iask\.com', '\.accoona\.com', '\.163\.com', '\.zhongsou\.com', 'atlas\.cz', 'seznam\.cz', 'quick\.cz', 'centrum\.cz', 'jyxo\.(cz|com)', 'najdi\.to', 'redbox\.cz', 'isearch\.avg\.com', 'opasia\.dk', 'danielsen\.com', 'sol\.dk', 'jubii\.dk', 'find\.dk', 'edderkoppen\.dk', 'netstjernen\.dk', 'orbis\.dk', 'tyfon\.dk', '1klik\.dk', 'ofir\.dk', 'ilse\.', 'vindex\.', '(^|\.)ask\.co\.uk', 'bbc\.co\.uk/cgi-bin/search', 'ifind\.freeserve', 'looksmart\.co\.uk', 'splut\.', 'spotjockey\.', 'ukdirectory\.', 'ukindex\.co\.uk', 'ukplus\.', 'searchy\.co\.uk', 'search\.fbdownloader\.com', 'search\.babylon\.com', 'haku\.www\.fi', 'recherche\.aol\.fr', 'ctrouve\.', 'francite\.', '\.lbb\.org', 'rechercher\.libertysurf\.fr', 'search[\w\-]+\.free\.fr', 'recherche\.club-internet\.fr', 'toile\.com', 'biglotron\.com', 'mozbot\.fr', 'sucheaol\.aol\.de', 'o2suche\.aol\.de', 'fireball\.de', 'infoseek\.de', 'suche\d?\.web\.de', '[a-z]serv\.rrzn\.uni-hannover\.de', 'suchen\.abacho\.de', '(brisbane|suche)\.t-online\.de', 'allesklar\.de', 'meinestadt\.de', '212\.227\.33\.241', '(161\.58\.227\.204|161\.58\.247\.101|212\.40\.165\.90|213\.133\.108\.202|217\.160\.108\.151|217\.160\.111\.99|217\.160\.131\.108|217\.160\.142\.227|217\.160\.176\.42)', 'wwweasel\.de', 'netluchs\.de', 'schoenerbrausen\.de', 'suche\.gmx\.net', 'ecosia\.org', 'de\.aolsearch\.com', 'suche\.aol\.de', 'www\.startxxl\.com', 'www\.benefind\.de', 'heureka\.hu', 'vizsla\.origo\.hu', 'lapkereso\.hu', 'goliat\.hu', 'index\.hu', 'wahoo\.hu', 'webmania\.hu', 'search\.internetto\.hu', 'tango\.hu', 'keresolap\.hu', 'polymeta\.hu', 'sify\.com', 'virgilio\.it', 'arianna\.libero\.it', 'supereva\.com', 'kataweb\.it', 'search\.alice\.it\.master', 'search\.alice\.it', 'gotuneed\.com', 'godado', 'jumpy\.it', 'shinyseek\.it', 'teecno\.it', 'search\.genieo\.com', 'ask\.jp', 'sagool\.jp', 'sok\.start\.no', 'eniro\.no', 'szukaj\.wp\.pl', 'szukaj\.onet\.pl', 'dodaj\.pl', 'gazeta\.pl', 'gery\.pl', 'hoga\.pl', 'netsprint\.pl', 'interia\.pl', 'katalog\.onet\.pl', 'o2\.pl', 'polska\.pl', 'szukacz\.pl', 'wow\.pl', 'ya(ndex)?\.ru', 'aport\.ru', 'rambler\.ru', 'turtle\.ru', 'metabot\.ru', 'evreka\.passagen\.se', 'eniro\.se', 'zoznam\.sk', 'sapo\.pt', 'search\.ch', 'search\.bluewin\.ch', 'pogodak\.'] +search_engines_2 = ['4\-counter\.com', 'att\.net', 'bungeebonesdotcom', 'northernlight\.', 'hotbot\.', 'kvasir\.', 'webcrawler\.', 'metacrawler\.', 'go2net\.com', '(^|\.)go\.com', 'euroseek\.', 'looksmart\.', 'spray\.', 'nbci\.com\/search', 'de\.ask.\com', 'es\.ask.\com', 'fr\.ask.\com', 'it\.ask.\com', 'nl\.ask.\com', 'uk\.ask.\com', '(^|\.)ask\.com', 'atomz\.', 'overture\.com', 'teoma\.', 'findarticles\.com', 'infospace\.com', 'mamma\.', 'dejanews\.', 'dogpile\.com', 'wisenut\.com', 'ixquick\.com', 'search\.earthlink\.net', 'i-une\.com', 'blingo\.com', 'centraldatabase\.org', 'clusty\.com', 'mysearch\.', 'vivisimo\.com', 'kartoo\.com', 'icerocket\.com', 'sphere\.com', 'ledix\.net', 'start\.shaw\.ca', 'searchalot\.com', 'copernic\.com', 'avantfind\.com', 'steadysearch\.com', 'steady-search\.com', 'claro-search\.com', 'www1\.search-results\.com', 'www\.holasearch\.com', 'search\.conduit\.com', 'static\.flipora\.com', '(?:www[12]?|mixidj)\.delta-search\.com', 'start\.iminent\.com', 'www\.searchmobileonline\.com', 'int\.search-results\.com', 'chello\.at', 'chello\.be', 'chello\.cz', 'chello\.fr', 'chello\.hu', 'chello\.nl', 'chello\.no', 'chello\.pl', 'chello\.se', 'chello\.sk', 'chello', 'mirago\.be', 'mirago\.ch', 'mirago\.de', 'mirago\.dk', 'es\.mirago\.com', 'mirago\.fr', 'mirago\.it', 'mirago\.nl', 'no\.mirago\.com', 'mirago\.se', 'mirago\.co\.uk', 'mirago', 'answerbus\.com', 'icq\.com\/search', 'nusearch\.com', 'goodsearch\.com', 'scroogle\.org', 'questionanswering\.com', 'mywebsearch\.com', 'as\.starware\.com', 'del\.icio\.us', 'digg\.com', 'stumbleupon\.com', 'swik\.net', 'segnalo\.alice\.it', 'ineffabile\.it', 'anzwers\.com\.au', 'engine\.exe', 'miner\.bol\.com\.br', '\.baidu\.com', '\.vnet\.cn', '\.soso\.com', '\.sogou\.com', '\.3721\.com', 'iask\.com', '\.accoona\.com', '\.163\.com', '\.zhongsou\.com', 'atlas\.cz', 'seznam\.cz', 'quick\.cz', 'centrum\.cz', 'jyxo\.(cz|com)', 'najdi\.to', 'redbox\.cz', 'isearch\.avg\.com', 'opasia\.dk', 'danielsen\.com', 'sol\.dk', 'jubii\.dk', 'find\.dk', 'edderkoppen\.dk', 'netstjernen\.dk', 'orbis\.dk', 'tyfon\.dk', '1klik\.dk', 'ofir\.dk', 'ilse\.', 'vindex\.', '(^|\.)ask\.co\.uk', 'bbc\.co\.uk/cgi-bin/search', 'ifind\.freeserve', 'looksmart\.co\.uk', 'splut\.', 'spotjockey\.', 'ukdirectory\.', 'ukindex\.co\.uk', 'ukplus\.', 'searchy\.co\.uk', 'search\.fbdownloader\.com', 'search\.babylon\.com', 'haku\.www\.fi', 'recherche\.aol\.fr', 'ctrouve\.', 'francite\.', '\.lbb\.org', 'rechercher\.libertysurf\.fr', 'search[\w\-]+\.free\.fr', 'recherche\.club-internet\.fr', 'toile\.com', 'biglotron\.com', 'mozbot\.fr', 'sucheaol\.aol\.de', 'o2suche\.aol\.de', 'fireball\.de', 'infoseek\.de', 'suche\d?\.web\.de', '[a-z]serv\.rrzn\.uni-hannover\.de', 'suchen\.abacho\.de', '(brisbane|suche)\.t-online\.de', 'allesklar\.de', 'meinestadt\.de', '212\.227\.33\.241', '(161\.58\.227\.204|161\.58\.247\.101|212\.40\.165\.90|213\.133\.108\.202|217\.160\.108\.151|217\.160\.111\.99|217\.160\.131\.108|217\.160\.142\.227|217\.160\.176\.42)', 'wwweasel\.de', 'netluchs\.de', 'schoenerbrausen\.de', 'suche\.gmx\.net', 'ecosia\.org', 'de\.aolsearch\.com', 'suche\.aol\.de', 'www\.startxxl\.com', 'www\.benefind\.de', 'heureka\.hu', 'vizsla\.origo\.hu', 'lapkereso\.hu', 'goliat\.hu', 'index\.hu', 'wahoo\.hu', 'webmania\.hu', 'search\.internetto\.hu', 'tango\.hu', 'keresolap\.hu', 'polymeta\.hu', 'sify\.com', 'virgilio\.it', 'arianna\.libero\.it', 'supereva\.com', 'kataweb\.it', 'search\.alice\.it\.master', 'search\.alice\.it', 'gotuneed\.com', 'godado', 'jumpy\.it', 'shinyseek\.it', 'teecno\.it', 'search\.genieo\.com', 'ask\.jp', 'sagool\.jp', 'sok\.start\.no', 'eniro\.no', 'szukaj\.wp\.pl', 'szukaj\.onet\.pl', 'dodaj\.pl', 'gazeta\.pl', 'gery\.pl', 'hoga\.pl', 'netsprint\.pl', 'interia\.pl', 'katalog\.onet\.pl', 'o2\.pl', 'polska\.pl', 'szukacz\.pl', 'wow\.pl', 'ya(ndex)?\.ru', 'aport\.ru', 'rambler\.ru', 'turtle\.ru', 'metabot\.ru', 'evreka\.passagen\.se', 'eniro\.se', 'zoznam\.sk', 'sapo\.pt', 'search\.ch', 'search\.bluewin\.ch', 'pogodak\.', 'jwss\.cc', 'lemoteur\.orange\.fr', 'windowssearch\.com', 'qwant\.com', 'wow\.com', 'searches\.omiga-plus\.com', 'buenosearch\.com'] -not_search_engines_keys = {'tiscali\.' : 'mail\.tiscali\.', 'yandex\.' : 'direct\.yandex\.', 'altavista\.' : 'babelfish\.altavista\.', 'yahoo\.' : '(?:picks|mail)\.yahoo\.|yahoo\.[^/]+/picks', 'google\.' : 'translate\.google\.', 'msn\.' : 'hotmail\.msn\.'} +not_search_engines_keys = {'altavista\.' : 'babelfish\.altavista\.', 'tiscali\.' : 'mail\.tiscali\.', 'msn\.' : 'hotmail\.msn\.', 'yandex\.' : 'direct\.yandex\.', 'yahoo\.' : '(?:picks|mail)\.yahoo\.|yahoo\.[^/]+/picks', 'google\.' : 'translate\.google\.'} -search_engines_hashid = {'live\.com' : 'live', 'lapkereso\.hu' : 'lapkereso', 'goodsearch\.com' : 'goodsearch', 'dogpile\.com' : 'dogpile', 'biglotron\.com' : 'biglotron', 'search\.internetto\.hu' : 'internetto', '66\.102\.[1-9]\.104' : 'google_cache', 'gery\.pl' : 'gerypl', 'search\.aol\.co' : 'aol', 'chello\.no' : 'chellono', '(^|\.)ask\.co\.uk' : 'askuk', 'ofir\.dk' : 'ofir', 'claro-search\.com' : 'clarosearch', 'chello\.nl' : 'chellonl', '\.soso\.com' : 'soso', 'gazeta\.pl' : 'gazetapl', 'danielsen\.com' : 'danielsen', 'rambler\.ru' : 'rambler', 'es\.ask.\com' : 'askes', 'mirago\.fr' : 'miragofr', 'search[\w\-]+\.free\.fr' : 'free', 'recherche\.aol\.fr' : 'aolfr', 'findarticles\.com' : 'findarticles', 'ask\.jp' : 'askjp', 'nl\.ask.\com' : 'asknl', 'base\.google\.' : 'google_base', 'ixquick\.com' : 'ixquick', 'search\..*\.\w+' : 'search', 'euroseek\.' : 'euroseek', 'o2\.pl' : 'o2pl', 'mirago' : 'mirago', 'overture\.com' : 'overture', 'teecno\.it' : 'teecnoit', 'att\.net' : 'att', 'find\.dk' : 'finddk', 'szukaj\.onet\.pl' : 'onetpl', 'vindex\.' : 'vindex', 'search\.alice\.it\.master' : 'aliceitmaster', 'clusty\.com' : 'clusty', 'static\.flipora\.com' : 'flipora', 'googlee\.' : 'google', 'metabot\.ru' : 'metabot', 'mirago\.co\.uk' : 'miragocouk', 'segnalo\.alice\.it' : 'segnalo', 'steady-search\.com' : 'steadysearch', 'ukindex\.co\.uk' : 'ukindex', '(^|\.)go\.com' : 'go', 'ukdirectory\.' : 'ukdirectory', 'voila\.' : 'voila', 'netluchs\.de' : 'netluchs', 'metacrawler\.' : 'metacrawler', 'engine\.exe' : 'engine', 'suche\d?\.web\.de' : 'webde', 'search\.ch' : 'searchch', 'search\.fbdownloader\.com' : 'fbdownloader', 'meinestadt\.de' : 'meinestadt', 'wow\.pl' : 'wowpl', 'alexa\.com' : 'alexa', 'francite\.' : 'francite', 'kartoo\.com' : 'kartoo', 'mirago\.nl' : 'miragonl', 'rechercher\.libertysurf\.fr' : 'libertysurf', '66\.249\.93\.104' : 'google_cache', 'excite\.' : 'excite', 'mirago\.it' : 'miragoit', 'redbox\.cz' : 'redbox', 'bbc\.co\.uk/cgi-bin/search' : 'bbc', 'mirago\.ch' : 'miragoch', 'tyfon\.dk' : 'tyfon', 'looksmart\.' : 'looksmart', 'ilse\.' : 'ilse', 'ineffabile\.it' : 'ineffabile', 'eniro\.se' : 'enirose', 'looksmart\.co\.uk' : 'looksmartuk', 'vizsla\.origo\.hu' : 'origo', 'google\.' : 'google', 'stumbleupon\.com' : 'stumbleupon', 'www\.holasearch\.com' : 'holasearch', 'webcrawler\.' : 'webcrawler', 'mozbot\.fr' : 'mozbot', 'vivisimo\.com' : 'vivisimo', 'virgilio\.it' : 'virgilio', 'jyxo\.(cz|com)' : 'jyxo', 'iask\.com' : 'iask', 'avantfind\.com' : 'avantfind', 'suchen\.abacho\.de' : 'abacho', 'mywebsearch\.com' : 'mywebsearch', 'zoznam\.sk' : 'zoznam', '(161\.58\.227\.204|161\.58\.247\.101|212\.40\.165\.90|213\.133\.108\.202|217\.160\.108\.151|217\.160\.111\.99|217\.160\.131\.108|217\.160\.142\.227|217\.160\.176\.42)' : 'metacrawler_de', 'jubii\.dk' : 'jubii', 'katalog\.onet\.pl' : 'katalogonetpl', 'opasia\.dk' : 'opasia', 'godado' : 'godado', 'search\.genieo\.com' : 'genieo', 'bungeebonesdotcom' : 'bungeebonesdotcom', '216\.239\.(35|37|39|51)\.100' : 'google_cache', '(^|\.)ask\.com' : 'ask', 'anzwers\.com\.au' : 'anzwers', 'goliat\.hu' : 'goliat', 'mamma\.' : 'mamma', 'it\.ask.\com' : 'askit', 'search\.earthlink\.net' : 'earthlink', '\.lbb\.org' : 'lbb', 'aport\.ru' : 'aport', 'www\.search\.com' : 'search.com', 'jumpy\.it' : 'jumpy\.it', 'quick\.cz' : 'quick', 'webmania\.hu' : 'webmania', 'ya(ndex)?\.ru' : 'yandex', 'suche\.aol\.de' : 'aolsuche', 'start\.shaw\.ca' : 'shawca', 'lycos\.' : 'lycos', 'sol\.dk' : 'sol', 'dodaj\.pl' : 'dodajpl', 'go2net\.com' : 'go2net', 'start\.iminent\.com' : 'iminent', 'ledix\.net' : 'ledix', '\.3721\.com' : '3721', 'alltheweb\.com' : 'alltheweb', 'blingo\.com' : 'blingo', 'search\.babylon\.com' : 'babylon', 'as\.starware\.com' : 'comettoolbar', 'mysearch\.' : 'mysearch', 'googlecom\.com' : 'google', '\.zhongsou\.com' : 'zhongsou', 'questionanswering\.com' : 'questionanswering', 'wwweasel\.de' : 'wwweasel', '212\.227\.33\.241' : 'metaspinner', 'orbis\.dk' : 'orbis', 'netsprint\.pl' : 'netsprintpl', 'del\.icio\.us' : 'delicious', 'tiscali\.' : 'tiscali', 'chello\.sk' : 'chellosk', '\.163\.com' : 'netease', '(66\.218\.71\.225|216\.109\.117\.135|216\.109\.125\.130|66\.218\.69\.11)' : 'yahoo', 'nusearch\.com' : 'nusearch', 'netstjernen\.dk' : 'netstjernen', 'centraldatabase\.org' : 'centraldatabase', 'copernic\.com' : 'copernic', 'arianna\.libero\.it' : 'arianna', 'msn\.' : 'msn', '1klik\.dk' : '1klik', 'mindset\.research\.yahoo' : 'yahoo_mindset', 'yahoo\.' : 'yahoo', 'digg\.com' : 'digg', 'searchy\.co\.uk' : 'searchy', 'www1\.search-results\.com' : 'searchresults', 'heureka\.hu' : 'heureka', 'kvasir\.' : 'kvasir', 'ecosia\.org' : 'ecosiasearch', 'sphere\.com' : 'sphere', 'turtle\.ru' : 'turtle', 'wisenut\.com' : 'wisenut', 'index\.hu' : 'indexhu', '[a-z]serv\.rrzn\.uni-hannover\.de' : 'meta', 'www\.benefind\.de' : 'benefind', 'google\.[\w.]+/products' : 'google_products', 'keresolap\.hu' : 'keresolap_hu', 'ctrouve\.' : 'ctrouve', 'sify\.com' : 'sify', 'szukaj\.wp\.pl' : 'wp', 'icq\.com\/search' : 'icq', 'chello\.be' : 'chellobe', 'icerocket\.com' : 'icerocket', 'northernlight\.' : 'northernlight', 'netsprint\.pl\/hoga\-search' : 'hogapl', 'mirago\.se' : 'miragose', 'dmoz\.org' : 'dmoz', 'dejanews\.' : 'dejanews', '72\.14\.2[0-9]{2}\.104' : 'google_cache', 'polska\.pl' : 'polskapl', 'chello\.hu' : 'chellohu', '\.baidu\.com' : 'baidu', 'steadysearch\.com' : 'steadysearch', 'hotbot\.' : 'hotbot', 'sagool\.jp' : 'sagool', 'centrum\.cz' : 'centrum', 'de\.ask.\com' : 'askde', 'swik\.net' : 'swik', '(brisbane|suche)\.t-online\.de' : 't-online', '\.accoona\.com' : 'accoona', 'i-une\.com' : 'iune', 'www\.searchmobileonline\.com' : 'searchmobileonline', 'infoseek\.de' : 'infoseek', 'groups\.google\.' : 'google_groups', 'atlas\.cz' : 'atlas', 'najdi\.to' : 'najdi', 'fr\.ask.\com' : 'askfr', '216\.239\.(35|37|39|51)\.101' : 'google_cache', 'searchalot\.com' : 'searchalot', 'search\.conduit\.com' : 'conduit', 'spray\.' : 'spray', 'interia\.pl' : 'interiapl', 'spotjockey\.' : 'spotjockey', 'chello\.at' : 'chelloat', 'infospace\.com' : 'infospace', '(?:www[12]?|mixidj)\.delta-search\.com' : 'delta-search', 'chello' : 'chellocom', 'chello\.cz' : 'chellocz', 'mirago\.de' : 'miragode', '216\.239\.5[0-9]\.104' : 'google_cache', '4\-counter\.com' : 'google4counter', 'pogodak\.' : 'pogodak', 'uk\.ask.\com' : 'askuk', 'sok\.start\.no' : 'start', 'ifind\.freeserve' : 'freeserve', 'eniro\.no' : 'eniro', 'isearch\.avg\.com' : 'avgsearch', 'netscape\.' : 'netscape', 'sapo\.pt' : 'sapo', 'bing\.' : 'bing', 'search\.alice\.it' : 'aliceit', 'polymeta\.hu' : 'polymeta_hu', 'gotuneed\.com' : 'gotuneed', 'a9\.com' : 'a9', 'answerbus\.com' : 'answerbus', 'int\.search-results\.com' : 'nortonsavesearch', 'atomz\.' : 'atomz', 'sucheaol\.aol\.de' : 'aolde', 'allesklar\.de' : 'allesklar', 'es\.mirago\.com' : 'miragoes', 'szukacz\.pl' : 'szukaczpl', 'chello\.pl' : 'chellopl', 'de\.aolsearch\.com' : 'aolsearch', 'mirago\.be' : 'miragobe', '\.sogou\.com' : 'sogou', 'suche\.gmx\.net' : 'gmxsuche', '\.vnet\.cn' : 'vnet', 'toile\.com' : 'toile', 'search\.sli\.sympatico\.ca' : 'sympatico', 'search\.bluewin\.ch' : 'bluewin', 'o2suche\.aol\.de' : 'o2aolde', 'scroogle\.org' : 'scroogle', 'no\.mirago\.com' : 'miragono', '64\.233\.1[0-9]{2}\.104' : 'google_cache', 'miner\.bol\.com\.br' : 'miner', 'search\.terra\.' : 'terra', 'seznam\.cz' : 'seznam', 'chello\.fr' : 'chellofr', 'wahoo\.hu' : 'wahoo', 'splut\.' : 'splut', 'kataweb\.it' : 'kataweb', 'teoma\.' : 'teoma', 'www\.startxxl\.com' : 'startxxl', 'ukplus\.' : 'ukplus', 'mirago\.dk' : 'miragodk', 'goggle\.co\.hu' : 'google', 'haku\.www\.fi' : 'haku', 'schoenerbrausen\.de' : 'schoenerbrausen', 'altavista\.' : 'altavista', 'nbci\.com\/search' : 'nbci', 'edderkoppen\.dk' : 'edderkoppen', 'chello\.se' : 'chellose', 'tango\.hu' : 'tango_hu', 'recherche\.club-internet\.fr' : 'clubinternet', 'supereva\.com' : 'supereva', 'fireball\.de' : 'fireball', 'froogle\.google\.' : 'google_froogle', 'images\.google\.' : 'google_image', 'evreka\.passagen\.se' : 'passagen', 'shinyseek\.it' : 'shinyseek\.it'} +search_engines_hashid = {'centrum\.cz' : 'centrum', 'polska\.pl' : 'polskapl', 'opasia\.dk' : 'opasia', 'mirago' : 'mirago', 'start\.iminent\.com' : 'iminent', 'search\.internetto\.hu' : 'internetto', 'searchy\.co\.uk' : 'searchy', 'nusearch\.com' : 'nusearch', 'searchalot\.com' : 'searchalot', 'dejanews\.' : 'dejanews', 'static\.flipora\.com' : 'flipora', 'tango\.hu' : 'tango_hu', 'msn\.' : 'msn', 'chello' : 'chellocom', 'www\.startxxl\.com' : 'startxxl', 'lapkereso\.hu' : 'lapkereso', 'netstjernen\.dk' : 'netstjernen', 'dodaj\.pl' : 'dodajpl', 'godado' : 'godado', 'looksmart\.' : 'looksmart', 'digg\.com' : 'digg', '\.163\.com' : 'netease', 'vizsla\.origo\.hu' : 'origo', 'swik\.net' : 'swik', 'as\.starware\.com' : 'comettoolbar', 'ask\.jp' : 'askjp', 'netsprint\.pl' : 'netsprintpl', 'de\.ask.\com' : 'askde', '64\.233\.1[0-9]{2}\.104' : 'google_cache', 'toile\.com' : 'toile', 'recherche\.club-internet\.fr' : 'clubinternet', 'sok\.start\.no' : 'start', '\.soso\.com' : 'soso', 'kvasir\.' : 'kvasir', 'teoma\.' : 'teoma', 'find\.dk' : 'finddk', 'vivisimo\.com' : 'vivisimo', 'search\.bluewin\.ch' : 'bluewin', 'es\.ask.\com' : 'askes', '\.zhongsou\.com' : 'zhongsou', 'mirago\.se' : 'miragose', 'sapo\.pt' : 'sapo', '\.baidu\.com' : 'baidu', 'segnalo\.alice\.it' : 'segnalo', 'kartoo\.com' : 'kartoo', 'avantfind\.com' : 'avantfind', 'search\.earthlink\.net' : 'earthlink', 'jubii\.dk' : 'jubii', 'clusty\.com' : 'clusty', 'eniro\.no' : 'eniro', 'chello\.hu' : 'chellohu', '72\.14\.2[0-9]{2}\.104' : 'google_cache', 'miner\.bol\.com\.br' : 'miner', 'meinestadt\.de' : 'meinestadt', 'altavista\.' : 'altavista', 'answerbus\.com' : 'answerbus', 'webcrawler\.' : 'webcrawler', 'sol\.dk' : 'sol', 'ilse\.' : 'ilse', 'excite\.' : 'excite', 'o2\.pl' : 'o2pl', 'edderkoppen\.dk' : 'edderkoppen', 'ifind\.freeserve' : 'freeserve', 'sphere\.com' : 'sphere', '(161\.58\.227\.204|161\.58\.247\.101|212\.40\.165\.90|213\.133\.108\.202|217\.160\.108\.151|217\.160\.111\.99|217\.160\.131\.108|217\.160\.142\.227|217\.160\.176\.42)' : 'metacrawler_de', 'es\.mirago\.com' : 'miragoes', 'evreka\.passagen\.se' : 'passagen', 'chello\.cz' : 'chellocz', 'jumpy\.it' : 'jumpy\.it', 'search\.alice\.it\.master' : 'aliceitmaster', 'redbox\.cz' : 'redbox', 'metacrawler\.' : 'metacrawler', 'szukaj\.wp\.pl' : 'wp', 'pogodak\.' : 'pogodak', 'rambler\.ru' : 'rambler', 'mirago\.de' : 'miragode', 'dogpile\.com' : 'dogpile', 'gazeta\.pl' : 'gazetapl', 'ukplus\.' : 'ukplus', 'recherche\.aol\.fr' : 'aolfr', 'steadysearch\.com' : 'steadysearch', 'googlee\.' : 'google', 'stumbleupon\.com' : 'stumbleupon', 'search\.genieo\.com' : 'genieo', '(^|\.)go\.com' : 'go', '\.3721\.com' : '3721', 'engine\.exe' : 'engine', 'search\..*\.\w+' : 'search', 'bungeebonesdotcom' : 'bungeebonesdotcom', 'chello\.no' : 'chellono', 'claro-search\.com' : 'clarosearch', 'int\.search-results\.com' : 'nortonsavesearch', 'googlecom\.com' : 'google', 'ya(ndex)?\.ru' : 'yandex', 'anzwers\.com\.au' : 'anzwers', 'heureka\.hu' : 'heureka', 'ukdirectory\.' : 'ukdirectory', 'chello\.be' : 'chellobe', 'mywebsearch\.com' : 'mywebsearch', 'ledix\.net' : 'ledix', 'rechercher\.libertysurf\.fr' : 'libertysurf', 'start\.shaw\.ca' : 'shawca', 'katalog\.onet\.pl' : 'katalogonetpl', 'infoseek\.de' : 'infoseek', '66\.102\.[1-9]\.104' : 'google_cache', 'wwweasel\.de' : 'wwweasel', 'index\.hu' : 'indexhu', '4\-counter\.com' : 'google4counter', 'szukacz\.pl' : 'szukaczpl', 'blingo\.com' : 'blingo', 'ofir\.dk' : 'ofir', 'questionanswering\.com' : 'questionanswering', 'chello\.fr' : 'chellofr', 'mysearch\.' : 'mysearch', 'a9\.com' : 'a9', 'de\.aolsearch\.com' : 'aolsearch', 'centraldatabase\.org' : 'centraldatabase', 'yahoo\.' : 'yahoo', 'aport\.ru' : 'aport', 'chello\.nl' : 'chellonl', 'goodsearch\.com' : 'goodsearch', 'copernic\.com' : 'copernic', '\.accoona\.com' : 'accoona', 'szukaj\.onet\.pl' : 'onetpl', '216\.239\.(35|37|39|51)\.100' : 'google_cache', 'sagool\.jp' : 'sagool', 'sify\.com' : 'sify', 'mirago\.ch' : 'miragoch', 'icq\.com\/search' : 'icq', 'schoenerbrausen\.de' : 'schoenerbrausen', 'supereva\.com' : 'supereva', 'tiscali\.' : 'tiscali', 'francite\.' : 'francite', 'images\.google\.' : 'google_image', '(^|\.)ask\.com' : 'ask', 'netsprint\.pl\/hoga\-search' : 'hogapl', 'zoznam\.sk' : 'zoznam', 'goggle\.co\.hu' : 'google', 'i-une\.com' : 'iune', 'isearch\.avg\.com' : 'avgsearch', 'search\.fbdownloader\.com' : 'fbdownloader', 'alexa\.com' : 'alexa', '\.sogou\.com' : 'sogou', 'ecosia\.org' : 'ecosiasearch', 'o2suche\.aol\.de' : 'o2aolde', 'mindset\.research\.yahoo' : 'yahoo_mindset', 'atlas\.cz' : 'atlas', 'mirago\.nl' : 'miragonl', '66\.249\.93\.104' : 'google_cache', '(?:www[12]?|mixidj)\.delta-search\.com' : 'delta-search', 'alltheweb\.com' : 'alltheweb', 'seznam\.cz' : 'seznam', 'netscape\.' : 'netscape', 'keresolap\.hu' : 'keresolap_hu', 'mamma\.' : 'mamma', 'jyxo\.(cz|com)' : 'jyxo', 'suche\.aol\.de' : 'aolsuche', 'search\.babylon\.com' : 'babylon', 'www1\.search-results\.com' : 'searchresults', 'search\.ch' : 'searchch', 'google\.[\w.]+/products' : 'google_products', 'bing\.' : 'bing', '212\.227\.33\.241' : 'metaspinner', 'mirago\.dk' : 'miragodk', '(^|\.)ask\.co\.uk' : 'askuk', 'nl\.ask.\com' : 'asknl', 'chello\.sk' : 'chellosk', 'teecno\.it' : 'teecnoit', 'eniro\.se' : 'enirose', 'base\.google\.' : 'google_base', 'webmania\.hu' : 'webmania', 'biglotron\.com' : 'biglotron', 'lycos\.' : 'lycos', '[a-z]serv\.rrzn\.uni-hannover\.de' : 'meta', 'hotbot\.' : 'hotbot', 'gery\.pl' : 'gerypl', 'www\.search\.com' : 'search.com', 'mirago\.be' : 'miragobe', '1klik\.dk' : '1klik', 'spotjockey\.' : 'spotjockey', 'bbc\.co\.uk/cgi-bin/search' : 'bbc', 'att\.net' : 'att', 'atomz\.' : 'atomz', 'euroseek\.' : 'euroseek', 'interia\.pl' : 'interiapl', 'search[\w\-]+\.free\.fr' : 'free', 'polymeta\.hu' : 'polymeta_hu', '\.vnet\.cn' : 'vnet', 'wow\.pl' : 'wowpl', '\.lbb\.org' : 'lbb', 'search\.aol\.co' : 'aol', 'fireball\.de' : 'fireball', '216\.239\.(35|37|39|51)\.101' : 'google_cache', '(66\.218\.71\.225|216\.109\.117\.135|216\.109\.125\.130|66\.218\.69\.11)' : 'yahoo', 'search\.sli\.sympatico\.ca' : 'sympatico', 'del\.icio\.us' : 'delicious', 'voila\.' : 'voila', 'goliat\.hu' : 'goliat', 'google\.' : 'google', 'wahoo\.hu' : 'wahoo', 'www\.holasearch\.com' : 'holasearch', 'mozbot\.fr' : 'mozbot', 'mirago\.it' : 'miragoit', 'chello\.at' : 'chelloat', '(brisbane|suche)\.t-online\.de' : 't-online', 'iask\.com' : 'iask', 'icerocket\.com' : 'icerocket', 'nbci\.com\/search' : 'nbci', 'search\.conduit\.com' : 'conduit', 'sucheaol\.aol\.de' : 'aolde', 'search\.terra\.' : 'terra', 'haku\.www\.fi' : 'haku', 'suchen\.abacho\.de' : 'abacho', 'ixquick\.com' : 'ixquick', 'danielsen\.com' : 'danielsen', 'northernlight\.' : 'northernlight', 'kataweb\.it' : 'kataweb', 'steady-search\.com' : 'steadysearch', 'netluchs\.de' : 'netluchs', 'najdi\.to' : 'najdi', 'live\.com' : 'live', 'spray\.' : 'spray', 'no\.mirago\.com' : 'miragono', 'shinyseek\.it' : 'shinyseek\.it', 'fr\.ask.\com' : 'askfr', 'virgilio\.it' : 'virgilio', 'scroogle\.org' : 'scroogle', 'ineffabile\.it' : 'ineffabile', 'orbis\.dk' : 'orbis', 'splut\.' : 'splut', 'ukindex\.co\.uk' : 'ukindex', 'findarticles\.com' : 'findarticles', 'looksmart\.co\.uk' : 'looksmartuk', 'metabot\.ru' : 'metabot', 'ctrouve\.' : 'ctrouve', 'allesklar\.de' : 'allesklar', 'search\.alice\.it' : 'aliceit', 'vindex\.' : 'vindex', 'groups\.google\.' : 'google_groups', 'suche\d?\.web\.de' : 'webde', 'quick\.cz' : 'quick', 'infospace\.com' : 'infospace', 'dmoz\.org' : 'dmoz', 'www\.benefind\.de' : 'benefind', '216\.239\.5[0-9]\.104' : 'google_cache', 'arianna\.libero\.it' : 'arianna', 'www\.searchmobileonline\.com' : 'searchmobileonline', 'mirago\.co\.uk' : 'miragocouk', 'froogle\.google\.' : 'google_froogle', 'it\.ask.\com' : 'askit', 'go2net\.com' : 'go2net', 'suche\.gmx\.net' : 'gmxsuche', 'turtle\.ru' : 'turtle', 'uk\.ask.\com' : 'askuk', 'overture\.com' : 'overture', 'chello\.se' : 'chellose', 'gotuneed\.com' : 'gotuneed', 'wisenut\.com' : 'wisenut', 'chello\.pl' : 'chellopl', 'tyfon\.dk' : 'tyfon', 'mirago\.fr' : 'miragofr', 'windowssearch\.com' : 'Windows Search', 'searches\.omiga-plus\.com' : 'Omiga-plus', 'qwant\.com' : 'Qwant', 'wow\.com' : 'WOW', 'lemoteur\.orange\.fr' : 'Orange', 'buenosearch\.com' : 'Bueno Search', 'jwss\.cc' : 'jws'} -search_engines_knwown_url = {'mysearch' : 'searchfor=', 'webde' : 'su=', 'chellose' : 'q1=', 'teecnoit' : 'q=', 'chellopl' : 'q1=', 'engine' : 'p1=', 'abacho' : 'q=', 'toile' : 'q=', 'internetto' : 'searchstr=', 'searchalot' : 'q=', 'teoma' : 'q=', 'rambler' : 'words=', 'att' : 'qry=', 'questionanswering' : '', 'netsprintpl' : 'q=', 'clarosearch' : 'q=', 'yahoo_mindset' : 'p=', 'interiapl' : 'q=', 'chellonl' : 'q1=', 'iask' : '(w|k)=', 'freeserve' : 'q=', 'swik' : 'swik\.net/', 'avgsearch' : 'q=', 'start' : 'q=', 'yahoo' : 'p=', 'netease' : 'q=', 'mirago' : '(txtsearch|qry)=', 'eniro' : 'q=', 'excite' : 'search=', 'searchch' : 'q=', 'findarticles' : 'key=', 'icerocket' : 'q=', 'a9' : 'a9\.com\/', 'miragose' : '(txtsearch|qry)=', 'miragoes' : '(txtsearch|qry)=', 'live' : 'q=', 'miragoit' : '(txtsearch|qry)=', 'enirose' : 'q=', 'fbdownloader' : 'q=', 'katalogonetpl' : 'qt=', 'voila' : '(kw|rdata)=', 'ixquick' : 'query=', 'iminent' : 'q=', 'passagen' : 'q=', 'copernic' : 'web\/', 'startxxl' : 'q=', 'google4counter' : '(p|q|as_p|as_q)=', 'vivisimo' : 'query=', 'wisenut' : 'query=', 'delta-search' : 'q=', 'quick' : 'query=', 'miragobe' : '(txtsearch|qry)=', 'baidu' : '(wd|word)=', 'tango_hu' : 'q=', 'supereva' : 'q=', 'jumpy\.it' : 'searchWord=', 'benefind' : 'q=', 'arianna' : 'query=', 'miragode' : '(txtsearch|qry)=', 'earthlink' : 'q=', 'finddk' : 'words=', 'search.com' : 'q=', 'seznam' : '(w|q)=', 'nusearch' : 'nusearch_terms=', 'ukdirectory' : 'k=', 'chellono' : 'q1=', 'ineffabile' : '', 'looksmart' : 'key=', 'metaspinner' : 'qry=', 'hotbot' : 'mt=', 'mywebsearch' : 'searchfor=', 'polymeta_hu' : '', 'steadysearch' : 'w=', 'sagool' : 'q=', 'francite' : 'name=', 'accoona' : 'qt=', 'nbci' : 'keyword=', 'soso' : 'q=', 'euroseek' : 'query=', 'iune' : '(keywords|q)=', 'spray' : 'string=', 'comettoolbar' : 'qry=', 'edderkoppen' : 'query=', 'gotuneed' : '', 'chellocz' : 'q1=', 'vnet' : 'kw=', 'kartoo' : '', 'askfr' : '(ask|q)=', 'chellohu' : 'q1=', 'metabot' : 'st=', 'lycos' : 'query=', 'bbc' : 'q=', 'shawca' : 'q=', 'jyxo' : '(s|q)=', 'netscape' : 'search=', 'godado' : 'Keywords=', 'wowpl' : 'q=', 'clubinternet' : 'q=', 'najdi' : 'dotaz=', 'bungeebonesdotcom' : 'query=', 'ecosiasearch' : 'q=', 'redbox' : 'srch=', 'ukplus' : 'search=', 'polskapl' : 'qt=', 'aol' : 'query=', 'origo' : '(q|search)=', 'yandex' : 'text=', 't-online' : 'q=', 'miragodk' : '(txtsearch|qry)=', '1klik' : 'query=', 'chellobe' : 'q1=', 'askes' : '(ask|q)=', 'go2net' : 'general=', 'atomz' : 'sp-q=', 'stumbleupon' : '', 'answerbus' : '', 'miragofr' : '(txtsearch|qry)=', 'miragoch' : '(txtsearch|qry)=', 'google_base' : '(p|q|as_p|as_q)=', 'sify' : 'keyword=', '3721' : '(p|name)=', 'zhongsou' : '(word|w)=', 'gerypl' : 'q=', 'delicious' : 'all=', 'opasia' : 'q=', 'go' : 'qt=', 'segnalo' : '', 'askde' : '(ask|q)=', 'asknl' : '(ask|q)=', 'netluchs' : 'query=', 'flipora' : 'q=', 'haku' : 'w=', 'aolsearch' : 'q=', 'onetpl' : 'qt=', 'holasearch' : 'q=', 'schoenerbrausen' : 'q=', 'chellofr' : 'q1=', 'google_froogle' : '(p|q|as_p|as_q)=', 'miragocouk' : '(txtsearch|qry)=', 'dodajpl' : 'keyword=', 'aport' : 'r=', 'kataweb' : 'q=', 'anzwers' : 'search=', 'centraldatabase' : 'query=', 'szukaczpl' : 'q=', 'northernlight' : 'qr=', 'alltheweb' : 'q(|uery)=', 'infoseek' : 'qt=', 'msn' : 'q=', 'digg' : 's=', 'virgilio' : 'qs=', 'google_products' : '(p|q|as_p|as_q)=', 'danielsen' : 'q=', 'miner' : 'q=', 'ofir' : 'querytext=', 'sympatico' : 'query=', 'searchmobileonline' : 'q=', 'metacrawler' : 'general=', 'sol' : 'q=', 'altavista' : 'q=', 'miragono' : '(txtsearch|qry)=', 'sphere' : 'q=', 'looksmartuk' : 'key=', 'aolsuche' : 'q=', 'fireball' : 'q=', 'askjp' : '(ask|q)=', 'nortonsavesearch' : 'q=', 'genieo' : 'q=', 'dmoz' : 'search=', 'searchy' : 'search_term=', 'chellocom' : 'q1=', 'infospace' : 'qkw=', 'centrum' : 'q=', 'alexa' : 'q=', 'goodsearch' : 'Keywords=', 'ukindex' : 'stext=', 'conduit' : 'q=', 'wwweasel' : 'q=', 'dogpile' : 'q(|kw)=', 'overture' : 'keywords=', 'google_image' : '(p|q|as_p|as_q)=', 'google' : '(p|q|as_p|as_q)=', 'o2aolde' : 'q=', 'keresolap_hu' : 'q=', 'icq' : 'q=', 'spotjockey' : 'Search_Keyword=', 'bing' : 'q=', 'shinyseek\.it' : 'KEY=', 'orbis' : 'search_field=', 'goliat' : 'KERESES=', 'ilse' : 'search_for=', 'google_groups' : 'group\/', 'chelloat' : 'q1=', 'metacrawler_de' : 'qry=', 'searchresults' : 'q=', 'askit' : '(ask|q)=', 'miragonl' : '(txtsearch|qry)=', 'scroogle' : 'Gw=', 'terra' : 'query=', 'jubii' : 'soegeord=', 'wp' : 'szukaj=', 'chellosk' : 'q1=', 'babylon' : 'q=', 'vindex' : 'in=', 'aolde' : 'q=', 'sogou' : 'query=', 'aliceit' : 'qs=', 'kvasir' : 'q=', 'aliceitmaster' : 'qs=', 'o2pl' : 'qt=', 'biglotron' : 'question=', 'blingo' : 'q=', 'avantfind' : 'keywords=', 'mozbot' : 'q=', 'splut' : 'pattern=', 'atlas' : '(searchtext|q)=', 'google_cache' : '(p|q|as_p|as_q)=cache:[0-9A-Za-z]{12}:', 'ledix' : 'q=', 'bluewin' : 'qry=', 'clusty' : 'query=', 'pogodak' : 'q=', 'webcrawler' : 'searchText=', 'hogapl' : 'qt=', 'wahoo' : 'q=', 'gmxsuche' : 'q=', 'ask' : '(ask|q)=', 'gazetapl' : 'slowo=', 'heureka' : 'heureka=', 'tiscali' : 'key=', 'askuk' : '(ask|q)=', 'mamma' : 'query='} +search_engines_knwown_url = {'segnalo' : '', 'comettoolbar' : 'qry=', 'chellofr' : 'q1=', 'yandex' : 'text=', 'google_products' : '(p|q|as_p|as_q)=', 'genieo' : 'q=', 'searchy' : 'search_term=', 'goodsearch' : 'Keywords=', 'chellocz' : 'q1=', 'tango_hu' : 'q=', 'msn' : 'q=', 'nortonsavesearch' : 'q=', 'o2aolde' : 'q=', 'miragocouk' : '(txtsearch|qry)=', 'google_image' : '(p|q|as_p|as_q)=', 'questionanswering' : '', 'conduit' : 'q=', 'start' : 'q=', 'miner' : 'q=', 'haku' : 'w=', 'ecosiasearch' : 'q=', 'kataweb' : 'q=', 'ukindex' : 'stext=', 'rambler' : 'words=', 'pogodak' : 'q=', 'toile' : 'q=', 'jubii' : 'soegeord=', 'spotjockey' : 'Search_Keyword=', 'gmxsuche' : 'q=', 'ledix' : 'q=', 'steadysearch' : 'w=', 'miragofr' : '(txtsearch|qry)=', 'askjp' : '(ask|q)=', 'teecnoit' : 'q=', 'anzwers' : 'search=', 'ixquick' : 'query=', 'metaspinner' : 'qry=', 'dmoz' : 'search=', 'sphere' : 'q=', 'ukdirectory' : 'k=', 'miragonl' : '(txtsearch|qry)=', 'francite' : 'name=', 'bbc' : 'q=', 'goliat' : 'KERESES=', 'terra' : 'query=', 'sympatico' : 'query=', 'aport' : 'r=', 'vnet' : 'kw=', 'jumpy\.it' : 'searchWord=', 'miragoes' : '(txtsearch|qry)=', 'netease' : 'q=', 'origo' : '(q|search)=', 'northernlight' : 'qr=', 'ofir' : 'querytext=', 'delta-search' : 'q=', 'bungeebonesdotcom' : 'query=', 'digg' : 's=', 'holasearch' : 'q=', 'finddk' : 'words=', 'ilse' : 'search_for=', 'orbis' : 'search_field=', 'clubinternet' : 'q=', 'live' : 'q=', 'yahoo_mindset' : 'p=', 'tiscali' : 'key=', 'hogapl' : 'qt=', 'seznam' : '(w|q)=', 'katalogonetpl' : 'qt=', 'teoma' : 'q=', 'chellonl' : 'q1=', 'virgilio' : 'qs=', 'freeserve' : 'q=', 'sify' : 'keyword=', 'gazetapl' : 'slowo=', 'voila' : '(kw|rdata)=', 'alexa' : 'q=', 'searchresults' : 'q=', 'mozbot' : 'q=', 'blingo' : 'q=', 'nbci' : 'keyword=', 'chellohu' : 'q1=', 'ineffabile' : '', '1klik' : 'query=', 'webcrawler' : 'searchText=', 'yahoo' : 'p=', 'atlas' : '(searchtext|q)=', 'onetpl' : 'qt=', 'miragodk' : '(txtsearch|qry)=', 'altavista' : 'q=', 'godado' : 'Keywords=', 'bluewin' : 'qry=', 'a9' : 'a9\.com\/', 'earthlink' : 'q=', 'dodajpl' : 'keyword=', 'copernic' : 'web\/', 'delicious' : 'all=', 'aliceitmaster' : 'qs=', 'splut' : 'pattern=', 'excite' : 'search=', 'avgsearch' : 'q=', 'danielsen' : 'q=', 'edderkoppen' : 'query=', 'go' : 'qt=', 'aolsearch' : 'q=', 'schoenerbrausen' : 'q=', 'stumbleupon' : '', 'askit' : '(ask|q)=', 'kartoo' : '', 'wowpl' : 'q=', 'mirago' : '(txtsearch|qry)=', 'netsprintpl' : 'q=', 'vivisimo' : 'query=', 'benefind' : 'q=', 'polymeta_hu' : '', 'engine' : 'p1=', 'searchch' : 'q=', 'looksmart' : 'key=', 'metabot' : 'st=', 'quick' : 'query=', 'google' : '(p|q|as_p|as_q)=', 'kvasir' : 'q=', 'netscape' : 'search=', 'fireball' : 'q=', 'clarosearch' : 'q=', 'search.com' : 'q=', 'infospace' : 'qkw=', 'eniro' : 'q=', 'biglotron' : 'question=', 'aolsuche' : 'q=', 'miragoit' : '(txtsearch|qry)=', 'google_groups' : 'group\/', 'avantfind' : 'keywords=', 'passagen' : 'q=', 'aliceit' : 'qs=', 'redbox' : 'srch=', 'ukplus' : 'search=', 'supereva' : 'q=', 'vindex' : 'in=', 'internetto' : 'searchstr=', 'centrum' : 'q=', 'iask' : '(w|k)=', 'atomz' : 'sp-q=', 'chellocom' : 'q1=', 'lycos' : 'query=', 'metacrawler' : 'general=', 'polskapl' : 'qt=', 'abacho' : 'q=', 'shinyseek\.it' : 'KEY=', 'aol' : 'query=', 'wisenut' : 'query=', 'clusty' : 'query=', 'wwweasel' : 'q=', '3721' : '(p|name)=', 'sagool' : 'q=', 'sogou' : 'query=', 'swik' : 'swik\.net/', 'jyxo' : '(s|q)=', 'google_froogle' : '(p|q|as_p|as_q)=', 'findarticles' : 'key=', 'miragode' : '(txtsearch|qry)=', 'najdi' : 'dotaz=', 'google_base' : '(p|q|as_p|as_q)=', 'enirose' : 'q=', 'miragose' : '(txtsearch|qry)=', 'interiapl' : 'q=', 'iminent' : 'q=', 't-online' : 'q=', 'chellosk' : 'q1=', 'bing' : 'q=', 'webde' : 'su=', 'flipora' : 'q=', 'alltheweb' : 'q(|uery)=', 'mywebsearch' : 'searchfor=', 'overture' : 'keywords=', 'centraldatabase' : 'query=', 'icerocket' : 'q=', 'askuk' : '(ask|q)=', 'google_cache' : '(p|q|as_p|as_q)=cache:[0-9A-Za-z]{12}:', 'soso' : 'q=', 'mysearch' : 'searchfor=', 'scroogle' : 'Gw=', 'ask' : '(ask|q)=', 'metacrawler_de' : 'qry=', 'spray' : 'string=', 'iune' : '(keywords|q)=', 'searchalot' : 'q=', 'wp' : 'szukaj=', 'gotuneed' : '', 'babylon' : 'q=', 'euroseek' : 'query=', 'shawca' : 'q=', 'hotbot' : 'mt=', 'askfr' : '(ask|q)=', 'att' : 'qry=', 'miragono' : '(txtsearch|qry)=', 'nusearch' : 'nusearch_terms=', 'chelloat' : 'q1=', 'netluchs' : 'query=', 'fbdownloader' : 'q=', 'wahoo' : 'q=', 'chellono' : 'q1=', 'keresolap_hu' : 'q=', 'gerypl' : 'q=', 'baidu' : '(wd|word)=', 'szukaczpl' : 'q=', 'miragoch' : '(txtsearch|qry)=', 'arianna' : 'query=', 'asknl' : '(ask|q)=', 'heureka' : 'heureka=', 'opasia' : 'q=', 'icq' : 'q=', 'chellobe' : 'q1=', 'aolde' : 'q=', 'answerbus' : '', 'askde' : '(ask|q)=', 'looksmartuk' : 'key=', 'google4counter' : '(p|q|as_p|as_q)=', 'miragobe' : '(txtsearch|qry)=', 'startxxl' : 'q=', 'o2pl' : 'qt=', 'zhongsou' : '(word|w)=', 'searchmobileonline' : 'q=', 'mamma' : 'query=', 'go2net' : 'general=', 'sol' : 'q=', 'askes' : '(ask|q)=', 'chellose' : 'q1=', 'dogpile' : 'q(|kw)=', 'chellopl' : 'q1=', 'accoona' : 'qt=', 'infoseek' : 'qt=', 'Omiga-plus' : 'q=', 'Qwant' : 'q=', 'Windows Search' : 'q=', 'Bueno Search' : 'q=', 'Orange' : 'kw=', 'jws' : 'q=', 'WOW' : 'q='} operating_systems = ['windows[_+ ]?2005', 'windows[_+ ]nt[_+ ]6\.0', 'windows[_+ ]?2008', 'windows[_+ ]nt[_+ ]6\.1', 'windows[_+ ]?2012', 'windows[_+ ]nt[_+ ]6\.2', 'windows[_+ ]?vista', 'windows[_+ ]nt[_+ ]6', 'windows[_+ ]?2003', 'windows[_+ ]nt[_+ ]5\.2', 'windows[_+ ]xp', 'windows[_+ ]nt[_+ ]5\.1', 'windows[_+ ]me', 'win[_+ ]9x', 'windows[_+ ]?2000', 'windows[_+ ]nt[_+ ]5', 'winnt', 'windows[_+ \-]?nt', 'win32', 'win(.*)98', 'win(.*)95', 'win(.*)16', 'windows[_+ ]3', 'win(.*)ce', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]9', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]8', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]7', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]6', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]5', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]4', 'mac[_+ ]os[_+ ]x', 'mac[_+ ]?p', 'mac[_+ ]68', 'macweb', 'macintosh', 'linux(.*)android', 'linux(.*)asplinux', 'linux(.*)centos', 'linux(.*)debian', 'linux(.*)fedora', 'linux(.*)gentoo', 'linux(.*)mandr', 'linux(.*)momonga', 'linux(.*)pclinuxos', 'linux(.*)red[_+ ]hat', 'linux(.*)suse', 'linux(.*)ubuntu', 'linux(.*)vector', 'linux(.*)vine', 'linux(.*)white\sbox', 'linux(.*)zenwalk', 'linux', 'gnu.hurd', 'bsdi', 'gnu.kfreebsd', 'freebsd', 'openbsd', 'netbsd', 'dragonfly', 'aix', 'sunos', 'irix', 'osf', 'hp\-ux', 'unix', 'x11', 'gnome\-vfs', 'beos', 'os/2', 'amiga', 'atari', 'vms', 'commodore', 'qnx', 'inferno', 'palmos', 'syllable', 'blackberry', 'cp/m', 'crayos', 'dreamcast', 'iphone[_+ ]os', 'risc[_+ ]?os', 'symbian', 'webtv', 'playstation', 'xbox', 'wii', 'vienna', 'newsfire', 'applesyndication', 'akregator', 'plagger', 'syndirella', 'j2me', 'java', 'microsoft', 'msie[_+ ]', 'ms[_+ ]frontpage', 'windows'] -operating_systems_hashid = {'msie[_+ ]' : 'winunknown', 'gnu.hurd' : 'gnu', 'osf' : 'osf', 'windows[_+ ]?vista' : 'winvista', 'unix' : 'unix', 'windows[_+ ]3' : 'win16', 'windows[_+ ]nt[_+ ]5' : 'win2000', 'windows[_+ \-]?nt' : 'winnt', 'iphone[_+ ]os' : 'ios', 'linux(.*)vine' : 'linuxvine', 'vms' : 'vms', 'wii' : 'wii', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]7' : 'macosx7', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]6' : 'macosx6', 'ms[_+ ]frontpage' : 'winunknown', 'netbsd' : 'bsdnetbsd', 'linux(.*)fedora' : 'linuxfedora', 'playstation' : 'psp', 'dreamcast' : 'dreamcast', 'linux(.*)ubuntu' : 'linuxubuntu', 'win(.*)16' : 'win16', 'windows[_+ ]nt[_+ ]6\.1' : 'win7', 'linux(.*)red[_+ ]hat' : 'linuxredhat', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]8' : 'macosx8', 'beos' : 'beos', 'dragonflybsd' : 'bsddflybsd', 'linux(.*)zenwalk' : 'linuxzenwalk', 'symbian' : 'symbian', 'gnome\-vfs' : 'unix', 'windows[_+ ]nt[_+ ]5\.1' : 'winxp', 'windows[_+ ]nt[_+ ]6' : 'winvista', 'linux(.*)android' : 'linuxandroid', 'hp\-ux' : 'hp\-ux', 'irix' : 'irix', 'windows[_+ ]?2005' : 'winlong', 'webtv' : 'webtv', 'windows[_+ ]?2000' : 'win2000', 'windows[_+ ]nt[_+ ]6\.0' : 'winlong', 'win(.*)ce' : 'wince', 'macweb' : 'macintosh', 'linux(.*)white\sbox' : 'linuxwhitebox', 'atari' : 'atari', 'windows[_+ ]nt[_+ ]5\.2' : 'win2003', 'xbox' : 'winxbox', 'linux(.*)asplinux' : 'linuxasplinux', 'win(.*)95' : 'win95', 'bsdi' : 'bsdi', 'windows[_+ ]?2003' : 'win2003', 'crayos' : 'crayos', 'aix' : 'aix', 'win[_+ ]9x' : 'winme', 'windows[_+ ]?2008' : 'win2008', 'syllable' : 'syllable', 'vienna' : 'macosx', 'commodore' : 'commodore', 'winnt' : 'winnt', 'plagger' : 'unix', 'linux' : 'linux', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]5' : 'macosx5', 'newsfire' : 'macosx', 'linux(.*)vector' : 'linuxvector', 'mac[_+ ]68' : 'macintosh', 'mac[_+ ]?p' : 'macintosh', 'risc[_+ ]?os' : 'riscos', 'macintosh' : 'macintosh', 'windows[_+ ]?2012' : 'win2012', 'linux(.*)pclinuxos' : 'linuxpclinuxos', 'akregator' : 'linux', 'linux(.*)debian' : 'linuxdebian', 'sunos' : 'sunos', 'java' : 'java', 'syndirella' : 'winxp', 'linux(.*)suse' : 'linuxsuse', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]9' : 'macosx9', 'microsoft' : 'winunknown', 'win(.*)98' : 'win98', 'x11' : 'unix', 'windows[_+ ]me' : 'winme', 'linux(.*)mandr' : 'linuxmandr', 'qnx' : 'qnx', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]4' : 'macosx4', 'linux(.*)momonga' : 'linuxmomonga', 'cp/m' : 'cp/m', 'win32' : 'winnt', 'blackberry' : 'blackberry', 'applesyndication' : 'macosx', 'os/2' : 'os/2', 'windows[_+ ]xp' : 'winxp', 'mac[_+ ]os[_+ ]x' : 'macosx', 'linux(.*)gentoo' : 'linuxgentoo', 'inferno' : 'inferno', 'j2me' : 'j2me', 'gnu.kfreebsd' : 'bsdkfreebsd', 'windows[_+ ]nt[_+ ]6\.2' : 'win8', 'amiga' : 'amigaos', 'openbsd' : 'bsdopenbsd', 'windows' : 'winunknown', 'palmos' : 'palmos', 'freebsd' : 'bsdfreebsd', 'linux(.*)centos' : 'linuxcentos'} +operating_systems_hashid = {'bsdi' : 'bsdi', 'x11' : 'unix', 'windows[_+ ]nt[_+ ]6' : 'winvista', 'linux' : 'linux', 'linux(.*)zenwalk' : 'linuxzenwalk', 'windows[_+ \-]?nt' : 'winnt', 'macweb' : 'macintosh', 'linux(.*)centos' : 'linuxcentos', 'windows[_+ ]nt[_+ ]6\.0' : 'winlong', 'mac[_+ ]?p' : 'macintosh', 'msie[_+ ]' : 'winunknown', 'win(.*)95' : 'win95', 'os/2' : 'os/2', 'linux(.*)momonga' : 'linuxmomonga', 'linux(.*)red[_+ ]hat' : 'linuxredhat', 'commodore' : 'commodore', 'winnt' : 'winnt', 'dreamcast' : 'dreamcast', 'windows[_+ ]nt[_+ ]6\.1' : 'win7', 'ms[_+ ]frontpage' : 'winunknown', 'win(.*)16' : 'win16', 'syndirella' : 'winxp', 'macintosh' : 'macintosh', 'win(.*)98' : 'win98', 'osf' : 'osf', 'webtv' : 'webtv', 'linux(.*)asplinux' : 'linuxasplinux', 'linux(.*)suse' : 'linuxsuse', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]9' : 'macosx9', 'linux(.*)ubuntu' : 'linuxubuntu', 'plagger' : 'unix', 'crayos' : 'crayos', 'wii' : 'wii', 'iphone[_+ ]os' : 'ios', 'gnu.kfreebsd' : 'bsdkfreebsd', 'windows[_+ ]xp' : 'winxp', 'linux(.*)mandr' : 'linuxmandr', 'windows[_+ ]?2000' : 'win2000', 'windows[_+ ]nt[_+ ]5' : 'win2000', 'linux(.*)pclinuxos' : 'linuxpclinuxos', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]4' : 'macosx4', 'linux(.*)vector' : 'linuxvector', 'aix' : 'aix', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]8' : 'macosx8', 'xbox' : 'winxbox', 'linux(.*)vine' : 'linuxvine', 'windows[_+ ]me' : 'winme', 'gnu.hurd' : 'gnu', 'linux(.*)gentoo' : 'linuxgentoo', 'j2me' : 'j2me', 'windows[_+ ]?vista' : 'winvista', 'windows' : 'winunknown', 'linux(.*)fedora' : 'linuxfedora', 'gnome\-vfs' : 'unix', 'linux(.*)debian' : 'linuxdebian', 'windows[_+ ]nt[_+ ]5\.1' : 'winxp', 'windows[_+ ]?2005' : 'winlong', 'syllable' : 'syllable', 'windows[_+ ]nt[_+ ]6\.2' : 'win8', 'windows[_+ ]nt[_+ ]5\.2' : 'win2003', 'playstation' : 'psp', 'mac[_+ ]68' : 'macintosh', 'java' : 'java', 'windows[_+ ]?2012' : 'win2012', 'linux(.*)white\sbox' : 'linuxwhitebox', 'inferno' : 'inferno', 'vms' : 'vms', 'palmos' : 'palmos', 'qnx' : 'qnx', 'atari' : 'atari', 'windows[_+ ]?2008' : 'win2008', 'cp/m' : 'cp/m', 'win[_+ ]9x' : 'winme', 'risc[_+ ]?os' : 'riscos', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]7' : 'macosx7', 'windows[_+ ]?2003' : 'win2003', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]5' : 'macosx5', 'win(.*)ce' : 'wince', 'akregator' : 'linux', 'hp\-ux' : 'hp\-ux', 'dragonflybsd' : 'bsddflybsd', 'newsfire' : 'macosx', 'microsoft' : 'winunknown', 'netbsd' : 'bsdnetbsd', 'irix' : 'irix', 'mac[_+ ]os[_+ ]x' : 'macosx', 'beos' : 'beos', 'applesyndication' : 'macosx', 'mac[_+ ]os[_+ ]x[_+ ]10[_\.]6' : 'macosx6', 'win32' : 'winnt', 'linux(.*)android' : 'linuxandroid', 'sunos' : 'sunos', 'symbian' : 'symbian', 'vienna' : 'macosx', 'openbsd' : 'bsdopenbsd', 'windows[_+ ]3' : 'win16', 'blackberry' : 'blackberry', 'unix' : 'unix', 'amiga' : 'amigaos', 'freebsd' : 'bsdfreebsd'} -operating_systems_family = {'mac' : 'Macintosh', 'linux' : 'Linux', 'win' : 'Windows', 'bsd' : 'BSD'} +operating_systems_family = {'mac' : 'Macintosh', 'bsd' : 'BSD', 'win' : 'Windows', 'linux' : 'Linux'} browsers = ['elinks', 'firebird', 'go!zilla', 'icab', 'links', 'lynx', 'omniweb', '22acidownload', 'abrowse', 'aol\-iweng', 'amaya', 'amigavoyager', 'arora', 'aweb', 'charon', 'donzilla', 'seamonkey', 'flock', 'minefield', 'bonecho', 'granparadiso', 'songbird', 'strata', 'sylera', 'kazehakase', 'prism', 'icecat', 'iceape', 'iceweasel', 'w3clinemode', 'bpftp', 'camino', 'chimera', 'cyberdog', 'dillo', 'xchaos_arachne', 'doris', 'dreamcast', 'xbox', 'downloadagent', 'ecatch', 'emailsiphon', 'encompass', 'epiphany', 'friendlyspider', 'fresco', 'galeon', 'flashget', 'freshdownload', 'getright', 'leechget', 'netants', 'headdump', 'hotjava', 'ibrowse', 'intergo', 'k\-meleon', 'k\-ninja', 'linemodebrowser', 'lotus\-notes', 'macweb', 'multizilla', 'ncsa_mosaic', 'netcaptor', 'netpositive', 'nutscrape', 'msfrontpageexpress', 'contiki', 'emacs\-w3', 'phoenix', 'shiira', 'tzgeturl', 'viking', 'webfetcher', 'webexplorer', 'webmirror', 'webvcr', 'qnx\svoyager', 'cloudflare', 'grabber', 'teleport', 'webcapture', 'webcopier', 'real', 'winamp', 'windows\-media\-player', 'audion', 'freeamp', 'itunes', 'jetaudio', 'mint_audio', 'mpg123', 'mplayer', 'nsplayer', 'qts', 'quicktime', 'sonique', 'uplayer', 'xaudio', 'xine', 'xmms', 'gstreamer', 'abilon', 'aggrevator', 'aiderss', 'akregator', 'applesyndication', 'betanews_reader', 'blogbridge', 'cyndicate', 'feeddemon', 'feedreader', 'feedtools', 'greatnews', 'gregarius', 'hatena_rss', 'jetbrains_omea', 'liferea', 'netnewswire', 'newsfire', 'newsgator', 'newzcrawler', 'plagger', 'pluck', 'potu', 'pubsub\-rss\-reader', 'pulpfiction', 'rssbandit', 'rssreader', 'rssowl', 'rss\sxpress', 'rssxpress', 'sage', 'sharpreader', 'shrook', 'straw', 'syndirella', 'vienna', 'wizz\srss\snews\sreader', 'alcatel', 'lg\-', 'mot\-', 'nokia', 'panasonic', 'philips', 'sagem', 'samsung', 'sie\-', 'sec\-', 'sonyericsson', 'ericsson', 'mmef', 'mspie', 'vodafone', 'wapalizer', 'wapsilon', 'wap', 'webcollage', 'up\.', 'android', 'blackberry', 'cnf2', 'docomo', 'ipcheck', 'iphone', 'portalmmm', 'webtv', 'democracy', 'cjb\.net', 'ossproxy', 'smallproxy', 'adobeair', 'apt', 'analogx_proxy', 'gnome\-vfs', 'neon', 'curl', 'csscheck', 'httrack', 'fdm', 'javaws', 'wget', 'fget', 'chilkat', 'webdownloader\sfor\sx', 'w3m', 'wdg_validator', 'w3c_validator', 'jigsaw', 'webreaper', 'webzip', 'staroffice', 'gnus', 'nikto', 'download\smaster', 'microsoft\-webdav\-miniredir', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\scache\smanager', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\sdav', 'POE\-Component\-Client\-HTTP', 'mozilla', 'libwww', 'lwp', 'WebSec'] -browsers_hashid = {'nsplayer' : 'NetShow Player (media player)', 'xaudio' : 'Some XAudio Engine based MPEG player (media player)', 'donzilla' : 'Donzilla', 'gnome\-vfs' : 'Gnome FileSystem Abstraction library', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\scache\smanager' : 'Microsoft Data Access Component Internet Publishing Provider Cache Manager', 'rssxpress' : 'RSSXpress (RSS Reader)', 'flock' : 'Flock', 'microsoft\-webdav\-miniredir' : 'Microsoft Data Access Component Internet Publishing Provider', 'contiki' : 'Contiki', 'galeon' : 'Galeon', 'mspie' : 'MS Pocket Internet Explorer (PDA/Phone browser)', 'aiderss' : 'AideRSS (RSS Reader)', 'jigsaw' : 'W3C Validator', 'webexplorer' : 'IBM-WebExplorer', 'blogbridge' : 'BlogBridge (RSS Reader)', 'windows\-media\-player' : 'Windows Media Player (media player)', 'chrome' : 'Google Chrome', 'webtv' : 'WebTV browser', 'iceape' : 'GNU IceApe', 'httrack' : 'HTTrack', 'mint_audio' : 'Mint Audio (media player)', 'flashget' : 'FlashGet', 'ecatch' : 'eCatch', 'newsgator' : 'NewsGator (RSS Reader)', 'analogx_proxy' : 'AnalogX Proxy', 'freeamp' : 'FreeAmp (media player)', 'nokia' : 'Nokia Browser (PDA/Phone browser)', 'macweb' : 'MacWeb', 'alcatel' : 'Alcatel Browser (PDA/Phone browser)', 'icecat' : 'GNU IceCat', 'arora' : 'Arora', 'webcapture' : 'Acrobat Webcapture', 'go!zilla' : 'Go!Zilla', 'liferea' : 'Liferea (RSS Reader)', 'philips' : 'Philips Browser (PDA/Phone browser)', 'pluck' : 'Pluck (RSS Reader)', 'ibrowse' : 'iBrowse', 'xbox' : 'XBoX', 'webcollage' : 'WebCollage (PDA/Phone browser)', 'w3c_validator' : 'W3C Validator', 'real' : 'Real player or compatible (media player)', 'cnf2' : 'Supervision I-Mode ByTel (phone)', 'msie' : 'MS Internet Explorer', 'samsung' : 'Samsung (PDA/Phone browser)', 'links' : 'Links', 'docomo' : 'I-Mode phone (PDA/Phone browser)', 'democracy' : 'Democracy', 'freshdownload' : 'FreshDownload', 'webfetcher' : 'WebFetcher', 'qnx\svoyager' : 'QNX Voyager', 'netscape' : 'Netscape', 'encompass' : 'Encompass', 'sonique' : 'Sonique (media player)', 'cjb\.net' : 'CJB.NET Proxy', 'vienna' : 'Vienna (RSS Reader)', 'firebird' : 'Firebird (Old Firefox)', 'potu' : 'Potu (RSS Reader)', 'javaws' : 'Java Web Start', 'w3m' : 'w3m', 'mmef' : 'Microsoft Mobile Explorer (PDA/Phone browser)', 'ncsa_mosaic' : 'NCSA Mosaic', 'lotus\-notes' : 'Lotus Notes web client', 'iceweasel' : 'Iceweasel', 'amaya' : 'Amaya', 'feedtools' : 'FeedTools (RSS Reader)', 'granparadiso' : 'GranParadiso (Firefox 3.0 development)', 'feeddemon' : 'FeedDemon (RSS Reader)', 'netants' : 'NetAnts', 'xine' : 'Xine, a free multimedia player (media player)', 'gregarius' : 'Gregarius (RSS Reader)', 'hatena_rss' : 'Hatena (RSS Reader)', 'rss\sxpress' : 'RSS Xpress (RSS Reader)', 'straw' : 'Straw (RSS Reader)', 'webreaper' : 'WebReaper', 'sec\-' : 'Sony/Ericsson (PDA/Phone browser)', 'wget' : 'Wget', 'grabber' : 'Grabber', 'gstreamer' : 'GStreamer (media library)', 'aggrevator' : 'Aggrevator (RSS Reader)', 'iphone' : 'IPhone (PDA/Phone browser)', 'aweb' : 'AWeb', 'firefox' : 'Firefox', 'staroffice' : 'StarOffice', 'ossproxy' : 'OSSProxy', 'lg\-' : 'LG (PDA/Phone browser)', 'adobeair' : 'AdobeAir', 'w3clinemode' : 'W3CLineMode', 'gnus' : 'Gnus Network User Services', 'mozilla' : 'Mozilla', 'wizz\srss\snews\sreader' : 'Wizz RSS News Reader (RSS Reader)', 'download\smaster' : 'Download Master', 'vodafone' : 'Vodaphone browser (PDA/Phone browser)', 'dreamcast' : 'Dreamcast', 'getright' : 'GetRight', 'svn' : 'Subversion client', 'camino' : 'Camino', 'msfrontpageexpress' : 'MS FrontPage Express', 'intergo' : 'InterGO', 'rssbandit' : 'RSS Bandit (RSS Reader)', 'portalmmm' : 'I-Mode phone (PDA/Phone browser)', 'WebSec' : 'Web Secretary', 'mplayer' : 'The Movie Player (media player)', 'mpg123' : 'mpg123 (media player)', 'shiira' : 'Shiira', 'quicktime' : 'QuickTime (media player)', 'smallproxy' : 'SmallProxy', 'bpftp' : 'BPFTP', 'webvcr' : 'WebVCR', 'webzip' : 'WebZIP', 'csscheck' : 'WDG CSS Validator', 'netcaptor' : 'NetCaptor', 'doris' : 'Doris (for Symbian)', 'uplayer' : 'Ultra Player (media player)', 'ericsson' : 'Ericsson Browser (PDA/Phone browser)', 'pubsub\-rss\-reader' : 'PubSub (RSS Reader)', 'headdump' : 'HeadDump', 'abilon' : 'Abilon (RSS Reader)', 'opera' : 'Opera', 'neon' : 'Neon HTTP and WebDAV client library', 'sonyericsson' : 'Sony/Ericsson Browser (PDA/Phone browser)', 'sylera' : 'Sylera', 'sie\-' : 'SIE (PDA/Phone browser)', 'webmirror' : 'WebMirror', 'ipcheck' : 'Supervision IP Check (phone)', 'netnewswire' : 'NetNewsWire (RSS Reader)', 'wdg_validator' : 'WDG HTML Validator', 'friendlyspider' : 'FriendlySpider', 'up\.' : 'UP.Browser (PDA/Phone browser)', 'wapalizer' : 'WAPalizer (PDA/Phone browser)', 'amigavoyager' : 'AmigaVoyager', 'safari' : 'Safari', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\sdav' : 'Microsoft Data Access Component Internet Publishing Provider DAV', 'POE\-Component\-Client\-HTTP' : 'HTTP user-agent for POE (portable networking framework for Perl)', 'chimera' : 'Chimera (Old Camino)', 'curl' : 'Curl', 'konqueror' : 'Konqueror', 'audion' : 'Audion (media player)', 'nikto' : 'Nikto Web Scanner', 'tzgeturl' : 'TzGetURL', 'blackberry' : 'BlackBerry (PDA/Phone browser)', 'dillo' : 'Dillo', 'qts' : 'QuickTime (media player)', 'emacs\-w3' : 'Emacs/w3s', 'wap' : 'Unknown WAP browser (PDA/Phone browser)', 'bonecho' : 'BonEcho (Firefox 2.0 development)', 'lynx' : 'Lynx', 'cyndicate' : 'Cyndicate (RSS Reader)', 'itunes' : 'Apple iTunes (media player)', 'winamp' : 'WinAmp (media player)', 'phoenix' : 'Phoenix', 'applesyndication' : 'AppleSyndication (RSS Reader)', 'kazehakase' : 'Kazehakase', 'multizilla' : 'MultiZilla', 'hotjava' : 'Sun HotJava', 'greatnews' : 'GreatNews (RSS Reader)', 'betanews_reader' : 'Betanews Reader (RSS Reader)', 'linemodebrowser' : 'W3C Line Mode Browser', 'lwp' : 'LibWWW-perl', 'seamonkey' : 'SeaMonkey', 'jetaudio' : 'JetAudio (media player)', 'sagem' : 'Sagem (PDA/Phone browser)', 'omniweb' : 'OmniWeb', 'emailsiphon' : 'EmailSiphon', 'newsfire' : 'NewsFire (RSS Reader)', 'chilkat' : 'Chilkat', 'aol\-iweng' : 'AOL-Iweng', 'rssreader' : 'RssReader (RSS Reader)', 'minefield' : 'Minefield (Firefox 3.0 development)', '22acidownload' : '22AciDownload', 'downloadagent' : 'DownloadAgent', 'android' : 'Android browser (PDA/Phone browser)', 'plagger' : 'Plagger (RSS Reader)', 'mot\-' : 'Motorola Browser (PDA/Phone browser)', 'fdm' : 'FDM Free Download Manager', 'panasonic' : 'Panasonic Browser (PDA/Phone browser)', 'cyberdog' : 'Cyberdog', 'webcopier' : 'WebCopier', 'abrowse' : 'ABrowse', 'strata' : 'Strata', 'leechget' : 'LeechGet', 'prism' : 'Prism', 'charon' : 'Charon', 'cloudflare' : 'CloudFlare', 'teleport' : 'TelePort Pro', 'wapsilon' : 'WAPsilon (PDA/Phone browser)', 'sage' : 'Sage (RSS Reader)', 'xchaos_arachne' : 'Arachne', 'elinks' : 'ELinks', 'epiphany' : 'Epiphany', 'jetbrains_omea' : 'Omea (RSS Reader)', 'nutscrape' : 'Nutscrape', 'icab' : 'iCab', 'webdownloader\sfor\sx' : 'Downloader for X', 'sharpreader' : 'SharpReader (RSS Reader)', 'xmms' : 'XMMS (media player)', 'k\-ninja' : 'K-Ninja', 'apt' : 'Debian APT', 'rssowl' : 'RSSOwl (RSS Reader)', 'newzcrawler' : 'NewzCrawler (RSS Reader)', 'shrook' : 'Shrook (RSS Reader)', 'k\-meleon' : 'K-Meleon', 'fget' : 'FGet', 'libwww' : 'LibWWW', 'songbird' : 'Songbird', 'pulpfiction' : 'PulpFiction (RSS Reader)', 'netpositive' : 'NetPositive', 'akregator' : 'Akregator (RSS Reader)', 'feedreader' : 'FeedReader (RSS Reader)', 'fresco' : 'ANT Fresco', 'syndirella' : 'Syndirella (RSS Reader)', 'viking' : 'Viking'} +browsers_hashid = {'wapsilon' : 'WAPsilon (PDA/Phone browser)', 'feedreader' : 'FeedReader (RSS Reader)', 'apt' : 'Debian APT', 'xine' : 'Xine, a free multimedia player (media player)', 'iceape' : 'GNU IceApe', 'webexplorer' : 'IBM-WebExplorer', 'panasonic' : 'Panasonic Browser (PDA/Phone browser)', 'staroffice' : 'StarOffice', 'ncsa_mosaic' : 'NCSA Mosaic', 'xchaos_arachne' : 'Arachne', 'netscape' : 'Netscape', 'macweb' : 'MacWeb', 'strata' : 'Strata', 'links' : 'Links', 'bonecho' : 'BonEcho (Firefox 2.0 development)', 'vodafone' : 'Vodaphone browser (PDA/Phone browser)', 'omniweb' : 'OmniWeb', 'WebSec' : 'Web Secretary', 'wapalizer' : 'WAPalizer (PDA/Phone browser)', 'qnx\svoyager' : 'QNX Voyager', 'nsplayer' : 'NetShow Player (media player)', 'blogbridge' : 'BlogBridge (RSS Reader)', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\scache\smanager' : 'Microsoft Data Access Component Internet Publishing Provider Cache Manager', 'doris' : 'Doris (for Symbian)', 'w3c_validator' : 'W3C Validator', 'syndirella' : 'Syndirella (RSS Reader)', 'sonique' : 'Sonique (media player)', 'ibrowse' : 'iBrowse', 'gnus' : 'Gnus Network User Services', 'chimera' : 'Chimera (Old Camino)', 'mozilla' : 'Mozilla', 'amaya' : 'Amaya', 'shiira' : 'Shiira', 'lotus\-notes' : 'Lotus Notes web client', 'aiderss' : 'AideRSS (RSS Reader)', 'dreamcast' : 'Dreamcast', 'sec\-' : 'Sony/Ericsson (PDA/Phone browser)', 'aggrevator' : 'Aggrevator (RSS Reader)', 'rssreader' : 'RssReader (RSS Reader)', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\sdav' : 'Microsoft Data Access Component Internet Publishing Provider DAV', 'samsung' : 'Samsung (PDA/Phone browser)', 'webcapture' : 'Acrobat Webcapture', 'grabber' : 'Grabber', 'friendlyspider' : 'FriendlySpider', 'webmirror' : 'WebMirror', 'k\-meleon' : 'K-Meleon', 'mplayer' : 'The Movie Player (media player)', 'quicktime' : 'QuickTime (media player)', 'straw' : 'Straw (RSS Reader)', 'adobeair' : 'AdobeAir', 'feeddemon' : 'FeedDemon (RSS Reader)', 'aol\-iweng' : 'AOL-Iweng', 'webcopier' : 'WebCopier', 'minefield' : 'Minefield (Firefox 3.0 development)', 'plagger' : 'Plagger (RSS Reader)', 'flashget' : 'FlashGet', 'webtv' : 'WebTV browser', 'ipcheck' : 'Supervision IP Check (phone)', 'cloudflare' : 'CloudFlare', 'fget' : 'FGet', 'amigavoyager' : 'AmigaVoyager', 'jigsaw' : 'W3C Validator', 'jetaudio' : 'JetAudio (media player)', 'pulpfiction' : 'PulpFiction (RSS Reader)', 'xmms' : 'XMMS (media player)', 'msie' : 'MS Internet Explorer', 'betanews_reader' : 'Betanews Reader (RSS Reader)', 'songbird' : 'Songbird', 'elinks' : 'ELinks', 'newsgator' : 'NewsGator (RSS Reader)', 'POE\-Component\-Client\-HTTP' : 'HTTP user-agent for POE (portable networking framework for Perl)', 'webdownloader\sfor\sx' : 'Downloader for X', 'netnewswire' : 'NetNewsWire (RSS Reader)', 'sonyericsson' : 'Sony/Ericsson Browser (PDA/Phone browser)', 'philips' : 'Philips Browser (PDA/Phone browser)', 'microsoft\-webdav\-miniredir' : 'Microsoft Data Access Component Internet Publishing Provider', 'windows\-media\-player' : 'Windows Media Player (media player)', 'nutscrape' : 'Nutscrape', 'ecatch' : 'eCatch', 'donzilla' : 'Donzilla', 'getright' : 'GetRight', 'xbox' : 'XBoX', 'mspie' : 'MS Pocket Internet Explorer (PDA/Phone browser)', 'liferea' : 'Liferea (RSS Reader)', 'kazehakase' : 'Kazehakase', 'sharpreader' : 'SharpReader (RSS Reader)', 'opera' : 'Opera', 'real' : 'Real player or compatible (media player)', 'ossproxy' : 'OSSProxy', 'winamp' : 'WinAmp (media player)', 'potu' : 'Potu (RSS Reader)', 'fdm' : 'FDM Free Download Manager', 'nikto' : 'Nikto Web Scanner', 'firefox' : 'Firefox', 'teleport' : 'TelePort Pro', 'arora' : 'Arora', 'greatnews' : 'GreatNews (RSS Reader)', 'encompass' : 'Encompass', 'uplayer' : 'Ultra Player (media player)', 'camino' : 'Camino', 'neon' : 'Neon HTTP and WebDAV client library', 'safari' : 'Safari', 'k\-ninja' : 'K-Ninja', 'aweb' : 'AWeb', 'bpftp' : 'BPFTP', 'rssbandit' : 'RSS Bandit (RSS Reader)', 'abrowse' : 'ABrowse', 'epiphany' : 'Epiphany', 'android' : 'Android browser (PDA/Phone browser)', 'gnome\-vfs' : 'Gnome FileSystem Abstraction library', 'webvcr' : 'WebVCR', 'up\.' : 'UP.Browser (PDA/Phone browser)', 'emacs\-w3' : 'Emacs/w3s', 'leechget' : 'LeechGet', 'firebird' : 'Firebird (Old Firefox)', 'icab' : 'iCab', 'linemodebrowser' : 'W3C Line Mode Browser', 'chilkat' : 'Chilkat', 'jetbrains_omea' : 'Omea (RSS Reader)', 'sage' : 'Sage (RSS Reader)', 'shrook' : 'Shrook (RSS Reader)', 'webzip' : 'WebZIP', 'viking' : 'Viking', 'sylera' : 'Sylera', 'phoenix' : 'Phoenix', 'webfetcher' : 'WebFetcher', 'multizilla' : 'MultiZilla', 'hotjava' : 'Sun HotJava', 'netants' : 'NetAnts', 'newzcrawler' : 'NewzCrawler (RSS Reader)', 'netcaptor' : 'NetCaptor', 'portalmmm' : 'I-Mode phone (PDA/Phone browser)', 'feedtools' : 'FeedTools (RSS Reader)', 'ericsson' : 'Ericsson Browser (PDA/Phone browser)', 'wap' : 'Unknown WAP browser (PDA/Phone browser)', 'intergo' : 'InterGO', 'webreaper' : 'WebReaper', '22acidownload' : '22AciDownload', 'mint_audio' : 'Mint Audio (media player)', 'charon' : 'Charon', 'chrome' : 'Google Chrome', 'emailsiphon' : 'EmailSiphon', 'applesyndication' : 'AppleSyndication (RSS Reader)', 'cjb\.net' : 'CJB.NET Proxy', 'msfrontpageexpress' : 'MS FrontPage Express', 'sagem' : 'Sagem (PDA/Phone browser)', 'seamonkey' : 'SeaMonkey', 'lwp' : 'LibWWW-perl', 'prism' : 'Prism', 'wizz\srss\snews\sreader' : 'Wizz RSS News Reader (RSS Reader)', 'lg\-' : 'LG (PDA/Phone browser)', 'freshdownload' : 'FreshDownload', 'analogx_proxy' : 'AnalogX Proxy', 'headdump' : 'HeadDump', 'itunes' : 'Apple iTunes (media player)', 'contiki' : 'Contiki', 'galeon' : 'Galeon', 'flock' : 'Flock', 'mpg123' : 'mpg123 (media player)', 'gregarius' : 'Gregarius (RSS Reader)', 'alcatel' : 'Alcatel Browser (PDA/Phone browser)', 'newsfire' : 'NewsFire (RSS Reader)', 'curl' : 'Curl', 'netpositive' : 'NetPositive', 'libwww' : 'LibWWW', 'javaws' : 'Java Web Start', 'qts' : 'QuickTime (media player)', 'webcollage' : 'WebCollage (PDA/Phone browser)', 'download\smaster' : 'Download Master', 'gstreamer' : 'GStreamer (media library)', 'wdg_validator' : 'WDG HTML Validator', 'w3m' : 'w3m', 'freeamp' : 'FreeAmp (media player)', 'akregator' : 'Akregator (RSS Reader)', 'go!zilla' : 'Go!Zilla', 'rssowl' : 'RSSOwl (RSS Reader)', 'abilon' : 'Abilon (RSS Reader)', 'dillo' : 'Dillo', 'svn' : 'Subversion client', 'konqueror' : 'Konqueror', 'nokia' : 'Nokia Browser (PDA/Phone browser)', 'pluck' : 'Pluck (RSS Reader)', 'iphone' : 'IPhone (PDA/Phone browser)', 'wget' : 'Wget', 'cnf2' : 'Supervision I-Mode ByTel (phone)', 'lynx' : 'Lynx', 'sie\-' : 'SIE (PDA/Phone browser)', 'smallproxy' : 'SmallProxy', 'fresco' : 'ANT Fresco', 'cyberdog' : 'Cyberdog', 'blackberry' : 'BlackBerry (PDA/Phone browser)', 'downloadagent' : 'DownloadAgent', 'pubsub\-rss\-reader' : 'PubSub (RSS Reader)', 'cyndicate' : 'Cyndicate (RSS Reader)', 'granparadiso' : 'GranParadiso (Firefox 3.0 development)', 'docomo' : 'I-Mode phone (PDA/Phone browser)', 'rss\sxpress' : 'RSS Xpress (RSS Reader)', 'tzgeturl' : 'TzGetURL', 'hatena_rss' : 'Hatena (RSS Reader)', 'audion' : 'Audion (media player)', 'rssxpress' : 'RSSXpress (RSS Reader)', 'mot\-' : 'Motorola Browser (PDA/Phone browser)', 'xaudio' : 'Some XAudio Engine based MPEG player (media player)', 'vienna' : 'Vienna (RSS Reader)', 'csscheck' : 'WDG CSS Validator', 'httrack' : 'HTTrack', 'democracy' : 'Democracy', 'mmef' : 'Microsoft Mobile Explorer (PDA/Phone browser)', 'icecat' : 'GNU IceCat', 'iceweasel' : 'Iceweasel', 'w3clinemode' : 'W3CLineMode'} -browsers_icons = {'gregarius' : 'rss', 'hatena_rss' : 'rss', 'feeddemon' : 'rss', 'feedtools' : 'rss', 'granparadiso' : 'firefox', 'xine' : 'mediaplayer', 'mmef' : 'pdaphone', 'ncsa_mosaic' : 'ncsa_mosaic', 'iceweasel' : 'iceweasel', 'amaya' : 'amaya', 'lotus\-notes' : 'lotusnotes', 'javaws' : 'java', 'aggrevator' : 'rss', 'aweb' : 'aweb', 'iphone' : 'pdaphone', 'grabber' : 'grabber', 'rss\sxpress' : 'rss', 'webreaper' : 'webreaper', 'straw' : 'rss', 'sec\-' : 'pdaphone', 'getright' : 'getright', 'svn' : 'subversion', 'camino' : 'chimera', 'wizz\srss\snews\sreader' : 'wizz', 'vodafone' : 'pdaphone', 'dreamcast' : 'dreamcast', 'adobeair' : 'adobe', 'mozilla' : 'mozilla', 'gnus' : 'gnus', 'firefox' : 'firefox', 'microsoft\soffice\sprotocol\sdiscovery' : 'frontpage', 'lg\-' : 'pdaphone', 'staroffice' : 'staroffice', 'bpftp' : 'bpftp', 'webzip' : 'webzip', 'doris' : 'doris', 'uplayer' : 'mediaplayer', 'mplayer' : 'mediaplayer', 'mpg123' : 'mediaplayer', 'rssbandit' : 'rss', 'msfrontpageexpress' : 'fpexpress', 'portalmmm' : 'pdaphone', 'mspie' : 'pdaphone', 'galeon' : 'galeon', 'aiderss' : 'rss', 'microsoft\-webdav\-miniredir' : 'frontpage', 'flock' : 'flock', 'nsplayer' : 'netshow', 'donzilla' : 'mozilla', 'gnome\-vfs' : 'gnome', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\scache\smanager' : 'frontpage', 'rssxpress' : 'rss', 'xaudio' : 'mediaplayer', 'analogx_proxy' : 'analogx', 'alcatel' : 'pdaphone', 'freeamp' : 'mediaplayer', 'macweb' : 'macweb', 'nokia' : 'pdaphone', 'newsgator' : 'rss', 'ecatch' : 'ecatch', 'httrack' : 'httrack', 'iceape' : 'mozilla', 'flashget' : 'flashget', 'mint_audio' : 'mediaplayer', 'chrome' : 'chrome', 'blogbridge' : 'rss', 'windows\-media\-player' : 'mplayer', 'webtv' : 'webtv', 'samsung' : 'pdaphone', 'msie' : 'msie', 'pluck' : 'rss', 'philips' : 'pdaphone', 'liferea' : 'rss', 'xbox' : 'winxbox', 'webcollage' : 'pdaphone', 'real' : 'real', 'ibrowse' : 'ibrowse', 'webcapture' : 'adobe', 'icecat' : 'icecat', 'go!zilla' : 'gozilla', 'firebird' : 'phoenix', 'potu' : 'rss', 'encompass' : 'encompass', 'netscape' : 'netscape', 'cjb\.net' : 'cjbnet', 'vienna' : 'rss', 'sonique' : 'mediaplayer', 'docomo' : 'pdaphone', 'freshdownload' : 'freshdownload', 'strata' : 'mozilla', 'panasonic' : 'pdaphone', 'cyberdog' : 'cyberdog', 'webcopier' : 'webcopier', 'plagger' : 'rss', 'mot\-' : 'pdaphone', 'android' : 'android', 'newsfire' : 'rss', 'minefield' : 'firefox', 'rssreader' : 'rss', 'icab' : 'icab', 'jetbrains_omea' : 'rss', 'epiphany' : 'epiphany', 'wapsilon' : 'pdaphone', 'sage' : 'rss', 'leechget' : 'leechget', 'teleport' : 'teleport', 'prism' : 'mozilla', 'k\-meleon' : 'kmeleon', 'apt' : 'apt', 'rssowl' : 'rss', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\sprotocol\sdiscovery' : 'frontpage', 'shrook' : 'rss', 'newzcrawler' : 'rss', 'sharpreader' : 'rss', 'xmms' : 'mediaplayer', 'fresco' : 'fresco', 'syndirella' : 'rss', 'netpositive' : 'netpositive', 'akregator' : 'rss', 'feedreader' : 'rss', 'songbird' : 'mozilla', 'pulpfiction' : 'rss', 'sie\-' : 'pdaphone', 'netnewswire' : 'rss', 'sylera' : 'mozilla', 'microsoft\soffice\sexistence\sdiscovery' : 'frontpage', 'neon' : 'neon', 'opera' : 'opera', 'sonyericsson' : 'pdaphone', 'ericsson' : 'pdaphone', 'pubsub\-rss\-reader' : 'rss', 'abilon' : 'abilon', 'chimera' : 'chimera', 'konqueror' : 'konqueror', 'amigavoyager' : 'amigavoyager', 'safari' : 'safari', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\sdav' : 'frontpage', 'wapalizer' : 'pdaphone', 'up\.' : 'pdaphone', 'itunes' : 'mediaplayer', 'winamp' : 'mediaplayer', 'applesyndication' : 'rss', 'phoenix' : 'phoenix', 'wap' : 'pdaphone', 'bonecho' : 'firefox', 'lynx' : 'lynx', 'dillo' : 'dillo', 'qts' : 'mediaplayer', 'blackberry' : 'pdaphone', 'audion' : 'mediaplayer', 'omniweb' : 'omniweb', 'seamonkey' : 'seamonkey', 'jetaudio' : 'mediaplayer', 'sagem' : 'pdaphone', 'avantbrowser' : 'avant', 'greatnews' : 'rss', 'hotjava' : 'hotjava', 'betanews_reader' : 'rss', 'kazehakase' : 'mozilla', 'multizilla' : 'multizilla'} +browsers_icons = {'firebird' : 'phoenix', 'icab' : 'icab', 'jetbrains_omea' : 'rss', 'gnome\-vfs' : 'gnome', 'microsoft\soffice\sprotocol\sdiscovery' : 'frontpage', 'leechget' : 'leechget', 'up\.' : 'pdaphone', 'aweb' : 'aweb', 'bpftp' : 'bpftp', 'rssbandit' : 'rss', 'android' : 'android', 'epiphany' : 'epiphany', 'camino' : 'chimera', 'encompass' : 'encompass', 'uplayer' : 'mediaplayer', 'neon' : 'neon', 'safari' : 'safari', 'chrome' : 'chrome', 'feedtools' : 'rss', 'mint_audio' : 'mediaplayer', 'webreaper' : 'webreaper', 'wap' : 'pdaphone', 'ericsson' : 'pdaphone', 'phoenix' : 'phoenix', 'sylera' : 'mozilla', 'multizilla' : 'multizilla', 'hotjava' : 'hotjava', 'portalmmm' : 'pdaphone', 'newzcrawler' : 'rss', 'sage' : 'rss', 'webzip' : 'webzip', 'shrook' : 'rss', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\sprotocol\sdiscovery' : 'frontpage', 'webcollage' : 'pdaphone', 'akregator' : 'rss', 'freeamp' : 'mediaplayer', 'rssowl' : 'rss', 'go!zilla' : 'gozilla', 'newsfire' : 'rss', 'alcatel' : 'pdaphone', 'netpositive' : 'netpositive', 'javaws' : 'java', 'qts' : 'mediaplayer', 'analogx_proxy' : 'analogx', 'freshdownload' : 'freshdownload', 'lg\-' : 'pdaphone', 'galeon' : 'galeon', 'itunes' : 'mediaplayer', 'gregarius' : 'rss', 'mpg123' : 'mediaplayer', 'flock' : 'flock', 'sagem' : 'pdaphone', 'msfrontpageexpress' : 'fpexpress', 'cjb\.net' : 'cjbnet', 'applesyndication' : 'rss', 'prism' : 'mozilla', 'seamonkey' : 'seamonkey', 'wizz\srss\snews\sreader' : 'wizz', 'mmef' : 'pdaphone', 'iceweasel' : 'iceweasel', 'icecat' : 'icecat', 'hatena_rss' : 'rss', 'docomo' : 'pdaphone', 'rss\sxpress' : 'rss', 'granparadiso' : 'firefox', 'pubsub\-rss\-reader' : 'rss', 'rssxpress' : 'rss', 'audion' : 'mediaplayer', 'xaudio' : 'mediaplayer', 'vienna' : 'rss', 'mot\-' : 'pdaphone', 'httrack' : 'httrack', 'fresco' : 'fresco', 'blackberry' : 'pdaphone', 'cyberdog' : 'cyberdog', 'dillo' : 'dillo', 'abilon' : 'abilon', 'svn' : 'subversion', 'iphone' : 'pdaphone', 'nokia' : 'pdaphone', 'pluck' : 'rss', 'konqueror' : 'konqueror', 'lynx' : 'lynx', 'sie\-' : 'pdaphone', 'nsplayer' : 'netshow', 'blogbridge' : 'rss', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\scache\smanager' : 'frontpage', 'doris' : 'doris', 'strata' : 'mozilla', 'macweb' : 'macweb', 'bonecho' : 'firefox', 'omniweb' : 'omniweb', 'vodafone' : 'pdaphone', 'wapalizer' : 'pdaphone', 'iceape' : 'mozilla', 'staroffice' : 'staroffice', 'panasonic' : 'pdaphone', 'netscape' : 'netscape', 'ncsa_mosaic' : 'ncsa_mosaic', 'feedreader' : 'rss', 'wapsilon' : 'pdaphone', 'apt' : 'apt', 'xine' : 'mediaplayer', 'avantbrowser' : 'avant', 'aggrevator' : 'rss', 'samsung' : 'pdaphone', 'microsoft\sdata\saccess\sinternet\spublishing\sprovider\sdav' : 'frontpage', 'rssreader' : 'rss', 'grabber' : 'grabber', 'webcapture' : 'adobe', 'dreamcast' : 'dreamcast', 'sec\-' : 'pdaphone', 'amaya' : 'amaya', 'mozilla' : 'mozilla', 'chimera' : 'chimera', 'gnus' : 'gnus', 'lotus\-notes' : 'lotusnotes', 'aiderss' : 'rss', 'syndirella' : 'rss', 'sonique' : 'mediaplayer', 'ibrowse' : 'ibrowse', 'jetaudio' : 'mediaplayer', 'pulpfiction' : 'rss', 'xmms' : 'mediaplayer', 'webtv' : 'webtv', 'flashget' : 'flashget', 'amigavoyager' : 'amigavoyager', 'feeddemon' : 'rss', 'webcopier' : 'webcopier', 'minefield' : 'firefox', 'plagger' : 'rss', 'k\-meleon' : 'kmeleon', 'adobeair' : 'adobe', 'straw' : 'rss', 'mplayer' : 'mediaplayer', 'teleport' : 'teleport', 'firefox' : 'firefox', 'microsoft\soffice\sexistence\sdiscovery' : 'frontpage', 'greatnews' : 'rss', 'kazehakase' : 'mozilla', 'sharpreader' : 'rss', 'liferea' : 'rss', 'winamp' : 'mediaplayer', 'real' : 'real', 'opera' : 'opera', 'potu' : 'rss', 'ecatch' : 'ecatch', 'windows\-media\-player' : 'mplayer', 'getright' : 'getright', 'donzilla' : 'mozilla', 'mspie' : 'pdaphone', 'xbox' : 'winxbox', 'songbird' : 'mozilla', 'betanews_reader' : 'rss', 'msie' : 'msie', 'newsgator' : 'rss', 'philips' : 'pdaphone', 'sonyericsson' : 'pdaphone', 'netnewswire' : 'rss', 'microsoft\-webdav\-miniredir' : 'frontpage'} diff --git a/tools/iwla_convert.pl b/tools/iwla_convert.pl index 970ce4d..696e230 100755 --- a/tools/iwla_convert.pl +++ b/tools/iwla_convert.pl @@ -7,6 +7,7 @@ my @awstats_libs = ('search_engines.pm', 'robots.pm', 'operating_systems.pm', 'b # my @awstats_libs = ('browsers.pm', 'browsers_phone.pm', 'mime.pm', 'referer_spam.pm', 'search_engines.pm', 'operating_systems.pm', 'robots.pm', 'worms.pm'); foreach $lib (@awstats_libs) {require $awstats_lib_root . $lib;} +require './tools/own_search_engines.pm'; sub dumpList { my @list = @{$_[0]}; @@ -64,6 +65,7 @@ print $FIC "]\n\n"; print $FIC "search_engines_2 = ["; dumpList(\@SearchEnginesSearchIDOrder_list2, $FIC, 1); +dumpList(\@Own_SearchEnginesSearchIDOrder, $FIC, 0); print $FIC "]\n\n"; print $FIC "not_search_engines_keys = {"; @@ -72,10 +74,12 @@ print $FIC "}\n\n"; print $FIC "search_engines_hashid = {"; dumpHash(\%SearchEnginesHashID, $FIC, 1); +dumpHash(\%Own_SearchEnginesHashID, $FIC, 0); print $FIC "}\n\n"; print $FIC "search_engines_knwown_url = {"; dumpHash(\%SearchEnginesKnownUrl, $FIC, 1); +dumpHash(\%Own_SearchEnginesKnownUrl, $FIC, 0); print $FIC "}\n\n"; print $FIC "operating_systems = ["; diff --git a/tools/own_search_engines.pm b/tools/own_search_engines.pm new file mode 100644 index 0000000..3a12c79 --- /dev/null +++ b/tools/own_search_engines.pm @@ -0,0 +1,34 @@ +@Own_SearchEnginesSearchIDOrder=( +'jwss\.cc', +'lemoteur\.orange\.fr', +'windowssearch\.com', +'qwant\.com', +'wow\.com', +'searches\.omiga-plus\.com', +'buenosearch\.com', +'searches\.vi-view\.com' +); + +%Own_SearchEnginesHashID = ( + 'jwss\.cc', 'jws', + 'lemoteur\.orange\.fr', 'Orange', + 'windowssearch\.com', 'Windows Search', + 'qwant\.com', 'Qwant', + 'wow\.com', 'WOW', + 'searches\.omiga-plus\.com', 'Omiga-plus', + 'buenosearch\.com', 'Bueno Search', + 'searches\.vi-view\.com', 'vi-view' + ); + +%Own_SearchEnginesKnownUrl=( + 'jws','q=', + 'Orange', 'kw=', + 'Windows Search', 'q=', + 'Qwant', 'q=', + 'WOW', 'q=', + 'Omiga-plus', 'q=', + 'Bueno Search', 'q=', + 'vi-view', 'q=' + ); + +