6 changed files with 328 additions and 1 deletions
@ -0,0 +1,40 @@ |
|||||||
|
{ |
||||||
|
"HeroUnion - Open source web crawler union.": "HeroUnion - オープンソースのウェブクローラーユニオン。", |
||||||
|
"HeroUnion.website": "HeroUnion.website", |
||||||
|
"HeroUnion<small> - Open source web crawler union</small>": "HeroUnion<small> - オープンソースのウェブクローラーユニオン</small>", |
||||||
|
"HeroUnion Stats": "HeroUnion統計情報", |
||||||
|
"It's running": "実行中", |
||||||
|
"Tasks Stats": "タスク統計情報", |
||||||
|
"Last": "最終", |
||||||
|
"Waiting": "待機中", |
||||||
|
"Running": "実行中", |
||||||
|
"Total": "合計", |
||||||
|
"Done": "完了", |
||||||
|
"Failed": "失敗", |
||||||
|
"Notify Stats": "通知統計情報", |
||||||
|
"Bot Stats": "ボット統計情報", |
||||||
|
"Idle": "アイドル状態", |
||||||
|
"Busy": "ビジー状態", |
||||||
|
"Offline": "オフライン", |
||||||
|
"JSON Data": "JSONデータ", |
||||||
|
"Covenant of the Alliance": "同盟規約", |
||||||
|
"Please abide by the following conventions and stick to it for a better tomorrow for yourself and the whole society!": "ご自身と社会全体のより良い未来のために、以下の規約を遵守してください。", |
||||||
|
"Comply with local/national laws and regulations": "地域/国の法律および規制を遵守する", |
||||||
|
"Data that requires login or VIP status to access will not be crawled": "アクセスにログインまたはVIPステータスが必要なデータはクロールされません", |
||||||
|
"Data that is explicitly prohibited from being collected by the target website will not be crawled": "対象ウェブサイトで収集が明示的に禁止されているデータはクロールされません", |
||||||
|
"The commercial core data of the target website is not crawled": "対象ウェブサイトの商用コアデータはクロールされません", |
||||||
|
"Low concurrency, low frequency, does not affect the normal operation of the target website": "同時実行性が低く、頻度も低いため、対象ウェブサイトの正常な動作には影響しません", |
||||||
|
"Bots": "ボット", |
||||||
|
"HeroUnion App": "HeroUnionアプリ", |
||||||
|
"HeroUnion download": "HeroUnionダウンロード", |
||||||
|
"HeroBot download": "HeroBotダウンロード", |
||||||
|
"HeroUnion<strong> is only responsible for the scheduling of crawlers and tasks</strong>.": "HeroUnion<strong>クローラーとタスクのスケジュール設定のみを担当します</strong>。", |
||||||
|
"The contracts supported by crawlers and the specific content of tasks have nothing to do with the alliance.": "クローラーがサポートする契約およびタスクの具体的な内容は、アライアンスとは一切関係ありません。", |
||||||
|
"Website monitor": "ウェブサイトモニター", |
||||||
|
"Web Scraper": "Webスクレイパー", |
||||||
|
"Disclaimer": "免責事項", |
||||||
|
"Information protected by law will not be crawled": "法律で保護されている情報はクロールされません", |
||||||
|
"for example": "例えば", |
||||||
|
"personal privacy data mobile phone number, ID number, etc.": "個人情報（携帯電話番号、ID番号など）", |
||||||
|
"Current Lang": "日本語" |
||||||
|
} |
||||||
@ -0,0 +1,279 @@ |
|||||||
|
<!doctype html> |
||||||
|
<html lang="en-us"> |
||||||
|
<head> |
||||||
|
<meta charset="utf-8"> |
||||||
|
<meta http-equiv="X-UA-Compatible" content="IE=edge"> |
||||||
|
<meta name="viewport" content="width=device-width"> |
||||||
|
<title>HeroUnion - オープンソースのウェブクローラーユニオン。</title> |
||||||
|
<meta name="author" content="HeroUnion.website"> |
||||||
|
<meta name="description" content="HeroUnion - オープンソースのウェブクローラーユニオン。"> |
||||||
|
<style> |
||||||
|
*,body{margin:0;padding:0} |
||||||
|
body{padding:8px;max-width:640px;margin:0 auto} |
||||||
|
h1{font-size:2em;font-weight:500} |
||||||
|
small{font-size:65%;font-weight:400} |
||||||
|
pre{background-color:#DDD;padding-bottom:3px;padding-right:3px;border-radius:0 5px 0 5px;max-width:480px} |
||||||
|
code{display:block;background-color:#EEE;padding:4px} |
||||||
|
dt{background-color:#EEE;padding:4px 6px} |
||||||
|
dd{text-indent:1em;margin:4px 0 8px 0} |
||||||
|
li{margin-left:1em} |
||||||
|
footer{padding-bottom:2em} |
||||||
|
|
||||||
|
.text-center{text-align:center} |
||||||
|
.text-right{text-align:right} |
||||||
|
.mt-d5{margin-top:.5em} |
||||||
|
.mt-1{margin-top:1em} |
||||||
|
.mt-2{margin-top:2em} |
||||||
|
.mt-4{margin-top:4em} |
||||||
|
.mx-d2{margin-left:.5em;margin-right:.2em} |
||||||
|
.icon{vertical-align:middle} |
||||||
|
|
||||||
|
.stats{background-color:#EEE;padding:10px 10px 4px 10px} |
||||||
|
.col{display:inline-block;padding:13px 4px;width:20%;background:#444;color:#FFF;margin-right:4px;margin-bottom:6px;text-align:center} |
||||||
|
.col strong{font-size:24px} |
||||||
|
.col label{display:block;font-size:15px} |
||||||
|
.info{background-color:darkblue} |
||||||
|
.success{background-color:green} |
||||||
|
.warning{background-color:orange;color:#444} |
||||||
|
.danger{background-color:red} |
||||||
|
.disable{background-color:gray} |
||||||
|
|
||||||
|
.langswitcher{position:relative} |
||||||
|
.langswitcher button{padding:2px 4px;cursor:pointer} |
||||||
|
.dropmenu{display:none;position:absolute;right:0;top:28px;padding:5px;width:80px;background-color:#FFF;border:1px solid #EEE} |
||||||
|
.dropmenu li{list-style:none;padding:0;margin:3px 0;text-align:center} |
||||||
|
|
||||||
|
@media(max-width:480px) { |
||||||
|
h1 small{display:block} |
||||||
|
} |
||||||
|
</style> |
||||||
|
</head> |
||||||
|
<body> |
||||||
|
<h1 class="text-center">HeroUnion<small> - オープンソースのウェブクローラーユニオン</small></h1> |
||||||
|
|
||||||
|
<hr class="mt-d5"> |
||||||
|
<div class="text-right mt-d5 langswitcher"> |
||||||
|
<button data-status="closed"> |
||||||
|
<img src="/globe.svg" alt="Globe language switcher" class="icon"> |
||||||
|
日本語 |
||||||
|
</button> |
||||||
|
<ul class="dropmenu"> |
||||||
|
<li><a href="/">English</a></li> |
||||||
|
<li><a href="/zh/">简体中文</a></li> |
||||||
|
<li><a href="/ja/">日本語</a></li> |
||||||
|
</ul> |
||||||
|
</div> |
||||||
|
|
||||||
|
<h3 class="mt-2">HeroUnion統計情報 実行中 <span class="run_time">...</span></h3> |
||||||
|
|
||||||
|
<h4 class="mt-d5">タスク統計情報 (最終 <span class="cache_time">...</span>)</h4> |
||||||
|
<div class="stats taskStatus"> |
||||||
|
<span class="col info"> |
||||||
|
<strong class="waiting">...</strong> |
||||||
|
<label>待機中</label> |
||||||
|
</span> |
||||||
|
<span class="col warning"> |
||||||
|
<strong class="running">...</strong> |
||||||
|
<label>実行中</label> |
||||||
|
</span> |
||||||
|
<div> |
||||||
|
<span class="col"> |
||||||
|
<strong class="total">...</strong> |
||||||
|
<label>合計</label> |
||||||
|
</span> |
||||||
|
<span class="col success"> |
||||||
|
<strong class="done">...</strong> |
||||||
|
<label>完了</label> |
||||||
|
</span> |
||||||
|
<span class="col danger"> |
||||||
|
<strong class="failed">...</strong> |
||||||
|
<label>失敗</label> |
||||||
|
</span> |
||||||
|
</div> |
||||||
|
</div> |
||||||
|
|
||||||
|
<h4 class="mt-d5">通知統計情報 (最終 <span class="cache_time">...</span>)</h4> |
||||||
|
<div class="stats taskNotifyStatus"> |
||||||
|
<span class="col"> |
||||||
|
<strong class="total">...</strong> |
||||||
|
<label>合計</label> |
||||||
|
</span> |
||||||
|
<span class="col success"> |
||||||
|
<strong class="done">...</strong> |
||||||
|
<label>完了</label> |
||||||
|
</span> |
||||||
|
<span class="col danger"> |
||||||
|
<strong class="failed">...</strong> |
||||||
|
<label>失敗</label> |
||||||
|
</span> |
||||||
|
</div> |
||||||
|
|
||||||
|
<h4 class="mt-d5">ボット統計情報</h4> |
||||||
|
<div class="stats heroStatus"> |
||||||
|
<span class="col"> |
||||||
|
<strong class="total">...</strong> |
||||||
|
<label>合計</label> |
||||||
|
</span> |
||||||
|
<span class="col success"> |
||||||
|
<strong class="idle">...</strong> |
||||||
|
<label>アイドル状態</label> |
||||||
|
</span> |
||||||
|
<span class="col warning"> |
||||||
|
<strong class="busy">...</strong> |
||||||
|
<label>ビジー状態</label> |
||||||
|
</span> |
||||||
|
<span class="col disable"> |
||||||
|
<strong class="offline">...</strong> |
||||||
|
<label>オフライン</label> |
||||||
|
</span> |
||||||
|
</div> |
||||||
|
|
||||||
|
<h4 class="mt-d5">JSONデータ</h4> |
||||||
|
<pre><code id="herounion_stats">...</code></pre> |
||||||
|
|
||||||
|
<h3 class="mt-2">同盟規約</h3> |
||||||
|
<p class="mt-1">ご自身と社会全体のより良い未来のために、以下の規約を遵守してください。</p> |
||||||
|
<ul class="mt-d5"> |
||||||
|
<li>地域/国の法律および規制を遵守する</li> |
||||||
|
<li>法律で保護されている情報はクロールされません (例えば: 個人情報（携帯電話番号、ID番号など）)</li> |
||||||
|
<li>アクセスにログインまたはVIPステータスが必要なデータはクロールされません</li> |
||||||
|
<li>対象ウェブサイトで収集が明示的に禁止されているデータはクロールされません</li> |
||||||
|
<li>対象ウェブサイトの商用コアデータはクロールされません</li> |
||||||
|
<li>同時実行性が低く、頻度も低いため、対象ウェブサイトの正常な動作には影響しません</li> |
||||||
|
</ul> |
||||||
|
|
||||||
|
<h3 class="mt-2">ボット</h3> |
||||||
|
<dl class="mt-d5" id="herobots">...</dl> |
||||||
|
|
||||||
|
<h3 class="mt-2">HeroUnionアプリ</h3> |
||||||
|
<ul class="mt-d5"> |
||||||
|
<li> |
||||||
|
<strong>ウェブサイトモニター:</strong> |
||||||
|
<a href="https://monitor.filesite.io/d/ddntdyyhv943ke/e7bd91-e7ab99-e79b91-e68ea7?orgId=1" target="_blank">FileSite.io Monitor</a>, |
||||||
|
<a href="https://github.com/filesite-io/monit-via-herounion" target="_blank">Monitor source code download</a> |
||||||
|
</li> |
||||||
|
<li> |
||||||
|
<strong>Webスクレイパー:</strong> |
||||||
|
<a href="https://tajian.tv/" target="_blank">TaJian.tv - video box</a>， |
||||||
|
<a href="https://github.com/filesite-io/machete" target="_blank">Machete source code download</a> |
||||||
|
</li> |
||||||
|
</ul> |
||||||
|
|
||||||
|
<h3 class="mt-1">HeroUnionダウンロード</h3> |
||||||
|
<p><a href="https://github.com/filesite-io/herounion" target="_blank">https://github.com/filesite-io/herounion</a></p> |
||||||
|
|
||||||
|
<h3 class="mt-1">HeroBotダウンロード</h3> |
||||||
|
<p><a href="https://github.com/filesite-io/machete_hero" target="_blank">https://github.com/filesite-io/machete_hero</a></p> |
||||||
|
|
||||||
|
|
||||||
|
<footer class="mt-4"> |
||||||
|
<p> |
||||||
|
<strong>免責事項:</strong> |
||||||
|
<br>HeroUnion<strong>クローラーとタスクのスケジュール設定のみを担当します</strong>。 |
||||||
|
クローラーがサポートする契約およびタスクの具体的な内容は、アライアンスとは一切関係ありません。 |
||||||
|
</p> |
||||||
|
<p class="mt-2 text-center">©copyright <a href="https://herounion.website/" target="_blank">HeroUnion.Website</a></p> |
||||||
|
</footer> |
||||||
|
|
||||||
|
<script src="/js/jquery-3.7.1.min.js"></script> |
||||||
|
<script type="text/javascript"> |
||||||
|
var toggleLangSwitcher = function(evt) { |
||||||
|
var btn = evt.target; |
||||||
|
if (!btn) {return false;} |
||||||
|
var status = $(btn).attr('data-status'); |
||||||
|
if (status == 'closed') { |
||||||
|
$('.langswitcher .dropmenu').show(); |
||||||
|
$(btn).attr('data-status', 'opened'); |
||||||
|
}else { |
||||||
|
$('.langswitcher .dropmenu').hide(); |
||||||
|
$(btn).attr('data-status', 'closed'); |
||||||
|
} |
||||||
|
}; |
||||||
|
$('.langswitcher button').click(toggleLangSwitcher); |
||||||
|
|
||||||
|
var formatSeconds = function(secs) { |
||||||
|
var str = secs + ' seconds'; |
||||||
|
if (secs > 86400) { |
||||||
|
str = Math.floor(secs/86400) + ' days'; |
||||||
|
}else if (secs > 3600) { |
||||||
|
str = Math.floor(secs/3600) + ' hours'; |
||||||
|
}else if (secs > 300) { |
||||||
|
str = Math.floor(secs/60) + ' minutes'; |
||||||
|
}else if (secs > 86400*365) { |
||||||
|
str = Math.floor(secs/86400/365) + ' years' |
||||||
|
+ Math.floor( (secs - Math.floor(secs/86400/365)) / 86400 ) + ' days'; |
||||||
|
} |
||||||
|
|
||||||
|
return str; |
||||||
|
}; |
||||||
|
|
||||||
|
var renderStats = function(parentCls, data) { |
||||||
|
for (var key in data) { |
||||||
|
$('.' + parentCls + ' .'+key).text(data[key]); |
||||||
|
} |
||||||
|
}; |
||||||
|
|
||||||
|
var htmlspecialchars = function(str) { |
||||||
|
return str.replace('&', '&').replace('<', '<').replace('>', '>'); |
||||||
|
}; |
||||||
|
|
||||||
|
var renderHeros = function(heros) { |
||||||
|
if (!heros || heros.length == 0) { |
||||||
|
$('#herobots').text('There is no bot online.'); |
||||||
|
return; |
||||||
|
} |
||||||
|
|
||||||
|
var txtStatus = {idle: 'Idle', busy: 'Busy', offline: 'Offline'}; |
||||||
|
var html = '', item; |
||||||
|
for (var index in heros) { |
||||||
|
item = heros[index]; |
||||||
|
html += '<dt>' + htmlspecialchars(item['name']) + ' <small>' |
||||||
|
+ txtStatus[item['status']] + '</small></dt>'; |
||||||
|
html += '<dd>' |
||||||
|
+ htmlspecialchars(item['description']) |
||||||
|
+ '<br>Platforms: ' + JSON.stringify(item['platforms']) |
||||||
|
+ ', Contracts: ' + JSON.stringify(item['contracts']) |
||||||
|
+ ', Contact: ' + htmlspecialchars(item['contact']) |
||||||
|
+ '</dd>'; |
||||||
|
} |
||||||
|
|
||||||
|
$('#herobots').html(html); |
||||||
|
}; |
||||||
|
|
||||||
|
var loadUnionStats = function() { |
||||||
|
$('.run_time').text('...'); |
||||||
|
var api = '/api/stats/'; |
||||||
|
$.ajax({ |
||||||
|
url: api, |
||||||
|
method: 'GET', |
||||||
|
dataType: 'json' |
||||||
|
}).done(function(data) { |
||||||
|
$('#herounion_stats').text(JSON.stringify(data, null, 4)); |
||||||
|
$('.run_time').text( formatSeconds(data.run_seconds) ); |
||||||
|
$('.cache_time').text( formatSeconds(data.cache_time) ); |
||||||
|
renderStats('taskStatus', data.taskStatus); |
||||||
|
renderStats('taskNotifyStatus', data.taskNotifyStatus); |
||||||
|
renderStats('heroStatus', data.heroStatus); |
||||||
|
}); |
||||||
|
}; |
||||||
|
|
||||||
|
var loadHeros = function() { |
||||||
|
$('#herobots').text('...'); |
||||||
|
var api = '/api/heros/'; |
||||||
|
$.ajax({ |
||||||
|
url: api, |
||||||
|
method: 'GET', |
||||||
|
dataType: 'json' |
||||||
|
}).done(function(data) { |
||||||
|
renderHeros(data); |
||||||
|
}); |
||||||
|
}; |
||||||
|
|
||||||
|
//init |
||||||
|
loadUnionStats(); |
||||||
|
loadHeros(); |
||||||
|
|
||||||
|
setInterval(loadUnionStats, 20000); |
||||||
|
</script> |
||||||
|
</body> |
||||||
|
</html> |
||||||
Loading…
Reference in new issue