úterý 21. srpna 2012

Statistiky výběrové sklizně - červenec 2012


Červencová výběrová sklizeň (viz předchozí příspěvek) byla před dvěma týdny úspěšně ukončena. Celkem se sklidilo 1,3 TB dat (téměr 20 miliónů objektů).

Duration Time: 12d22h52m19s379ms
Total Seeds Crawled: 2772
Total Seeds not Crawled: 101
Total Hosts Crawled: 76595
Total Documents Crawled: 19873458
Documents Crawled Successfully: 19848907
Novel Documents Crawled: 19848904
Not-modified Documents Crawled: 2
Processed docs/sec: 17.74
Bandwidth in Kbytes/sec: 1252
Total Raw Data Size in Bytes: 1435314859558 (1.3 TB) 
Novel Bytes: 1435314858973 (1.3 TB) 
Not-modified Bytes: 585 (585 B)