Trung tâm điều khiển Crawl
Thu thập truyện gốc tiếng Trung từ wtr-lab.com và lưu vào MongoDB.
Tổng truyện
5818
Chương đã crawl
5793
Tổng chương
325860
Tốc độ /phút
0
Hàng đợi
0
Lỗi
319689
Quét danh sách truyện
Liệt kê toàn bộ catalog wtr-lab.com vào hàng đợi (10 truyện / trang)
Tự động quét truyện mớiTẮT
Lần cuối: — · Kế tiếp: — · Mới: 0 (tổng 0)
Phân bố trạng thái
Mới0
Trong hàng đợi0
Đang crawl0
Hoàn tất26
Một phần856
Tạm dừng0
Lỗi4936
Nhật ký gần đây
[INFO]5:46:51 PMĐã dọn 622 proxy chết cũ
[INFO]5:46:51 PMKiểm tra lại proxy: 26/207 sống
[INFO]5:46:41 PMThu thập proxy tầng 1: 40 nguồn, 64995 proxy mới cần test
[INFO]5:44:34 PMThu thập proxy tầng 2: 35 nguồn, 21407 proxy mới cần test
[INFO]5:41:13 PMThu thập proxy tầng 1: 40 nguồn, 9705 proxy mới cần test
[INFO]5:40:59 PMThu thập proxy xong: test 30319, thêm 104 proxy sống (pool sống hiện 380/4000)
[INFO]5:34:10 PMThu thập proxy tầng 2: 35 nguồn, 23399 proxy mới cần test
[INFO]5:31:45 PMKiểm tra lại proxy: 27/276 sống