ChatbotGPT

2023/11/08¶

Solution : Base trên pysite để thực hiện phát triển

1. Crawl từ domain : 80%
   1. So với chatbase nhanh hơn x2 lần
   2. So về kết quả kết quả đẹp hơn ví dụ hblab.vn : chatbase 63 page của crawl mới dc 136 page
2. Crawl từ sitemap : N/A
3. Tích hợp 2 mục.

• Hiện chỉ crawl được link có format http://hblab.vn/xxx link nội bộ /category/porn-hub chưa crawl dc

2023/11/09¶

Đã làm
- Đã crawl được từ domain url ( tuha.vn, hblab.vn ... )
- Tự động tìm kiếm và craw từ sitemap
- Tăng tốc độ crawl so với ChatBase ~ 200%
- Tăng lượng page tìm được ~ 200%
Tiếp theo
- N/A ( test tích hớp với #122 )