dongzhaorui пре 3 година
родитељ
комит
670cffb561
1 измењених фајлова са 1 додато и 4 уклоњено
  1. 1 4
      find_source/build_spider.py

+ 1 - 4
find_source/build_spider.py

@@ -1,17 +1,14 @@
 from crawler import BreadthCrawler
-from crawler.engines import BingSearchEngine, QccSearchEngine
 
 
 def main():
     BreadthCrawler(
         allow_sync_data=True,
         allow_query=True,
-        keyword_query_engine=BingSearchEngine(),
-        org_query_engine=QccSearchEngine(),
+        allow_excavate=True,
         url_weight=20,
         org_weight=5,
         keyword_weight=15,
-        excavate_depth=3,
         excavate_workers=1,
     ).start()