修改spider文件路径

config-server/src/main/resources/properties/config-test.yml

@@ -35,4 +35,35 @@ spring:
       # 设置 上传文件的大小
       max-file-size: 1024MB
       # 设置 整个请求的大小
-      max-request-size: 2048MB
\ No newline at end of file
+      max-request-size: 2048MB
+
+jwt:
+  header: Authorization
+  # 令牌前缀
+  token-start-with: Bearer
+  # 必须使用最少88位的Base64对该令牌进行编码
+  base64-secret: ZmQ0ZGI5NjQ0MDQwY2I4MjMxY2Y3ZmI3MjdhN2ZmMjNhODViOTg1ZGE0NTBjMGM4NDA5NzYxMjdjOWMwYWRmZTBlZjlhNGY3ZTg4Y2U3YTE1ODVkZDU5Y2Y3OGYwZWE1NzUzNWQ2YjFjZDc0NGMxZWU2MmQ3MjY1NzJmNTE0MzI=
+  # 令牌过期时间 此处单位/毫秒 ，默认2小时，可在此网站生成 https://www.convertworld.com/zh-hans/time/milliseconds.html
+  token-validity-in-seconds: 7200000
+  # 在线用户key
+  online-key: online-token-
+  # 验证码
+  code-key: code-key-
+  # token 续期检查时间范围（默认30分钟，单位默认毫秒），在token即将过期的一段时间内用户操作了，则给用户的token续期
+  detect: 1800000
+  # 续期时间范围，默认 1小时，这里单位毫秒
+  renew: 3600000
+
+#线程池配置
+task:
+  pool:
+    # 是否启用线程池, 子模块需要使用异步线程池的时候单独在配置里加
+    enable: true
+    # 核心线程池大小
+    core-pool-size: 5
+    # 最大线程数
+    max-pool-size: 15
+    # 队列容量
+    queue-capacity: 20
+    # 活跃时间
+    keep-alive-seconds: 30
\ No newline at end of file

spider-flow-web/src/main/resources/application.yml

@@ -47,7 +47,8 @@ spider:
     default: 1 #单流程默认最大线程数
   job:
     enable: false #设置为true时定时任务才生效
-  workspace: D:/data/spider #爬虫任务的工作空间
+#  workspace: D:/data/spider #爬虫任务的工作空间
+  workspace: /opt/services/data-model/data/spider/
   bloomfilter:
     capacity: 1000000 #布隆过滤器默认容量
     error-rate: 0.0001 #布隆过滤器默认容错率