Merge branch 'main' of https://github.com/yalechen-cyw/CodeAnalysis

Author: cyw3

.github/workflows/docs.yml

@@ -24,11 +24,11 @@ jobs:
       - name: Checkout Repo
         uses: actions/checkout@v3
 
-      - name: Setup Node 14
+      - name: Setup Node 16
         uses: actions/setup-node@v3
         with:
           # 选择要使用的 node 版本
-          node-version: "14"
+          node-version: "16"
           cache: "yarn"
           cache-dependency-path: "doc/yarn.lock"
 
@@ -39,8 +39,8 @@ jobs:
         with:
           path: doc/node_modules
           key: ${{ runner.os }}-yarn-${{ hashFiles('doc/yarn.lock') }}
-          restore-keys: |
-            ${{ runner.os }}-yarn-
+          # restore-keys: |
+          #   ${{ runner.os }}-yarn-
 
       # 如果缓存没有命中，安装依赖
       - if: ${{ steps.yarn-cache.outputs.cache-hit == false }}

client/node/servertask/looprunner.py

@@ -193,6 +193,8 @@ def run(self):
                     kill_task_id = task_params['task_id']
                     # kill task时进程如果已不存在,会报异常: ProcessLookupError: [Errno 3] No such process
                     self._terminate_task(kill_task_id)
+                    # 等待一段时间后再接下一个任务
+                    time.sleep(self._get_task_interval)
                     continue
 
                 # 获取到分析任务，向server发送确认信息(kill_task不需要确认)
@@ -229,6 +231,8 @@ def run(self):
                 task = Task(task_id, task_name, request_file, response_file, task_log, env=self._origin_os_env)
                 task.start()
                 self._running_task.append(task)
+                # 等待一段时间后再接下一个任务
+                time.sleep(self._get_task_interval)
             except:
                 # 遇到异常,输出异常信息
                 LogPrinter.exception("task loop encounter error.")

client/node/toolloader/httploadtool.py

@@ -14,7 +14,8 @@
 from util.logutil import LogPrinter
 from util.api.fileserver import RetryFileServer
 from util.exceptions import FileServerError
-from util.ziplib import ZipMgr
+from util.pathlib import PathMgr
+from util.zipmgr import Zip
 
 
 class HttpToolLoader(object):
@@ -37,8 +38,10 @@ def download_tool(tool_url, dest_dir):
 
         if os.path.exists(dest_zip_file_path):
             LogPrinter.debug(f"download {tool_url} to {dest_zip_file_path}")
-            ZipMgr.depress(dest_zip_file_path, tool_root_dir)
+            # 使用7z解压
+            Zip().decompress_by_7z(dest_zip_file_path, tool_root_dir)
             LogPrinter.debug(f"unzip {dest_zip_file_path} to {dest_dir}")
+            PathMgr().safe_rmpath(dest_zip_file_path)
         else:
             raise FileServerError(f"download {tool_url} failed!")
 

client/settings/edition.py

@@ -28,4 +28,4 @@ class Edition(Enum):
 # 版本号
 # ========================
 # puppy版本号,格式：浮点数，整数部分为8位日期，小数部分为编号(从1开始)
-VERSION = 20220718.1
+VERSION = 20220907.1

doc/.vuepress/config.ts

@@ -1,7 +1,7 @@
 import { defineUserConfig } from '@vuepress/cli'
 import { defaultTheme } from '@vuepress/theme-default'
+import { searchPlugin } from '@vuepress/plugin-search'
 import { navbar, sidebar } from './configs'
-const { searchPlugin } = require('@vuepress/plugin-search')
 
 const isProd = process.env.NODE_ENV === 'production'
 

doc/.vuepress/configs/sidebar/en.ts

@@ -27,6 +27,7 @@ export const en: SidebarConfig = {
           children: [
             '/en/guide/代码检查/工具/eslint.md',
             '/en/guide/代码检查/工具/golangcilint.md',
+            '/eh/guide/代码检查/工具/regexscanner.md',
           ],
         },
       ]

doc/.vuepress/configs/sidebar/zh.ts

@@ -27,6 +27,7 @@ export const zh: SidebarConfig = {
           children: [
             '/zh/guide/代码检查/工具/eslint.md',
             '/zh/guide/代码检查/工具/golangcilint.md',
+            '/zh/guide/代码检查/工具/regexscanner.md',
           ],
         },
       ]

doc/en/guide/代码检查/工具/regexscanner.md

@@ -69,9 +69,15 @@ TCA独立工具TCA-Armory-R，别名RegexScanner，正则匹配工具，支持
 
 - (5) [可选] `file_scan` 参数，用于指定是否扫描文件名称，可选值：True、true、False、false 。例如: `file_scan=True`, 默认是False
 
-- (6) [可选] `include` 参数，用于指定扫描文件匹配范围，基于相对路径，使用正则匹配格式，多项使用英文分号（;）隔开。例如: `include=path/to/dir;path/to/.*\\.cpp`
+- (6) [可选] `include` 参数，用于指定只扫描的文件匹配范围，基于相对路径，使用通配符格式，多项使用英文分号（;）隔开。例如: `include=src/test;src/main.*;*.cpp`
 
-- (7) [可选] `exclude` 参数，用于指定不扫描的文件匹配范围。格式参考include参数。
+- (7) [可选] `exclude` 参数，用于指定不扫描的文件匹配范围，格式同include参数，例如: `exclude=tests;*.json`
+
+  > 路径过滤（`exclude`, `include`）采用Glob-Style的匹配模式，详见 [Go-filepath-Match](https://pkg.go.dev/path/filepath#Match)， 除了 `**` 用来匹配零或多个目录，本工具会**默认匹配前后目录**。举例: 
+  > > 1. `exclude=*.py` 会忽略以下文件: main.py, src/main.py, main.py/install.sh
+  > > 2. `exclude=tests` 会忽略以下文件: tests/test.py, a/tests/b/test.py
+  > > 3. `include=main.*` 会只扫描以下文件: src/main.py, app/main.go
+  > > 4. `include=src`且`exclude=src/lib` 会只扫描以下文件: src/main.py, src/project/proj.py; 忽略以下文件: src/lib/lib.py, src/lib/package/pack.js
 
 ### 4. 将自定义规则添加到项目分析方案中
 进入 代码分析 - 分析方案 - 代码检查 - 自定义规则包 - 查看详细规则，添加规则。

doc/package.json

@@ -6,14 +6,15 @@
     "tca",
     "document"
   ],
+  "type": "module",
   "license": "MIT",
   "scripts": {
     "dev": "vuepress dev",
     "build:comment": "echo '构建帮助文档，默认base前缀为document，可根据部署需要进行相应调整'",
     "build": "BASE=${BASE:-CodeAnalysis} vuepress build -d ./dist"
   },
   "devDependencies": {
-    "@vuepress/plugin-search": "^2.0.0-beta.43",
-    "vuepress": "^2.0.0-beta.42"
+    "@vuepress/plugin-search": "2.0.0-beta.51",
+    "vuepress": "2.0.0-beta.51"
   }
-}
+}