feat: 文件格式导入支持扩展 - 后端

[actiontech-bot]

User description

Summary

• 扩展 GetSQLFromFile 管道，新增 .txt、.java、.rar、.7z、.xlsx 格式支持
• 新增 archiveConfig 安全配置，统一压缩包处理的大小/数量/嵌套限制
• 新增 processArchiveEntry() 通用函数，ZIP/RAR/7z 共用
• 回补 getSqlsFromZip 安全检查与 RAR/7z 对齐
• 新增 GBK→UTF-8 编码自动转换

Test plan

• 验证 .txt/.java/.rar/.7z/.xlsx 上传审核流程
• 验证压缩包安全限制（大小/数量/嵌套）
• 验证 GBK 编码文件处理
• 运行单元测试

---

Description

• 新增对 .7z 文件处理逻辑及单元测试

• 新增对 .rar 文件解析及压缩包安全检查

• 新增对 .xlsx 文件解析和 SQL 提取逻辑

• 重构归一化 archive 处理及编码转换

• 集成统一函数 processArchiveEntry 与 getSqlFromJavaContent

• 修改 SQL 审核 API 返回消息及文件上传处理

---

Diagram Walkthrough

flowchart LR
  A["\"archiveConfig 配置与检查\""] --> B["\"processArchiveEntry 分发处理\""]
  B --> C["\"7z 解析 (getSqlsFrom7z)\""]
  B --> D["\"RAR 解析 (getSqlsFromRar)\""]
  B --> E["\"XLSX 解析 (getSqlsFromXlsx)\""]
  C --> F["\"调用 sevenzip 库\""]
  D --> G["\"调用 rardecode 库\""]
  E --> H["\"调用 excelize 库\""]
  I["\"统一入口 getSqlsFromArchive\""] --> C
  I --> D
  I --> E
  J["\"GetSQLFromFile API 分发处理\""] --> I
  J --> K["\"Java 文件 SQL 提取\""]

Loading

File Walkthrough

	Relevant files
Enhancement	7 files archive_7z.go 新增 7z 文件解析实现及压缩包大小、文件数校验                                                                  +149/-0  archive_config.go 新增压缩包安全配置及大小、数量校验函数                                                                            +48/-0    archive_entry.go 新增统一的压缩包入口处理函数及 Java 文件 SQL 提取                                                      +76/-0    archive_rar.go 新增 RAR 文件解析逻辑及安全检查处理                                                                          +144/-0  archive_xlsx.go 新增 XLSX 文件解析及 SQL 拼接提取逻辑                                                                  +103/-0  sql_audit_record.go 修改 SQL 审核记录返回消息及文件上传处理逻辑                                                                  +47/-27  task.go 更新 GetSQLFromFile 增加多格式分发及编码转换支持                                                  +106/-12
Tests	5 files archive_7z_test.go 添加 7z 文件处理单元测试覆盖各种场景                                                                          +205/-0  archive_config_test.go 添加 archiveConfig 单元测试验证边界条件                                                            +159/-0  archive_entry_test.go 添加 archiveEntry 处理函数单元测试场景                                                              +181/-0  archive_rar_test.go 添加 RAR 文件解析及异常处理单元测试                                                                          +211/-0  archive_xlsx_test.go 添加 XLSX 文件解析单元测试覆盖多种模板情况                                                                  +181/-0
Configuration	1 files go.mod 更新依赖项，新增七压缩包、RAR及 XLSX 相关依赖                                                            +18/-1
Additional files	22 files empty.7z [link]    nested.7z [link]    normal.7z [link]    only_unsupported.7z [link]    sorted_test.7z [link]    sql_only.7z [link]    unsupported.7z [link]    empty.rar [link]    nested.rar [link]    normal.rar [link]    only_unsupported.rar [link]    sorted_test.rar [link]    sql_only.rar [link]    unsupported.rar [link]    empty_file.xlsx [link]    multi_sheet.xlsx [link]    no_sql_column.xlsx [link]    sql_lowercase.xlsx [link]    sql_mixed_name.xlsx [link]    sql_uppercase.xlsx [link]    standard_template.xlsx [link]    with_empty_rows.xlsx [link]

---

[CLAassistant]

All committers have signed the CLA.

[github-actions]

PR Reviewer Guide 🔍

⏱️ Estimated effort to review: 5 🔵🔵🔵🔵🔵

🧪 PR contains tests

🔒 No security concerns identified

⚡ Recommended focus areas for review 代码格式优化 在 newBaseResWithMessage 函数中，对传入的 message 拼接形成返回消息时，如果原始 Message 为空，可能会导致前置逗号或格式不统一。建议在拼接前检查原始消息状态或者设置默认值，以确保返回格式始终清晰统一。 // newBaseResWithMessage creates a success BaseRes, appending an optional message. // If message is empty, the response message is "ok"; otherwise "ok, <message>". func newBaseResWithMessage(message string) controller.BaseRes { res := controller.NewBaseReq(nil) if message != "" { res.Message = res.Message + ", " + message } return res } 代码复用建议 在 getSqlsFromArchive 函数中，通过扩展名分发到各个归档文件的处理函数时，有多处对文件打开、大小检查及文件数量校验的逻辑。建议将这些共通检查逻辑抽取成公共函数，以减少重复代码并提升可维护性。 // getSqlsFromArchive dispatches archive file processing based on file extension. // It checks the uploaded file's extension and calls the appropriate handler: // .zip -> getSqlsFromZip, .rar -> getSqlsFromRar, .7z -> getSqlsFrom7z. // Returns skippedCount: the number of unsupported format files that were skipped. func getSqlsFromArchive(c echo.Context) (sqlsFromSQLFile []SQLsFromSQLFile, sqlsFromXML []SQLFromXML, skippedCount int, exist bool, err error) { file, err := c.FormFile(InputZipFileName) if err == http.ErrMissingFile { return nil, nil, 0, false, nil } if err != nil { return nil, nil, 0, false, err } ext := strings.ToLower(filepath.Ext(file.Filename)) switch ext { case ".zip": return getSqlsFromZip(c) case ".rar": return getSqlsFromRar(c) case ".7z": return getSqlsFrom7z(c) default: return nil, nil, 0, false, fmt.Errorf("unsupported archive file type: %s", ext) } }

[github-actions]

Failed to generate code suggestions for PR