"join"语法和"key@"引用赋值语法冲突

[Shuai-S]

环境信息

• 系统: macos 11.5.2 (20G95)
• JDK: 1.8.0_261
• 数据库: MySQL 5.7.14
• APIJSON: 4.7.2

问题描述
"join"语法和"key@"引用赋值语法冲突
join后会引用赋值语法也会根据返回数据的总条数继续做关联查询，返回的数据也不是以含join的sql解析出来的数据，而是引用复制生成sql返回的数据

当join语法中含有sum函数时 不会返回sum结果，会返回引用赋值关联查询的数据

错误信息
以下为生成的4条sql

<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<
已生成 1 条 SQL
execute startTime = 1637317650951
database = ; schema = ; sql =
SELECT count(*) AS count FROM pre_sales_project_info AS PreSalesProjectInfo
LEFT JOIN ( SELECT project FROM code_info WHERE ( (del_flag = 0) AND (bound_type = 0) ) ) AS CodeInfo ON CodeInfo.project = PreSalesProjectInfo.id WHERE ( (PreSalesProjectInfo.deleted = 0) )

<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<
已生成 2 条 SQL
execute startTime = 1637317651302
database = ; schema = ; sql =
SELECT PreSalesProjectInfo.*, CodeInfo.project,CodeInfo.budget FROM pre_sales_project_info AS PreSalesProjectInfo
LEFT JOIN ( SELECT project,budget FROM code_info WHERE ( (del_flag = 0) AND (bound_type = 0) ) ) AS CodeInfo ON CodeInfo.project = PreSalesProjectInfo.id WHERE ( (PreSalesProjectInfo.deleted = 0) ) ORDER BY PreSalesProjectInfo.gmtCreate DESC LIMIT 2

<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<
已生成 3 条 SQL
execute startTime = 1637317651343
database = ; schema = ; sql =
SELECT project,budget FROM code_info WHERE ( (del_flag = 0) AND (bound_type = 0) AND (project = 1637054928436) ) LIMIT 1

<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<<
已生成 4 条 SQL
execute startTime = 1637317651356
database = ; schema = ; sql =
SELECT project,budget FROM code_info WHERE ( (del_flag = 0) AND (bound_type = 0) AND (project = 1637051014468) ) LIMIT 1

[TommyLemon]

第一个问题换最新版 4.8.0 再试试。
https://github.com/APIJSON/APIJSON-Demo/releases/tag/4.8.0

第二个没问题，只是 Postman 把 PresalesProjectInfo 和 CodeInfo 顺序倒过来了，用 APIAuto 就仍然保持顺序
http://apijson.cn/api/

[Shuai-S]

第一个问题换最新版 4.8.0 再试试。 https://github.com/APIJSON/APIJSON-Demo/releases/tag/4.8.0

第二个没问题，只是 Postman 把 PresalesProjectInfo 和 CodeInfo 顺序倒过来了，用 APIAuto 就仍然保持顺序 http://apijson.cn/api/

你好，第一个问题4.8.0没有解决问题，还是会生成关联查询sql 一共会生成和执行一个count(*)的sql 一个left join的sql 和n条查询数据的关联查询sql

第二个问题可能是我描述的不清晰的问题，主要问题是返回的sum(budget) 不是根据left join查出来的budget，而是查询出来的progect=1的单条数据的budget

[TommyLemon]

第一个问题我这边复现了 bug，当 JOIN 副表有 JOIN ON 外的条件时会导致用不上查询缓存：

去掉 "userId": 93793 这个条件后正常。

应该是这里处理有问题，导致没有把引用赋值键值对放在最前
https://github.com/Tencent/APIJSON/blob/master/APIJSONORM/src/main/java/apijson/orm/AbstractParser.java

目前的解决方法是把

				tableObj = newTableObj;
				request.put(tableKey, tableObj);

改成

				tableObj.clear();
				tableObj.putAll(newTableObj);

感谢反馈

[Shuai-S]

导致用不上查询缓存：

你好，tableObj.clear();
tableObj.putAll(newTableObj);这个无效的：因为tableObj是无序的，替换成tableObj = newTableObj;后可以把引用赋值键值对放在最前,但是返回的关联数据一直是第一条，数据是重复的

第二个问题，去除副表查询条件后不返回sum(budget)字段

麻烦你们了，谢谢

[TommyLemon]

com.alibaba.fastjson.JSONObject 构造方法可以传参 ordered = true 指定内部使用 LinkedHashMap 保证键值对顺序

[TommyLemon]

第二个问题我这边也复现了，JOIN 中副表有 SQL 函数时不返回 SQL 函数对应的值

应该是 AbstractSQLExecutor.onPutColumon 内部逻辑问题（大概率）或者 JDBC 未返回（小概率）
https://github.com/Tencent/APIJSON/blob/master/APIJSONORM/src/main/java/apijson/orm/AbstractSQLExecutor.java

[Shuai-S]

您好，大佬，我想了解一下这两个问题的大概修复时间节点
或者有什么临时解决办法吗？谢谢🙏

[TommyLemon]

您好，大佬，我想了解一下这两个问题的大概修复时间节点 或者有什么临时解决办法吗？谢谢🙏

预计下周末，顺便会让 JOIN ON 新增支持多个条件。

第二个问题，应该只要把

SELECT Table2.column1, Table2.column2..  FROM Table1 LEFT JOIN (SELECT column1, column2 FROM Table2 ..) AS Table2

改成

SELECT Table2.*  FROM Table1 LEFT JOIN (SELECT column1, column2 FROM Table2 ..) AS Table2

就可以解决，源码在 AbstractSQLConfig.getColumnString

[TommyLemon]

com.alibaba.fastjson.JSONObject 构造方法可以传参 ordered = true 指定内部使用 LinkedHashMap 保证键值对顺序

ResultSetMetaData.getTableName 副表的返回值为 ""，导致 APIJSON 在 LEFT/RIGHT JOIN 的副表中不返回 SQL 函数执行值

https://bugs.mysql.com/bug.php?id=94585

第一个问题也是这个问题导致，副表所有字段对应 ResultSetMetaData.getTableName 是 ""，导致没用上缓存，然后重新查询，所以执行的 SQL 次数增加。

Demo 中 mysql-connector-java 8.0.22 复现，改为最新版 8.0.27 仍然复现。
https://mvnrepository.com/artifact/mysql/mysql-connector-java

改用 8.0.0 前一个版本 6.0.6 问题更大

PostgreSQL 一样会对 SQL 函数返回 ResultSetMetaData.getTableName 是 ""，看来得调整下副表字段存放策略。

[TommyLemon]

已解决
00dae1b

目前可用 4.8.2 的 jar 包
https://github.com/APIJSON/APIJSON-Demo/tree/master/APIJSON-Java-Server/APIJSONBoot-MultiDataSource/libs

[Shuai-S]

好的，谢谢解决问题，我试试

[Shuai-S]

第一个问题我这边复现了 bug，当 JOIN 副表有 JOIN ON 外的条件时会导致用不上查询缓存

大佬，您好，其他问题都已经解决，还这个问题没有解决，当 JOIN 副表有 JOIN ON 外的条件时会导致用不上查询缓存

希望能再看一下，谢谢