我正在运行sparkjob，其中运行的sparksql查询既复杂又冗长。
有些转换需要很长时间，因为作业要运行几个小时。
我试着用小文件来减少spark任务的数量，以避免vcore的浪费，但这并没有帮助我提高5%以上。
如果有人遇到同样的问题，请告知。