如何在python中将sql查询结果划分和迭代成块，如果我有数百万条记录，是否会减少执行时间？

svujldwt 于 2021-06-26 发布在 Impala

关注(0)|答案(0)|浏览(178)

我使用impala作为数据库，试图获取2500万条记录，但是在python中执行它时花费了太多的时间，即大约40分钟。我在想把整个查询结果分成块，然后逐个迭代每个块，这会提高性能吗？
但我该怎么做呢？

sql impala python pandas bigdata

来源：https://stackoverflow.com/questions/62400055/how-to-divide-and-iterate-sql-query-result-into-chunks-in-python-is-it-going-to

暂无答案！

目前还没有任何答案，快来回答吧！

相关问题

微信公众号

热门标签

Java query python Node 开发语言 request Util 数据库 Table 后端算法 Logger Message Element Parser

最新问答

Python pillow/PIL无法识别对象“imagedraw”的属性“textsize”
回答(3) 发布于 5个月前
python-3.x ImportError：无法从“typing_extensions”导入名称“deprecated”
回答(2) 发布于 5个月前
python-3.x 我正尝试使用密码学对字典进行加密
回答(1) 发布于 5个月前
在Python的IDLE中导入audiolazy的问题
回答(1) 发布于 5个月前
如何将Python程序中的数据添加到Markdown？
回答(2) 发布于 5个月前