如何计算允许的最大batch_size?

问题描述

我有一个从数据帧创建数组的函数,在处理过程中需要更多空间。 因此,我实现了一个批量参数,该参数遍历数据框并选择batch_len = 1000 行左右的区域,对其进行预处理,并将它们连接到我的结果numpy数组中。

为了不间断地进行小批量生产,我想创建一个计算函数来确定一次允许处理多少行(batch_len)。

因此,我需要知道多少个numpy数组? 是否有(或多或少)恒定的大小?

我总是知道什么:行和列的数量

我主要使用float32或float64进行计算(但我愿意始终像其float64一样使该功能更简单)

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)