84669 Lernen von Personen
152542 Lernen von Personen
20005 Lernen von Personen
5487 Lernen von Personen
7821 Lernen von Personen
359900 Lernen von Personen
3350 Lernen von Personen
180660 Lernen von Personen
48569 Lernen von Personen
18603 Lernen von Personen
40936 Lernen von Personen
1549 Lernen von Personen
1183 Lernen von Personen
32909 Lernen von Personen
改成异步也没多大用处,你这里是计算密集型,你的费时应该在 "key in need_cols", need_cols应该也是一个很大的数组,想办法优化这块就好。试试改成这样
ind = set(i.keys()) & set(need_cols) temp = {d: i[d] for d in ind}
自问自答
改成生成器就好了
def data_generator(*args): for i in v_data: # v_data是个较大的dict temp = {key: value for key, value in i.iteritems() if key in need_cols} # 部分key不需要 temp["sid"] = sid # 单独加一个sid yield temp
改成异步也没多大用处,你这里是计算密集型,你的费时应该在 "key in need_cols", need_cols应该也是一个很大的数组,想办法优化这块就好。
试试改成这样
自问自答
改成生成器就好了