Блог

Я пытаюсь собрать данные, используя приведенный ниже код python в Google Colab

 tickers = ['TSLA', 'NVTA', 'SQ', 'ROKU', 'CRSP', 'PRLB', 'Z', 'TWOU', 'WORK', 'TDOC','TWST', 'ZS', 'ICE', 'SNPS', 'XLNX', 'IRDM', 'FB', 'SYRS', 'PACB', 'SE',
           'EDIT', 'MCRB', 'CGEN', 'PSTG', 'PD', 'IOVA', 'ILMN', 'NTLA', 'MTLS', 'SPOT','NSTG', 'TSM', 'SPLK', 'VCYT', 'CERS', 'TWLO', 'HUYA', 'DOCU', 'SSYS', 'PINS']

df = pd.DataFrame({})
for i in range(len(tickers)) : 
  t = tickers[i]
  df1 = pd.read_excel('https://stockrow.com/api/companies/' t '/financials.xlsx?dimension=Qamp;section=Metricsamp;sort=desc')
  df = df.append(df1)
  

Чтобы сэкономить время, я попытался использовать многопроцессорную обработку.

 def processInput(i):
  t =tickers[i]
  return pd.read_excel('https://stockrow.com/api/companies/' t '/financials.xlsx?dimension=Qamp;section=Metricsamp;sort=desc')
inputs = range(len(tickers))
pool = mp.Pool(processes=2)
results = pool.map(processInput, inputs)
summary = pd.concat(results)
  

Это работает нормально, однако при переходе на processes= 4 я получаю сообщение об ошибке.
Я не думаю, что это предел процессора, поскольку я использую Google Colab, и код довольно прост. У меня такое ощущение, что API не допускает одновременного множественного доступа.
Не могли бы вы посоветовать мне и решить проблему? Это было бы очень ценно.