Pandas를 사용하여 대용량 Excel 파일의 특정 워크시트를 효율적으로 로드하려면 어떻게 해야 합니까?

Pandas를 사용하여 통합 문서에서 특정 워크시트를 효율적으로 로드

Pandas의 pd.read_excel() 함수는 Excel 통합 문서를 읽기 위한 강력한 도구입니다. 그러나 여러 워크시트가 포함된 대용량 파일로 작업할 때 전체 통합 문서를 로드하는 것은 비효율적일 수 있으며, 특히 몇 개의 특정 시트의 데이터만 필요한 경우 더욱 그렇습니다.

pd.read_excel을 사용한 로드 프로세스 이해( )

특정 워크시트에서 pd.read_excel()을 사용하면 전체 통합 문서가 로드되는 것처럼 보입니다. 메모리. 이는 Pandas가 통합 문서를 나타내기 위해 내부적으로 ExcelFile 개체를 사용하기 때문입니다. ExcelFile 개체는 어떤 워크시트가 지정되어 있는지에 관계없이 초기화 중에 전체 파일을 구문 분석합니다.

특정 시트를 효율적으로 로드

로드 프로세스를 최적화하려면 pd 사용을 고려하세요. .ExcelFile 개체를 직접 사용합니다. 통합 문서 경로를 사용하여 ExcelFile 개체를 인스턴스화하면 전체 파일을 다시 로드하지 않고도 특정 워크시트에 액세스할 수 있습니다.

예:

xls = pd.ExcelFile('path_to_file.xls')
df1 = pd.read_excel(xls, 'Sheet1')
df2 = pd.read_excel(xls, 'Sheet2')

이 접근 방식은 생성 중에 전체 통합 문서를 한 번만 로드합니다. ExcelFile 개체의 pd.read_excel()에 대한 후속 호출은 파일을 다시 로드하는 오버헤드 없이 지정된 워크시트에서 데이터를 검색합니다.

여러 시트 로드

또한 여러 시트를 동시에 로드하기 위해 pd.read_excel()에 시트 이름이나 색인 목록을 지정할 수 있습니다. 이는 키가 시트 이름 또는 인덱스이고 값이 해당 데이터 프레임인 사전을 반환합니다.

예:

sheet_list = ['Sheet1', 'Sheet2']
df_dict = pd.read_excel(xls, sheet_list)

모든 시트 로드

통합 문서의 모든 워크시트를 로드해야 하는 경우 sheet_name 매개변수를 다음으로 설정하세요. 없음:

df_dict = pd.read_excel(xls, sheet_name=None)

위 내용은 Pandas를 사용하여 대용량 Excel 파일의 특정 워크시트를 효율적으로 로드하려면 어떻게 해야 합니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!