대용량2 파이썬을 이용한 대용량 파일 다루기 대용량 파일 처리는 대량의 데이터를 다루는 경우 자주 일어나는 문제 중 하나입니다. 대용량 파일을 처리하려면 시스템 자원을 효율적으로 사용하고, 데이터를 분할하고 병렬 처리하는 방법이 필요합니다. 파이썬에서는 다양한 방법을 사용하여 대용량 파일을 처리할 수 있습니다. 파일 분할 대용량 파일을 처리할 때는 파일을 작은 조각으로 나누어 처리하는 것이 좋습니다. 이를 통해 메모리 사용량을 줄이고 파일 처리 속도를 높일 수 있습니다. 이를 위해, 파일을 나누어 처리하는 방법이 있습니다. 이를 통해 데이터를 분할하여 여러 개의 파일로 나눌 수 있습니다. 제너레이터(Generator) 함수 제너레이터 함수는 이터레이터를 생성하는 함수입니다. 대용량 파일을 처리할 때 이 함수를 사용하면 파일을 메모리에.. 2023. 2. 22. python os 라이브러리 + 대규모 파일 처리하기 os 라이브러리는 파일 및 디렉토리 관리와 관련된 다양한 함수를 제공합니다. 이를 이용하여 현재 작업 디렉토리 조회, 디렉토리 생성, 디렉토리 삭제, 파일 생성, 파일 삭제, 파일 이동, 파일 이름 변경 등의 작업을 수행할 수 있습니다. +작업진행은 COLAB에서 진행했음을 알립니다! 현재 작업 디렉토리 조회 os.getcwd() 함수를 이용하여 현재 작업 디렉토리를 조회할 수 있습니다. import os print(os.getcwd()) 디렉토리 생성 os.mkdir() 함수를 이용하여 디렉토리를 생성할 수 있습니다. 생성하려는 디렉토리의 경로를 인자로 전달합니다. import os os.mkdir("new_dir") new_dir 폴더가 생겼습니다!! 디렉토리 삭제 os.rmdir(.. 2023. 2. 21. 이전 1 다음
