pandas - GCP GCS 로 읽기, 쓰기

Google Cloud의 storage인 GCS와 pandas간 호환이 된다는 사실~

 

읽고 쓰기 모두 가능

 

읽기

_CSV_COLUMNS = [
    'contents','label'
]

training_file_path = 'gs://text/movie_train.csv'
train_df = pd.read_csv(training_file_path, 
                           names=_CSV_COLUMNS,
                           encoding='utf-8')

쓰기

pred_df.to_csv('gs://text/movie_test_sequence.csv')

 

아주 간단하쥬?

다만 pandas를 gcs와 같이 쓰려면 dependencies한 파일로 gcsfs 라이브러리를 깔아놔야한다.