Amazon Athena에서 Timestamp 데이터 타입 쿼리 문제 해결하기

Amazon Athena를 사용하는 데이터 분석가나 엔지니어라면, SQL 쿼리를 실행할 때 데이터 타입 불일치로 인한 문제에 직면할 수 있습니다. 특히 timestamp 데이터 타입을 다룰 때 이러한 문제가 자주 발생합니다. 이 포스트에서는 Athena에서 timestamp 데이터 타입을 올바르게 쿼리하는 방법을 소개하고자 합니다.

문제 상황

기존 SQL 경험을 바탕으로, 다음과 같이 timestamp_column 필드를 기준으로 특정 날짜 이후의 데이터를 선택하는 쿼리를 실행할 수 있습니다.

select * from table_name where timestamp_column >= '2024-03-02';

하지만, Amazon Athena에서 위 쿼리를 실행하면 다음과 같은 에러 메시지가 나타납니다.

TYPE_MISMATCH: line 1:79: Cannot apply operator: timestamp(3) <= varchar(10)

이 메시지는 timestamp_column 필드의 timestamp 데이터 타입과 문자열 리터럴 사이의 타입 불일치 때문에 발생합니다.

해결 방법

이러한 타입 불일치 문제를 해결하기 위해서는, 쿼리에서 날짜 문자열을 timestamp 타입으로 명시적으로 변환해야 합니다. 아래는 이를 해결하는 두 가지 방법입니다.

1. TIMESTAMP 키워드 사용

TIMESTAMP 키워드를 사용하여 문자열 리터럴을 timestamp 타입으로 명시적으로 변환할 수 있습니다.

select * from table_name where timestamp_column >= TIMESTAMP '2024-03-02';

2. CAST 함수 사용

또 다른 방법은 CAST 함수를 사용하여 문자열을 timestamp 타입으로 변환하는 것입니다.

select * from table_name where timestamp_column >= CAST('2024-03-04' AS TIMESTAMP);

두 방법 모두 Athena에서 timestamp 데이터 타입을 정확히 처리하여, 쿼리 실행 시 타입 불일치로 인한 에러를 방지합니다.

결론

Amazon Athena에서 timestamp 데이터 타입을 쿼리할 때, 문자열 리터럴을 직접 비교하는 대신 TIMESTAMP 키워드나 CAST 함수를 사용하여 타입을 명시적으로 지정해야 합니다. 이 방법들을 활용하면 타입 불일치로 인한 문제를 피하고, 데이터 분석 작업을 보다 원활하게 진행할 수 있습니다.