AWS 검색 결과
3 개의 검색 결과가 있습니다.
AWS

AWS python(파이썬) RDS 데이터베이스 읽기 및 쓰기

AWS에서는 RDS(Relational Database Services)를 이용해서 기존에 잘 알려진 RDBMS를 사용할 수 있다. PostgreSQL, MySQL, MariaDB, ORACLE, Microsoft SQL Server, Amazon Aurora 등의 DB를 이용할 수 있다. 사용방법은 어렵지 않지만, 처음할 때는 모든지 생소하기 마련이다. 오늘은 AWS python(파이썬) RDS 데이터베이스 읽기 및 쓰기에 대해서 알아보도록 하겠다. 파이썬에서 RDS를 사용할 수 있는 방법은 다양하다. sqlalchemy를 이용하는 방법도 있고, AWS wrangler를 이용할 수도 있다. 여기서는 Amazon Aurora DB를 이용하는 방법에 대해서 알아보도록 하겠다. 우선 psycopg2 패키지가..

2021. 6. 9. 06:15
AWS

AWS python(파이썬) S3 파일 읽기 및 쓰기!

AWS는 파일을 S3에 저장하고, 아테나(ATHENA)로 쿼리를 날려 데이터를 조회하고 편집할 수 있는 구조를 가지고 있다. 아테나 쿼리는 속도도 빠르고, S3에 저장된 파일을 따로 접근할 수도 있어 사용해보면 생각보다 굉장히 편리하다. S3에는 그냥 일반 파일도 저장이 가능하다. S3에 저장한 파일을 읽고 쓰는 방법은 여러가지가 있다. 하지만, 잘 정리가 안 되어(?) 있는 것 같아 포스팅을 작성하기로 하였다. 오늘은 AWS python(파이썬) S3 파일 읽기 및 쓰기에 대해서 알아보도록 하겠다. 1. 판다스(pandas) 데이터프레임으로 읽고 쓰기 판다스는 read_csv나 write_csv등 파일로 읽고 쓸 수 있는 함수들을 가지고 있다. 여기에 S3주소를 넣으면 그대로 파일을 읽고 쓸 수 있다...

2021. 6. 8. 06:12
AWS

AWS API 사용법 및 서비스 만들기

AWS에서 DB에 있는 정보를 API로 수신 받고, 결과를 제공하는 서비스를 구현해야할 필요성이 생겼다. 찾아볼 수 있는 예제는 일부 있지만, 필자의 케이스에 정확히 맞는 것은 찾기 어려웠다. 이번 기회에 정리해두려고 한다. AWS에서 API 서비스를 하기 위해서 별도의 API서버를 만들 필요는 없다. AWS에서 제공하는 서비스로 충분히 구현이 가능하기 때문이다. AWS 람다와 API Gateway를 이용하면 된다. API 게이트웨이에서 AWS람다로 데이터를 전달하면, DB조회 후 결과를 반환하면 된다. 처음에는 S3에 데이터를 저장하고, boto3를 이용해서 쿼리를 날리려고 했다. 하지만, 이렇게 하니 연속되는 코드 상에서 쿼리 결과를 받지 못한 상태에서 다음 코드로 넘어가 에러가 발생했다. 그래서 A..

2021. 4. 25. 21:17