JUST WRITE

따릉이 대여소 정보 Dashboard 구성(2) - AWS S3 파일 업로드

AWS Cloud 실습을 위해 진행한 개인 프로젝트를 정리한 글입니다. 서울 공공데이터에서 따릉이 대여소 정보를 정제하여 CSV 파일로 만들었다. 이번 글에서는 CSV 파일을 AWS S3에 업로드하는 작업을 정리해보려 한다. Python Code로 CSV 파일을 AWS S3에 업로드하였다. AWS IAM 사용자 추가 Amazon S3 작업을 진행하기 전에 S3에 접근 가능한 IAM 사용자를 추가해줘야 한다. AWS IAM에서 사용자 추가를 한다. 적절한 사용자 이름을 지정해준 다음 AWS 자격 증명 유형을 액세스 키 방식으로 한다. Python으로 S3에 접근하기 위해서이다. 다음은 권한 선택 부분이다. 기존 정책 직접 연결 방식으로 해서 기존에 있는 AmazonS3FullAccess 정책을 선택해준다...
Cloud 2022. 2. 15. 13:33
HashTable

이 글은 책 알고리즘 도감에서 HashTable 부분을 정리한 글입니다. HashTable HashTable은 Key와 Value가 한 쌍을 이뤄서 Data를 저장하는 자료구조입니다. 일반적으로 Key는 Data 식별자이며, Value는 Data의 내용입니다. Hash 함수와 함께 Data 검색을 효율적으로 사용되는 구조입니다. HashTable은 내부적으로 배열을 사용하여 Data를 저장합니다. Key값에 대한 Hash 함수를 적용해서 Index 값을 생성합니다. 생성한 Index에 해당 Key에 대한 Value값을 배열에 저장합니다. Hash 함수 Hash 함수는 주어진 Data를 고정 길이의 불규칙한 숫자로 변환하는 함수이다. 불규칙한 숫자는 Data를 요약한 것으로 Hash 값이라 한다. Hash..
Programing/Algorithm 2022. 2. 14. 21:01
따릉이 대여소 정보 Dashboard 구성(1) - Python으로 데이터 정제

AWS Cloud 실습을 위해 진행한 개인 프로젝트를 정리한 글입니다. AWS Cloud를 공부하기 위해 따릉이 대여서 정보 Dashboard 구성 프로젝트를 진행하였다. 위 그림에서 빨간색 부분인 Data 정제 부분을 먼저 진행하였다. 서울 공공데이터에서 2가지 데이터를 가져와서 통합 및 정제를 진행하였다. 서울특별시 공공자전거 대여소 정보(21년 12월 기준) -> csv 파일 서울특별시 공공자전거 실시간 대여 정보 -> OpenAPI로 제공 실시간 대여 정보에는 아래와 같은 정보가 존재한다. 출력명 출력설명 rackTotCnt 거치대 개수 stationName 대여소 이름 parkingBikeTotCnt 자전거 주차 총 건수 shared 거치율 stationLatitude 위도 stationLong..
Cloud 2022. 2. 14. 16:48
따릉이 대여소 정보 Dashboard 구성(0) - 시작

AWS Cloud 실습을 위해 진행한 개인 프로젝트를 정리한 글입니다. AWS Cloud를 공부하면서 이론만 공부하기보다는 실습이 중요하다는 생각이 들었다. 서울 공공데이터를 활용하여 AWS 주요 Service를 활용하여 간단한 Dashboard를 구성해보았다. 서울 공공데이터 중 공공자전거인 따릉이 대여소 정보를 보여주는 Dashboard를 구성하기로 하였다. 아래 2가지 정보를 수집하였다. 서울특별시 공공자전거 대여소 정보 21년 12월 기준 정보, csv 파일로 제공 관련 링크 서울특별시 공공자전거 실시간 대여 정보 OpenAPI로 제공 관련 링크 공공자전거 실시간 대여 정보를 일별로 수집하여 대여소 정보와 통합하고 정제하였다. 정제한 데이터를 csv 파일로 생성하여 Amazon S3에 업로드한다...
Cloud 2022. 2. 13. 17:44
What is Amazon EC2?

What is Amazon EC2? Amazon Elastic Compute Cloud(Amazon EC2) AWS에서 제공하는 Cloud Computing Service이다. 필요에 따라 Web Interface나 API를 통해 몇 분 이내에 인스턴스 용량을 늘리거나 줄일 수 있다. AWS Auto Scaling을 통해서 자동으로 인스턴스를 Scale 할 수 있다. 보안 그룹을 사용해 Protocol, Port, IP 범위를 통한 방화벽 기능을 제공한다. 기능 인스턴스 가상 인터넷 환경 제공하는 Instance 유형은 CPU, Memory, Storage, Network 사양에 따라 다양하게 제공된다. m3.medium -> m에 Generation을 뜻하는 숫자, 점 뒤에 전체적인 사용 규모를 말하는..
Cloud 2022. 2. 12. 22:07
What is Amazon S3?

What is Amazon S3? Amazon Simple Storage Service(Amazone S3)는 AWS에서 제공하는 Cloud Storage Service 입니다. 온라인 Backup 및 Data Archiving을 위한 Service이다. S3는 최소한의 특징을 가지고 개발자들이 Web-scale Computing을 쉽게할 수 있도록 만들어졌다. 특징 저장된 Object에 대한 안정성 S3 API를 통해 Data 전송 가능 AWS Security(IAM, ACL)를 통해서 Access 관리 AWS Monitoring Service(CloudTrail, CloudWatch, Macie) 등을 통해서 Monitering 제공 사례 Amazon S3 뛰어난 확장성, 가용성, 보안 및 성능으로 ..
Cloud 2022. 2. 11. 13:52
Prev 1 ··· 17 18 19 20 21 22 23 ··· 35 Next