| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | |||
| 5 | 6 | 7 | 8 | 9 | 10 | 11 |
| 12 | 13 | 14 | 15 | 16 | 17 | 18 |
| 19 | 20 | 21 | 22 | 23 | 24 | 25 |
| 26 | 27 | 28 | 29 | 30 | 31 |
- EC2
- log
- Kafka
- helm
- CSV
- Trino
- CVAT
- Packet
- AWS
- kubernetes
- Python
- Operating System
- jvm
- OS
- ip
- Vision
- MAC address
- docker
- zookeeper
- tcp
- grafana
- java
- Spring
- aws s3
- PostgreSQL
- kubeadm
- kubectl
- JavaScript
- Network
- airflow
- Today
- Total
목록Data warehouse (2)
JUST WRITE
Feature Store 필요해?!
저번 포스팅에서 MLOps에 대해서 하나하나 살펴보았습니다. 논문을 통해 MLOps의 전체적인 흐름과 아키텍처에 대해 알아보았습니다. Machine Learning Operations Overview, Definition and Architecture 1. Why this paper? 데이터 거버넌스 관리 솔루션 개발자로 첫 커리어를 시작했습니다. 데이터를 다루다보니 자연스럽게 데이터에 깊은 관심을 가지게 되었고 데이터 엔지니어로 꿈을 꾸게 되었고 developnote-blog.tistory.com 이번 포스팅에서는 MLOps에서 중요한 component 중 하나인 Feature store에 대해 정리해보려 합니다. 저번 포스팅에서 언급만 되었고 자세히 살펴보지 않았습니다. ETRI에서 Feature S..
What is Redshift?
What is Redshift? AWS Redshift는 Amazon Web Service중에 Data Warehousing을 지원하는 솔루션이다. 페타바이트(10^15bytes)급의 대용량 데이터를 처리할수 있다. 큰 Scale의 Data를 Migration할 수 있다. AWS Interface를 통해 손쉽게 새 Cluster를 구성할 수 있다. 특징 OLAP 형태의 Column 기반 Database PostgreSQL(Version 8.0.2) 기반 -> SQL Query 사용 가능 MPP(Massively Parallel Processing)를 통한 Fast Querying 제공 다수의 Computing 노드가 병렬로 작동하여 Query 처리 각 노드는 할당된 Data에 대해서 동일한 Query 처..