Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | |
7 | 8 | 9 | 10 | 11 | 12 | 13 |
14 | 15 | 16 | 17 | 18 | 19 | 20 |
21 | 22 | 23 | 24 | 25 | 26 | 27 |
28 | 29 | 30 |
Tags
- DSL
- 7.7.1
- grok
- PYTHON
- path.data
- kibana
- logstash
- json
- Tutorial
- airflow
- KoA
- filebeat
- elasticsearch
- OPCUA
- ELK
- windows
- query
- Crontab
- configure
- elastic
- venv
- Data Engineering
- dense_vector
- ubuntu
- node.js
- typescript
- CSV
- package.json
- framework
- devtools
Archives
- Today
- Total
목록streaming data (1)
Gibbs Kim's playground
[Trends-1] (2024) Data Engineering Trends
올해의 기술 트렌드를 조사하다가 geeksforgeeks에서 2024년 기준 데이터 엔지니어링 Top 10 trends를 언급하여 한글로 기록해두려고 한다. (의역 및 오역이 있을 수 있습니다.) 1. 실시간 데이터 처리에 대한 큰 관심 최근 조직에서 빠른 결정에 대한 관심과 함께 실시간 데이터 처리가 매우 중요해졌다. 이러한 요구조건에 맞추어 데이터 엔지니어들은 다양한 곳에서 수집되는 스트리밍 데이터를 다루는 능력과 실시간 분석에 대한 능력이 필요할 것이다. - Keywords - 스트리밍 데이터 수집에 있어 Apache Kafka와 Apache Flink가 중요한 도구로 사용될 것이다. - 실시간 데이터 처리는 어떻게 수집하는가와 어떻게 데이터를 분석할 것인가가 주요한 변화일 것이다..
Trends
2024. 7. 17. 15:34