Data/Data Engineering & Analystics42 데이터 스트리밍에서 "재생 가능성(Replayability)" 재생 가능성(Replayability) 재생 가능성(Replayability)의 개념 재생 가능성이란?이미 처리된 데이터를 다시 처리하거나 재수집할 수 있는 능력을 의미한다.데이터 처리 과정에서 오류가 발생하거나 변경 사항이 생겼을 때, 데이터를 올바르게 다시 처리할 수 있도록 보장한다. 재생 가능성이 중요한 이유- 오류 처리: 데이터 손실이나 오류 발생 시 재처리가 가능하다.- 데이터 일관성 유지: 데이터를 동기화하고 정확성을 유지한다.- 변경 사항 적용: 데이터 유형 또는 스키마 변경 시 쉽게 적응할 수 있다.- 개발 및 테스트 지원: 실제 데이터를 활용하여 새로운 기능을 테스트하거나 버그를 수정할 수 있다. 기술적 구현 방법- 멱등 연산(Idempotent Operations): 동일한 작업이 여.. 2025. 2. 4. [태블로] 뉴스에서 가장 많이 언급되는 단어는 무엇일까? (워드 클라우드) 0. 질문질문 : 뉴스에서 가장 많이 언급되는 단어는 무엇일까?2012년에 많이 언급된 토픽은 무엇인가?시간의 흐름에 따라 토빅의 빈도수에 차이가 있는가? 1. 데이터 데이터 : 2012년 한국언론진흥재단 뉴스 빅 데이터 2. 차트1) 2012년에 많이 언급된 토픽은 무엇인가?2012년에 많이 언급퇸 토픽은 후보, 민주, 대선, 대통령 등이 있다.대선, 정치 관련 토픽이 많은 것으로 보아 대선이 있던 해라는 것을 유추할 수 있다. 2) 시간의 흐름에 따라 토픽의 빈도 수에 차이가 있을까? 2012년 월별 토픽 워드클라우드이다.시간의 흐름에 따라 자주 사용되는 토픽도 변하였다. 3. 워드 클라우드워드 클라우드는 서술형 데이터를 분석할 때 효과적이다. 사용 빈도수가 높은 핵심 키워드를 강조할 때.. 2024. 12. 27. [태블로] 가뭄 피해가 많이 발생하는 지역은 어디일까? (하이라이트 맵) 0. 질문질문 : 가뭄 피해가 많이 발생하는 지역은 어디일까?가뭄 피해 인구는 연도와 시도에 따라 어떤 차이를 보일까?가뭄 피해 인구는 시군구에 따라 어떤 차이를 보이는가?가뭄 피해 인구는 피해 유형에 따라 지역별로 어떤 트렌드를 보이는가?가뭄 피해 기간은 시군구에 따라 어떤 차이를 보이는가? 1. 데이터 한국 수자원공사 가뭄 피해 정보 데이터이다.시도, 시군구, 읍면동, 피해 유형, 피해 인구, 피해 시작일, 피해 종료일 데이터가있다. 2. 차트1) 연도별 시도에 따른 가뭄 피해 인구 비교연도별로 보면 전라남도는 2007년부터 2019년까지 매년 가뭄 피해가 발생했다.전체적으로 가뭄 피해 인구가 많은 곳은 강원도이고 그 다음은 전라남도이다.인구가 달라서인지, 농업 등 가뭄과 관련된 인구가 달라서인지는.. 2024. 12. 27. [태블로] 녹색 기업은 녹색 제품을 많이 구입할까? (하이라이트 테이블) 0. 질문 : 녹색 기업은 녹색 제품을 많이 구매할까?발전소마다 연도별 제품 총 구매액은 얼마인가?발전소마다 연도별 녹색제품 구매액은 얼마인가?발전소마다 연도별 녹색제품 구매 비율은 어떤 차이를 보이는가? 1. 데이터 데이터 : 한국동서발전(주)의 녹색제품 구매 실적 데이터 2017~2019년도 발전소별녹색제품 구매액과 구매 비율데이터이다. 2. 차트1) 2017~2019 발전소별 총 구매액당진화력이 가장 총 구매액이 높다.동해화력이 본사와 비슷한 수준인데, 2018년도에 본사는 늘어났던 반면, 동해화력은 줄었다. 총 구매액이 전년도의 2%수준으로 낮아졌는데 운영상에 문제가 있었을 수도있다. 2) 발전소별 녹색제품 구매액1)에서 총구매액을 비교해봤고 2)에서 녹색제품 구매액 그래프를 그렸다.하이라이트.. 2024. 12. 27. [태블로] 인천광역시 시군구별 인구 구성 비율은 어떤가? (파이차트) 0. 질문질문 :시군구별 유소년 인구 구성 비율?인천광역시 시군구별 생산 연령 인구수와 고령 인구수 차이?가장 낮은 인구 비율을 차지하는 시군구?인구 비율은 시군구별로 고르게 분포되어있는가? 1. 데이터 데이터 : 2023 인천광역시_주요 연령계층별 추계인구(생산연령인구 및 고령인구 등)행정구역별(구, 시 전체) 유소년인구, 생산연령인구, 고열인구, 학령인구(초,중,고,대) 데이터이다.데이터 원본 : 인천광역시_주요 연령계층별 추계인구(생산연령인구 및 고령인구 등)_20230308 2. 차트1) 인천광역시 행정구역별 유소년 인구 비율서구 > 연수구 > 남도구 > 부평구 .. 순으로 유소년 인구가 많다. 2) 인천광역시 행정구역별 고령인구, 생산연령인구, 유소년인구 비율아래 그래프를 위에 그래프처럼 비.. 2024. 12. 15. 이전 1 2 3 4 ··· 9 다음
