본문 바로가기

AWS15

[Quantly] Ollama 로 개인형 LLM 서버 구성하기 0. 사용 환경AWS EC2 t3.largeOS : Amazon Linux 2023 1. 설치1) docker 설치// 패키지 업데이트 확인 후 새로운 파일로 수정sudo yum updatesudo yum upgrade// Docker 설치sudo yum install docker -y// Docker 서비스 시작sudo service docker start// Docker 서비스 실행 확인systemctl status docker.service// 인스턴스 실행시 실행sudo systemctl enable docker.service//Docker 그룹 권한 설정sudo usermod -a -G docker ec2-user// 실행 확인docker ps//permission denied while tr.. 2025. 5. 27.
AWS Certified Data Engineer - Associate (DEA-C01) 취득 AWS Certified Data Engineer - Associate(DEA-C01) 취득했다. pearson vue 통해 시험을 여러번 봤는데 이번에 준비물을 살펴보니 신분증을 2종류 준비해야하더라. 주민등록증은 잃어버렸고, 여권은 만료되었고, 운전면허증은 예전꺼라 영문버전이 없다.운전면혀증만 가져갔는데 다행히 문제되지 않았다. 작년에 Developer를 혼자 준비하려고했는데 오랜만에 강의들으려하니 엉덩이가 들썩들썩하고혼자하다보니 점점 안하게되었다. (+ udemy 강의가 한 주제가 3~15분 짜리 강의로 많게는 20여개로 쪼개져있는데 개인적으로 흐름이 쭉 진행되는게 아니라 계속 끊겨서 집중하기 힘들었다 + 짧게 여러개를 듣다보니 굉장히 많이 들은 기분인데 20분 지났다거나...) 스터디 그룹에 .. 2025. 4. 19.
[AWS] 4. Lambda 36. AWS LambdaAWS Lambda기능 및 역할:AWS Lambda는 서버와 인프라를 관리할 필요 없이 코드를 실행할 수 있는 서버리스 컴퓨팅 서비스사용자에게 서버 관리 부담을 덜어주며, 코드를 작성하여 원하는 작업에 집중할 수 있도록 지원특징:자동 확장: 작업량에 따라 자동으로 확장됩니다. 높은 워크로드 시에도 사용자 개입 없이 처리 가능.다양한 언어 지원: 여러 프로그래밍 언어로 코드 작성 가능.(Python, Java, Node.js, Go… )이벤트 기반 실행: 이벤트(예: S3에 파일 업로드) 발생 시 Lambda 함수가 실행되도록 구성 가능.활용 사례:데이터 처리:S3에 업로드된 파일을 처리(프로파일링, 변환, 정리, 전송 등).실시간 이벤트 처리 가능.자동화:이벤트 기반으로 작업 및.. 2025. 1. 17.
[AWS] RDS Public Access 설정 RDS Public Access 설정 방법  1. RDS의 VPC DNS 호스트이름 활성화vpc > 작업 > vpc 설정 편집 > DNS 호스트 이름 활성화 체크 > 저장  2. RDS 퍼블릭 액세스 설정RDS 인스턴스 실행 > 수정 > 연결 > 추가구성 > 퍼블릭 액세스 가능 > 저장 2024. 5. 18.
[Snowflake] S3 Load Data Snowflake 연동 Load Data -- create date format create or replace file format lightening_csv type = csv field_delimiter = ',' skip_header = 0 null_if = ('NULL', 'null') empty_field_as_null = true; -- WEB UI로 -- CREATE STAGE my_s3_stage -- STORAGE_INTEGRATION = s3_int -- URL = 's3://iron-heritage/' -- FILE_FORMAT = lightening_csv; -- create table CREATE TABLE test_table USING TEMPLATE ( SELECT ARRAY.. 2024. 3. 6.