본문 바로가기

CentOS15

[Linux] VM Root Directory Extend velog 마이그레이션 [Linux] VM Root Directory Extend (2022년 11월 8일) 0. 실행 환경 OS : Oracle 7 / CentOS 7 1. VM웨어에서 VM디스크 용량 추가 2. Root 디렉토리 확장 1) 파티션 추가 디스크와 파티션 확인 fdisk -l /dev/sda에 파이션 2개 있음. 파티션 추가 fdisk /dev/sda n > p > ENTER > ENTER > ENTER > t > 3 >8e > w n (파티션 추가) p (프라이머리 파티션 추가) 파티션 번호(default) first sector, last sector 엔터 → 디스크에 남은 모든 용량으로 파티션 추가. 사이즈 설정하려면 ( +2GB 와같이 입력) t (새 파티션 타입 설정) 3 (위에.. 2024. 3. 5.
[Linux] OS 로그 저장 설정 velog 마이그레이선 [Linux] OS 로그 저장 설정 (2022년 11월 8일) 0. 실행 환경 OS : Oracle 7.6, Centos 7 logrotate logrotate는 리눅스의 로그 관리 도구이다. 데몬이 아니고 실행파일이라 cron이 필요하다. 따로 설정하지 않으면 /etc/logrotate.conf 에 설정된 대로 로그 파일이 관리된다. 특정 로그를 따로 관리하고싶으면 /etc/logrotate.d/ 에 설정하면된다. 즉 logrotate.conf가 default설정이고 logrotate.d 디렉토리 안에 설정이 local 설정인셈이다. logrotate.conf에 기본 설정은 weekly, rotate 4 이다. 이건 로그 파일을 주단위로 만드는데 4개만 보관한다는 의미이다. lo.. 2024. 3. 5.
[Spark] Spark Streaming velog에서 보기 Spark Docs에 나오는 Spark Streaming 예제 localhost:9999에서 입력받은 글자 단어 세기 0. 실행 환경 AWS EC2 t2.xlarge OS : Red Hat 9.1 Python : 3.9 Spark : 3.3.1 Scala : 2.12.15 Java : OpenJDK 64-Bit Server VM, 1.8.0_352 1. Streaming Test 1-1. streaming.py 생성 vi streaming.py from pyspark.sql import SparkSession from pyspark.sql.functions import * # Create SparkSession spark = SparkSession \ .builder \ .appNam.. 2022. 12. 18.
[Spark] SQL 연습하기 velog에서 보기 0. 실행 환경 AWS EC2 t2.xlarge OS : Red Hat 9.1 Python : 3.9 Spark : 3.3.1 Scala : 2.12.15 Java : OpenJDK 64-Bit Server VM, 1.8.0_352 1. SQL 연습 # create data list stockSchema = ["name", "ticker", "country", "price", "currency"] stocks = [ ('Google', 'GOOGL', 'USA', 2984, 'USD'), ('Netflix', 'NFLX', 'USA', 645, 'USD'), ('Amazon', 'AMZN', 'USA', 3518, 'USD'), ('Tesla', 'TSLA', 'USA', 1222, .. 2022. 12. 18.
728x90
반응형