주어진 상황과 경험들을 재구성하고 종합할 수 있는 시스템 구현해야겠음. 금방 또 잊기 전에

배경

되돌아 보니까, 당연히 예상대로 된 게 없고 아쉬운 게 있음 그렇다고 지금까지 경험들과 주어진 상황을 잊어버리면 안타까움. 앞으로 더해야할 것도 있고

최대한 내가 가진 것들을 종합할 구심점을 나름대로 찾고자함. 가능하면 앞으로 경험할 상황들에도 유용한 형태로

그러다 보니, 게시판 서비스를 프로젝트 관리 게시판으로 커스텀하면 좋을 듯함.

프로젝트 협업 게시판

축구 게시판, 야구 게시판, ... => Data Modeling, Database Managing, Web Application(공통), Infrastructure 등의 프로젝트 관리 하위 주제들로 변형하고

축구 게시판의 게시글1,2,3,... => Data Modeling 게시판의 article-1,2,3

으로 생각하면 기술적으로야 같은 게시판이여도, 나한테는 의미있는 관리 시스템이 될듯

한편, 과정은 컨플루언스에 앞으로 기록

• 데이터베이스를 위한 개념 데이터 모델링
• 데이터베이스의&nbsp&nbsp&nbsp&nbsp&nbsp&nbsp&nbsp&nbsp논리 데이터 모델링
• 데이터베이스에 의한 물리 데이터 모델링

데이터 모델링은 데이터베이스에 기록하기 위한 데이터 우선순위 결정 과정. 그리고 주 기록 대상은 비즈니스 또는 상대방에게 소중한 것

데이터베이스는 도서관처럼 1명의 개인이 쓰기에는 충분하나, 여럿이 사용하면 언제나 공간이 부족하고, 뒤죽박죽. 우선 100GB정도의 데이터베이스를 상정하고 생각하겠음.

매번 그렇듯이, 비즈니스는 혼자 하는 게 아니라 여럿이 하거나 서로 상이한 자료를 바탕으로 하는 것, 그러면 직관적인 그림으로 협업. 대표적으로 Entity Relationship Diagram(ERD)

데이터베이스를 위한 개념 데이터

데이터베이스는 좁으니까, 중요하고 의미있는 데이터(= 핵심적인 개념데이터)만 추출해서 담아야함

ERD의 시작: 자료 속 핵심을 찾자

자료 요약하기

이런 작업은 순수하게 사람 머리속에서 개념적으로 작동한다고 생각중. '개념적'이라는 단어 참 편리하다

요약에서 ERD 만들기

Entity도 단위로서 우선 수용. 보다 정확히는 데이터베이스에 중요한 것만 기록하기 위한 생각의 단위.

데이터 표준화

감자탕을 시켰는데, 고기가 나와서 감자가 안나와도 넘어갔지만, 사실 감자탕의 감자가 potato가 아닌건 꽤 신기했던듯,

이렇듯 데이터에다가 이름 정할때 동음이의어가 있으면 명확히 해주고, 공유해야 혼란 최소화 협업의 1단계는 용어와 의미의 통일

데이터 표준화 문서 구글 docs(미완)

데이터베이스의 논리 데이터: 연상과 연결 데이터

관계(=연상하고 연결하기)를 짓다

1. 이미 두 눈에 보이는 엔터티 간에 연결을 짓다 2. 눈에 보이는 엔터티로부터 눈에 안보이는 엔터티를 연상하고 연결하다

근데 내가 경험해보지 못한 영역에 대해서 눈에 안보이는 걸 연상한다는 건 불가능한듯, 사장님이 도와줘야함.

ERD 눈에 안보이는 것

주어진 자료에는 사실 요구사항관리시스템으로 명시되어있으나, 내 개인적인 사고 흐름 속에서 나는 프로젝트관리시스템이 보다 포괄적인 표현이라고 나도 모르게 생각했음

그래서 눈에 보이지는 않지만, 제안요청서라는 엔터티를 연상하고 프로젝트 엔터티와 연결함

하지만 앞서 말했듯이, 데이터베이스는 노트북 HDD처럼 유한한 물리적 공간(나는 100GB 상정)을 가짐. 분명 제안요청서는 필요한 정보이지만, 이미 word나 한글로 제공된다고 할 때, 이를 추가적으로 재가공해서 데이터베이스에 담을 만큼 최우선 순위인지는 현재 나의 역량으로는 가늠이 안됨.

모든 고객사가 제안요청서를 어떻게 보내는지는 몰라도, 거기에 관심있는 수주사는 제안요청서를 반드시 저장해놓을 테니, 파일서버가 됬든 하다못해 서랍장이든 저장위치 칼럼 추가하면 해결될듯

관계 짓기와 Primary key

데이터베이스에서는 관계는 primary key 설정으로 실현한다고 생각중.

관계 짓기를 A -> B 로 연결 짓는 것으로 생각중 A를 대표할 수 있는 A의 primary key를 B에서 Foreign key로 설정함으로서 A의 중요 속성을 B가 가지게 되었으니, 구체적인 Query를 통해 A는 B를 찾아갈 수 있고, B도 A를 찾아갈수 있게 되니까?

한편 primary key는 일반적으론 index 기능을 가지는데, index의 value가 변환을 거쳐 최종적으로 원통 좌표계 상의 벡터로 표현되고, 이에 따라 물리적으로 실재하는 HDD의 head를 향해 디스크를 회전시키걸로 생각하는 중. 그러면 여기서부터 물리단계로 넘어가는 느낌.

SSD는 심신안정을 위해 패스

정규화

원래 위와같은 데이터 모델링과 별개로 시작되었으나, 매번 그렇듯이 비교대조하기 보단 같이 쓰는게 좋은듯 정규화에서 pk를 엄밀히 정하고 검증하는 과정으로 생각하는 중이니까, 우선 여기다가 배치함

데이터베이스에 의한 물리 데이터

Database server = DBMS + database(HDD로 존재하다고 가정) 라고 생각할 때,

논리 데이터가 HDD에 0,1로 기록되면, 존재하는 물리 데이터가 된다고 생각 중.

(논리 데이터를 담는 단위가 엔터티, 물리 데이터를 담는 단위가 테이블로 우선 생각 중)

한편, 일단 DBMS는 도서관장, database는 도서관 정도로 우선 이해

DBMS가 기록하는 방식

사람이 기억을 어떻게 저장하는지는 모르겠지만, 아무래도 사람이랑 다른 것 같음.

아주 원시적인 DBMS를 가정할 때, 구획이나 순서없이 마치 C array처럼 들어오는대로 순서대로 기록. 이런 방식이 데이터가 들어오는 것(Input) 요청에 대해선 효과적이나

나중에 원하는 데이터를 찾는 것(Output)에 대해선 맨 처음 입력 데이터부터 원하는 게 나올때까지 접근하고 확인하고 아니면 넘어가고의 작업을 수행해야함. 마치 C에서 for문과 if문으로 array 조회하는 과정으로 생각 중

하지만 oracle DBMS, postgresql DBMS의 경우, 전문전문가들이 이러한 데이터베이스의 I/O 사이의 균형을 찾기 위해 훨씬 치밀하고 세련된 구조와 방식으로 작동하는 것으로 앎.

PostgresSQL database Architecture

Oracle database Arachitecture

이러한 주어진 구조에 악영향을 미치는 어떤걸 찾고 찾아서 테이블을 기록하지만 않는다면, 전문전문가들에게 도움받는 형태일듯

데이터타입

데이터베이스 DBMS(가령, postgresSQL, Oracle)는 물리적으로 실재하는 HDD, SSD에 저장할때, 문법적으로 한글이나 알파벳을 기계어인 0,1로 전환

DBMS 종류마다 이 기계어를 0,1 전환할 때 방식이 조금 다를듯

postgresql data type

oracle data type

gitops의 구현체

kubernetes 진입하는대로

https://coffeewhale.com/kubernetes/gitops/argocd/2020/02/10/gitops-argocd/

통해서 gitops 실현

하지만, aws상에서 새로운 서비스를 제공하기 위해서는 새로운 vpc, subnet, router, gateway 등을 마치 데이터센터 짓듯이 새로 생성해야한다.

이와관련된 기본 vpc 생성법 참고

ecs ecr을 통한 배포 자동화 개념 습득

https://velog.io/@hax0r/AWS-ECSECR-%EC%9D%84-%ED%86%B5%ED%95%9C-%EC%84%9C%EB%B9%84%EC%8A%A4-%EB%B0%B0%ED%8F%AC

aws network https://hyeyeon13.tistory.com/20

ec2 install kubectl

https://docs.aws.amazon.com/ko_kr/eks/latest/userguide/install-kubectl.html

ec2 install eksctl

https://docs.aws.amazon.com/ko_kr/eks/latest/userguide/eksctl.html

docker image of springMVC by Dockerfile, gradle, maven

현재까지 자료가 spring boot로 되어있어, springMVC를 우선 boot로 전환

springMVC -springBoot

https://velog.io/@hellonayeon/springmvc-vs-springboot

gradle-springboot 에서 dockerfile 만들기

https://iseunghan.tistory.com/m/421

중간에 무슨일이 일어나면 감당이 안되므로, 우선있는그대로 할까했지만,

현재 나는 mvn이 친숙하므로 maven

https://warpgate3.tistory.com/entry/Build-Docker-Image-with-Maven-java

역시 이미 해본사람 존재, 다만 아리송한 게 아직 많음

일단 이클립스에서 maven 빌드

http://itpsolver.com/%EC%9D%B4%ED%81%B4%EB%A6%BD%EC%8A%A4-maven-%EC%9C%BC%EB%A1%9C-jar-%ED%8C%8C%EC%9D%BC-%EB%A7%90%EC%95%84%EC%84%9C-%EB%A7%8C%EB%93%A4%EA%B8%B0/

간단하게 바로 되긴하는데, maven과 관련된 다양한 폴더들이 target 하위에 생김

아마도 이걸 해결하려면 이클립스를 통해서 maven을 접근하기보다

이클립스와 별개로 maven을 깔아서 빌드해야할듯

원래 maven, framework 등이 따로 존재하던 건데 이클립스라는 편집기로 쉽게 접근하는 거였던 거니 그런가 보다함

이클립스 .settings file 설정

https://mine-it-record.tistory.com/m/160

dockerfile

https://umanking.github.io/2021/07/11/spring-boot-docker-starter/ https://thalals.tistory.com/m/240

maven

https://warpgate3.tistory.com/entry/Build-Docker-Image-with-Maven-java

Container와 Container Image 기본 개념 그리고 Docker Desktop 설치법에 따라서 우선 설치까지 완료

• Dockerfile is code file of Docker Container Image which will be builded
• Docker Container Image(이하 container image)는 Container의 설계도
• Docker Container(이하 container)는 설계도에 따라 구현된 결과물
• Docker Desktop은 Powershell을 중심으로 Windows 10에서 Docker를 효과적으로 다루기 위한 도구

Docker Desktop

DockerLabs Tutorial

docker run -d -p 80:80 docker/getting-started

를 Windows 10의 powershell에서 container를 실행하면, container image가 없을 시 자동으로 container image를 다운로드해주고, container로 구현하여 실행까지 해준다.

-p 80:80 옵션에 따라서

내 노트북이 자기 자신을 지칭할 때 쓰는 ip인 127.0.0.1의 80번 포트와

Container가 자기 자신을 지칭할 때 쓰는 ip의 127.0.0.1의 80번 포트를 포트포워딩 시켜준다.

127.0.0.1은 사람들끼리 대화할 때 사용하는 '나 , 너' 중 나에 대응하는 개념으로 생각 중. 그러니까 노트북 입장에서의 스스로를 '나'라고 지칭할 수 있고, 컨테이너 입장에서도 스스로를 '나' 라고 지칭가능

이러한 포트포워딩에 따라, 내 노트북에서 127.0.0.1:80로 들어가면 DockerLabs의 Tutorial이 뜬다.

위와 같이 직접 배포한 컨테이너에 기본 탑재된 튜토리얼 내용은 공식 사이트에서도 제공한다

Dockerfile

pre-result

신기하게도 blabla.dockerfile 이나 blabla.Dockerfile 이 아니었다.

확장자가 없다.

progress

Getting our App 에서 javascript 기반 앱 프로젝트의 소스코드를 제공

프로젝트 구조는

app -spec -src -package.json -yarn.lock

Building the App's Container Image 에서 앞선 프로젝트 폴더 내부에 Dockerfile 생성

app -spec -src -package.json -yarn.lock -Dockerfile

Dockerfile은

FROM node:12-alpine
# Adding build tools to make yarn install work on Apple silicon / arm64 machines
RUN apk add --no-cache python2 g++ make
WORKDIR /app
COPY . .
RUN yarn install --production
CMD ["node", "src/index.js"]

Starting an App Container에서

docker build -t todolist-container-image01 . 명령어로 빌드

그러면 container image 가 생성, 참고로 build는 알파벳으로 적힌 소스코드를 01010..기계로 변환하는 명령어로 이해중

그리고 이걸 최초 tutorial container를 실행켰던 것과같이

docker run -d -p 3000:3000 todolist-container-image01

자바 프로젝트를 container image로 만드는 과정도 이와 같을 것으로 예상

Push Container for Sharing

github와 같은 dockerhub을 통해 내가 만든 container를 공유할 수 있다.

다만, github는 프로젝트 소스코드 레벨에서 공유한다면, dockerhub은 이러한 프로젝트를 빌드해서 바로 배포할 수 있는 container 레벨로 공유

virtualbox 보다 공유에 있어 효과적인 부분.

dockerhub 전송 준비

dockerhub으로 전송하기 위해선 docker tag라는 명령어로 dockerhub의 설정에 맞게 이미지명

앞에 [목표로 하는 dockerhub 계정명]/[] 를 붙여야 한다.

github에서 repository에 push 할때는 다른 추가적인 설정이다.

docker tag [내가 dockerhub으로 보내고 싶은 이미지의 로컬 repository명]:latest [내 dockerhub 계정명]/[우선은 앞에꺼 반복]:latest

docker tag todolist-container-image01:latest devsacti/todolist-container-image01:lastest

그러면 github 격인 dockerhub에 해당 레포지토리가 바로 생기고

그 안에 container가 쌓인다.

Docker and AWS

Pull Container

위에서 push 한 컨테이너를 aws ec2에서 pull 하여 바로 배포해보겠다.

ec2 and docker

ssh로 ec2 접속하는 법 참고하여 ssh 접속

당연히 docker 명령어가 존재하지않는다.

이에 따라서 Windows 10에서와 같이 aws linux ec2에 docker 환경을 설치할 수 있다. 그러면 windows 10에서 powershell로 docker 명령어를 수행했던 것처럼 가능

내가 접속한 서버에 docker image가 없었지만

docker pull을 통해서 dockerhub에서 다운로드 받은 다음.

docker images 가 성공적으로 다운로드된걸 조회하고

동일하게 3000으로 run

그러면 이에 따라 ps가 잡히고, 우측 크롬을 통해서 해당 앱이 배포된걸 확인

* 참고로 13.209.40.100 는 원래 노출되면 안되나, ec2를 껐다키면 새로 할당되는 것을 알고, 보안그룹을 재설정할것이이게 노출

보안그룹의 경우 별도로 다뤄야하는데, 얼추 port 열고닫고 명령어를 보다 손쉽게 제어하게 해주는 개념으로 일단 마무리

한편, dockerhub에 대응하여

aws에는 Amazon Elastic Container Registry 가 있어보임.

.

Docker Tutorial + + 을 보고 정리한 내용

virtualbox와 같은 Virtualization Software

다만, 다루는 단위가 VM이 아닌, Container

우선 inch와 cm같은 느낌을 이해 중

추가

VM and Container

VM는 용량을 축소했을뿐 컴퓨터 구성과 완전히 똑같은 것으로 우선 이해

VM of VirtualBox = HW + OS + Libraries + Dependencies ; 내 노트북 + CentOS7 + jdk + tomcat = Web Application Server

* 참고로 jdk가 library에 속하는지, tomcat이 Dependencies인지 모름, 왜냐하면 참고한 자료에서 구체화한걸 아직보지 못해서, 일단 구색은 맞춰봄

다만, 컨테이너는 완전히 다른 목표를 가지고 새로운 단위로 느껴짐

inch 와 cm의 관계로 우선 이해, 서로 물리적으로 공통점을 찾을라면 찾겠지만, 전환하려고하면 아주 긴 소수점만 나오는 관계, 그러니까 있는그대로 수용

Container of Docker Desktop = HW + OS kernel + Libraries + Dependency ; 내 노트북 + linux + jdk + tomcat = web application Container

OS와 OS Kernel의 차이

https://5equal0.tistory.com/m/entry/Linux-Kernel-%EC%BB%A4%EB%84%90%EC%9D%98-%EA%B0%9C%EB%85%90%EA%B3%BC-%EC%BB%A4%EB%84%90%EC%9D%98-%EA%B5%AC%EC%A1%B0

CentOS, Ubuntu와 같은 사례를 포괄하는 집합으로서의 Linux는 OS

그러나

kernel로서의 Linux는 OS kernel

근데, 이렇게 명목적으로 구분해도 코드 까서 몇행부터 몇행까지 OS이고 OS kernel인지 구분하려고하면 안될거같음. 느낌상 그러니까 패스

지금껏 내가 다른 사람들과 github를 사용해서

각자 맡은 기능을 동시에 함께 개발했던 것들도 넓은 의미의 분할 정복 같음.

부분 문제들을 혼자서 풀어야 분할 정복이다 라는 말은 없으니까

그리고, 이번에 여러 가지 영역을 혼자서 진행해보면서, 혼자서는 제어하기 힘든, 예상치 못한 일이 매우 많았음. 앞으로도 그럴듯

그렇다면, 기존에 산개되어있던 문제들을 종합문제의 하위 부분문제들로 보이게 해주는 gitops에 대한 경험과 이해를 시도. 하다보면 늘것지

GitOps

레드햇 감사. rpm 때도 감사

감사한 레드햇 설명을 보니, 엄청 정성스레 적어주었다는 느낌을 우선 받았음. 열심히 볼 예정.

그나마 친숙한 단어들은 쿠버네티스와 클라우드 네이티브 애플리케이션

쿠버네티스 설명을 보니까, 컨테이너, 클라우드 등이 보임 이것들부터 친해져야겠음

쿠버네티스

https://always-try.tistory.com/m/71

Spring Framework를 활용한 게시판 웹 어플리케이션 개발 프로젝트

상황

part1 프레임워크 관련

• XML 구성 SpringFramework
• Java 구성 SpringFramework
• Java 구성 Spring Boot       part2 인프라 관련
• 빌드 된 app을 Tomcat 9.x 에서 서비스
• Apache Http 서버로 서비스 노출

* 상위 2 요소는 중복가능

part3 기타 요소

• 데이터 처리는 Mybatis
• DB 는 PostgreSQL
• MSA로 개선을 염두에 두고 모놀리식으로 개발할 것
• 서버 환경은 선택

part4 산출물

• 요구사항 정의서(유스 케이스)
• 클래스 다어그램
• 시퀀스 다이언그램
• ERD
• UI 기획서

* 할 수 있고, 필수적인 것부터

접근과 목표

접근과 목표1 : 우선 공통 환경을 구현하자

• Docs related with requirement, design
• Package for developer
• Infra for deployment

각 part별로 전문담당자가 대체로 존재할 만큼, 다양한 영역.

하다보면 되것지만, 기한 내 할려면 ,나 혼자 다할 생각보단, 현업, 개발자 등 다수의 관계자들에게 공통된 환경을 구현해서 빠르고 효과적으로 협업할 수 있게 구축

이때 인프라는 여러명의 관계자가 같이 고민은 해도, 각자 서버를 설정하지는 않음. 그래서 구글 독스같은 협업 환경과는 거리가 먼듯

그러나, 인프라는 모두의 작업물이 종합되어 배포되는 공통환경인듯. 그러니까 머릿속으로나마 인식할 수 있게 전달하면 좋것지.

배운 점

분할 정복과 협업

여러 가지 영역과 예상하지 못한 일들의 연속 속에서 자연스럽게 무기력해지고 악순환의 고리가 형성되었음.

그렇지만 분할하고 분할해서 나는 못하더라도, 다른 사람이 참여할 수 있게 만들면서 끝은 보인듯

미완성도 경험

언제나 완성하면 좋겠지만, 한 사이클 동안 하고자 했던 것은 못했음. 그래도 느리지만 천천히 계속 다듬어갈 예정

우선 있는그대로, 그 다음 분석

지금 구현하는 리눅스 쉘 명령어 cat은 뭐의 약자일까요? 명령어 만든 사람이 고양이(cat) 좋아해서 그렇게 했을 수도 있어요. java처럼요. 마침 yum(Yellow dog Updater, Modified)에 dog도 있으니까. 검색해볼게요

운영체제 수업 때도 그랬지만, 일단은 받아들이면 그 다음이 있는듯.

하지만, 처음에 redhat centos, aws ec2, ubuntu 등등 알아야할 게 많아서 심술이 났고 받아들이길 거부했음.

근데 보다 보니까, 처음보는 사람한테 중구난방인 단어들은 대체로, 서로 모르는 사람들이 서로를 위해 무료로 공개한 것들임.

누가 밥사주는 것도 아닌데, 무료로 공개하고 유지보수되는 것들, redhat centos, yum 등,을 생각하면 감사부터 해야겠구나 함. 그래야 내가 덜 힘들기도 하고

C언어로 Linux cat 구현 예시

기존 로컬환경에서 framework 파트에서 만든 뼈대를 바탕으로 세부코드 구현

게시글 페이징

포스트그레 기반 페이징을 해야함.

화면은 최소한으로 부트스트랩 활용하려고 했는데,

test 통해서 화면없이 이클립스 console 로 기능 테스트 부터

화면까지 만들다가 에러뜨면 그것도 무기력해짐. 백엔드 자잘하게 수정할때마다 건드려야할 영역도 하나 추가되는 셈이고

특히 entity, dto 변수명 바꾸는데 엄청나게 강한 거부감이 개인적으로 생김.

더 나은 건데도 말이지, 틀려도 되는 데 말이지, 고치면 되는데

페이징 쿼리 만들기

샘플 데이터 넣기

로컬 포스트그레 SQL에 페이징 기능을 체크할 데이터를 넣는다.

dbeaver 기존 행 복사 기능으로 페이징을 테스트할 수 있게 총 22행 넣음. 100 ~ 121

참고로 수동으로 넣는 것이기 때문에, 기존 시퀀스랑 충돌안나게 100번부터 시작함

쿼리 페이징 작성

https://dejavuhyo.github.io/posts/pagination-in-postgresql/

1페이지당 5개의 글

0번 페이지 쿼리

select * from article
order by article_id
limit 5
offset 0 * 5;

1번 페이지 쿼리

select * from article
order by article_id
limit 5
offset 1 * 5;

2번 페이지 쿼리

select * from article
order by article_id
limit 5
offset 2 * 5;

10 , 5 , 0 = 2 * 5 , 1 * 5 , 0 * 5 = (3-1) * 5, (2-1) * 5 , (1-1) * 5

어느 새 익숙해져서 그렇지 10이 10이지, 이걸 5의 배수, 나아가 0번째부터 세는 컴퓨터 방식을 사람 방식으로 바꾸기 위해

2를 3에서 1 뺀수로 다르게 생각한다는 건 흥미롭지만 신기하다.

나야 그냥 감사

최종 추상화

select * from article
order by article_id
limit [1페이지당 보여주고 싶은 게시글 수]
offset [사람이 화면상에서 클릭한 페이지 번호 - 1] * 5;

추가로 *는 성능차원에서 나중에 칼럼으로 구체화해야함

offset과 limit 공식가이드 https://www.postgresql.org/docs/12/queries-limit.html

한편, postgresql이 offset 지원해줘서 이렇게 쉽게 되는거지, 이거없으면 개인적으로 5시간 써도 페이징 쿼리 못짰음. dbms를 바꾸면 된다.

dbeaver 자동 sql 활용

아쉽게도 oracle sql developer 와 같은 자동 조인 쿼리 생성은 아직 못찾음, 근데 이것만해도 손가락 수명 잘 지킬듯

이제는 이걸 java app에서 작동시켜야함, 그러기 위해서

limit은 constant 이되 여러 개발자가 같이 쓸수있게 해야 하고

offset을 constant value로 처리한 것을 variable로 처리해야서 사용자 입력을 받아야함

백엔드 구현

java - mybatis

java 시간의 경우 : Article Entity and DTO

create_date, last_update가 서로 길이가 달라서 따로 따로 타입을 지정해주면 효율적인듯한데,

우선, java time 의 LocalDate , LocalDateTime 활용

https://footprint-of-nawin.tistory.com/67

예전에는 Date 썼는데

https://seeminglyjs.tistory.com/197

java 시간 관련 타입이 꽤 골치 아픈 이슈가 있었던 거 같아서 jpa 공부하면서 타입 구체화해야할듯

java.util.Date , java.sql.Date가 서로 다르다 https://hashcode.co.kr/questions/2038/javautildate%EB%A5%BC-javasqldate%EB%A1%9C-%EC%96%B4%EB%96%BB%EA%B2%8C-%EB%B0%94%EA%BE%B8%EB%82%98%EC%9A%94

mybatis mapper 설정

1. @Select 어노테이션 활용

단순한 쿼리들의 경우 이게 더 편함, 지금은 페이징 구현이 언제 될지 모르니까 이걸로 할 예정

다만 복잡한 쿼리의 경우, 쿼리만 봐도 멘탈 나가는 사이즈가 되기 때문에 별도로 쿼리 빼는 방식이 xml 조금 더 설정해야함

그리고 마이바티스에서 제공하는 selectkey 쓸려면 xml 방식이 필수일듯?

2. xml 방식

참고자료 https://github.com/devsacti/eveadam_blog/blob/main/src/main/resources/com/eveadam/blog/mapper/article/ArticleMapper.xml

이클립스 개발의 시작과 끝 : clean 하세요

게시판

추가

Android and stream

https://developer.android.com/reference/java/util/stream/Stream

수치는 모르는데, 안드로이드에서 쓰이는 스트림 많이 쓰면 성능상 좋다고한듯

gradle도 맛보고

근데 생각보다 웹앱과 모바일 앱 사이의 거리가 멀어서, 우선 뒤로

• VirtualBox
• VMware

가상머신을 생성하고 관련된 환경설정을 지원한다. 개인은 무료이다. 그리고 cmd 하나하나 치면서 하나씩 뚫릴때 재미있긴 함. 오밀조밀한 맛이 있음.

다만, 나의 경우, adapter 문제를 경험했고, 재현불가한 과정들을 거쳐, 최종적으로 실험한 내 개인노트북은 virtualbox 바로가기를 클릭해도 아무것도 안켜진다.

이로 인한 불쾌함과 조바심은 아래 과정에서 드러난다.

한편, 5일 뒤 윈도우 자동업데이트와 함께, 다시 켜진다. 고칠려고 노력하지 않은 게 고쳐졌다. 감사하자.

인프라 설정 시 유의사항

심신안정부터

영단어 라틴어 배경까지 거슬러 올라가면, 그 안에 나름 연관성 있듯이, 설정할때 접하는 수많은 고유명사와 개념들에도 뜻이 있고 뿌리가 있겠다만,

근데, 그래서 내가 어디에 있는 무슨 버튼 누르고, 어떤 명령어 쳐야되는지 알 수가 없음. 마음의 평화 필요. 쉽지는 않지만

좋은 습관

• 실험환경과 작업환경의 분리
• 무한 백업하기

+ 버그의 해결보단 새로 생성

앞선 adapter 문제를 해결하며 Windows 10 최근 업데이트랑 충돌 사례, virtualbox 실행안되는 사례들을 바탕으로 문제를 해결하고자 했지만

중간에 평정심을 잃고, '되는 게 당연하지'하면서 검색한 것들을 바로 적용하다보니, 과정도 잘 기록하지 못하고 3시간이 지났다. 그리고 하다하다 안되서 모르는 것도 해봤음. 내 손으로 했으니 내 잘못이라고 하면 그러려니 하지만,

설명들 보면서 레지스트리까지 지우고, 다시 또 탐색기로 virtualbox 들어간거 다 지우고, User아래 .virtualbox도 지우고, 다시 깔아도 원복하는데 실패했다.

그래도, 갈려나간 시간을 보며 얻은 건, 처음부터 작업환경을 분리하고, 평소 백업을 충실히 해야한다는 것을 상기함. 추후 cloud에서도 동일 적용

목표

목표 인프라는 3 tier architecture의 온프레미스 인프라 구성

3 tier architecure

(Example)

1. 크롬 브라우저로 은행사이트에 접속해서 둘러보다가 대출 요청
2. 은행서버는 대출요청을 한도나 금융정책 따라 처리, 그리고 결과 데이터를 DB에 전송
3. 은행 DB 서버는 결과 데이터를 저장

전체 작업 흐름을 위 3단계로 분할하여 이에 따라 설계도 세분화한것으로 일단 이해.

처음부터 이런 구조로 배운 나에겐 '이게 왜 아키텍처지?' 했지만, 자료를 보면서 생각난건데, 엄청 예전에 web browser라는 게 없이, 연구실이나 회사에서 바로 DB 접근하던 시절(2-tier architecutre)과 비교하면 좀 더 새롭게 다가옴

참고로, 위 구조는 화면과 백엔드 서버를 1명이 다 개발하면, 개발자에겐 체감상 2티어

aws and 3-tier

ibm and 3-tier

Virtual Machine

Overview

가상머신은 linux 등의 OS를 올릴 수 있다. linux의 CentOS 계열의 경우, rpm , yum 등의 명령어가 제공된다.

yum으로 wget을 까는 예제들을 볼 때, rpm, yum 다음으로 wget이란 명령어(유틸리티)가 생긴듯하다.

제약

1. centos의 yum, ubuntu의 apt-get 사용X

=> 추가설명 : no yum, no wget까지 고려하면 설치파일을 scp로 보내야할듯

!! yum이 우선 !!

yum으로 바로 다운로드되면 좋고, 안되더라도, yum으로 다운로드 받아서 폐쇄망에 전송한 뒤 작업하면 잠을 충분히 잘 수 있다.

CentOS 7

CentOS7 = { Network, file system, ... }

노트북에 삼성, lg 있듯이 Linux도 centOS, Ubuntu 등등 있는데, 24년에 무료지원이 끝나는 CentOS 7 버전들이 새로운 걸로 전환될 거 생각하면, 제일 요긴할듯해서 일단 CentOS7

CentOS-7-x86_64-Minimal-2009.iso goto download

Install

Virtual Box and CentOS7 설명에 따라 설정 완료

미리 좀 보자면,

yum을 help를 통해 검색해보니까, 누군가가 여전히 관리하고 있다는 게 왠지 신기했음

Firewall and Network

나에게 네트워크는 노드 간의 연결이다. 네트워크 도식에선 이런 연결을 수학의 선분으로 간략히 표현하지만, 나한테는 너무 함축적이다. 어느새 익숙해져서 Port와 IP가 그려지긴하는데, 처음에는 뭔말인지 몰랐음

Firewall은 고속도로 톨케이드,Port는 고속도로 톨케이트의 1개 입구, IP는 여러 차선을 가진 고속도로의 시작부분로 생각중. 그러면 1개의 고속도로에 여러개의 차선이 있고, 나름 그 차선마다 의미를 부여할 수 있을듯.

한편, 연결과 별개로 각 노드는 보다 구체적인 역할을 통해 추가적인 새 이름을 부여받는다고 이해 중. 보다 자세한 건 wiki 네트워크 토폴로지

근데, 실제 고속도로를 건설한다고할때, 고속도로가 건설되고 그 위에 톨게이트가 건설되지 않을까? 하지만 지금은 전체적인 관점이 아닌, 노드라는 부분요소에서 바라보는 거니까 일단 패스

Firewall of CentOS

방화벽 설정에서 차선의 입구와 같은 port를 열어둔다. 이때, 도로의 1차선은 버스만 지나갈수있듯이, 주요 port들, 22,80, 8080,은 관습적으로 역할이 정해져 있다. 22는 보안 통신, 80은 웹서버 통신, 8080은 워즈 통신이 주이다. 난 이 관습을 따를거다. 효과적이니까

이러한 주요 port들을 연다. 그러면 CentOS 7 관점에서, (주로) 작업노트북을 향해 차선들의 입구를 연다고 생각하는 중.

firewall-cmd --add-port=22/tcp --zone=public --permanent

firewall-cmd --add-port=80/tcp --zone=public --permanent

firewall-cmd --add-port=8080/tcp --zone=public --permanent

* 나는 이미 열어놓은 차선를 또 열라고하니까 Warning이 뜨는데, 중요한건 success

다만, 아직 한쪽 도로 입구만 있을 뿐, 도로가 생긴 건 아니라고 생각할 수 있다. 상대편에서도 도로 입구를 만들고, 무엇보다 중간에서 이를 연결해주는 도로(차선들)이 필요. IP 도로를 만들자

Network

참고로, virtualbox 의 화면에서는 이더넷 어댑터라는 표현을 쓰고, HW 관점으로는 라우터나 wifi 공유기랑 다르다.

하지만 나한테는 유사함. 그래서 Router-like adapter

IP assignment

centos7깔때 네트워크 열어서 위와 같이 바로 뜨는 듯함.

[IP]:[Port]

was나 db 설정이 끝나면 위에서 할당하고 열어둔 ip:port로 접속가능

CentOS => Application Server

CentOS에 추가적인 설정을 통해 Application Server로 구체화한다.

SSH

안전하게 설정된 22번 포트로 통신하는 것으로 일단 정리

SSH가 되면 안전하게 파일을 전송하는 SCP 통신도 된다.

SCP

scp [option] [file or directory] [username]@[target_ip]:[target_path]

scp testfile.txt root@192.168.56.1:/home/root

scp 또한 22번 도로와 같은 22번 포트로 통신한다.

인터넷에 직접 연결된 Windows10 에서 필요한 tomcat을 다운받아 1차적으로는 외부와 단절된 CentOS7으로 scp전송한다. rpm, yum, wget없이 고립된 운영체제가 유일한 통로를 통해 자료를 받는 방법으로 이해중

근데 대다수의 자료는 모두 yum으로 jdk 설치와 설정을 한번에 하고, 별개로 scp로 전송하는 글은 10년 전에 1개 찾았다. 그래서 부득히 yum 자료들을 매우 많이 짜깁기함.

JDK

설정과 밀접한 리눅스의 CentOS 디렉토리를 말하면

• /etc/profile
• /usr/bin
• /home/root/*

/etc/profile은 윈도우에서 jdk 설정할때, JAVA_HOME, Path 들 설정하는 자료에 대응

/usr/bin은 운영체제가 가용 명령어를 모아두는 디렉토리, 여기에 명령어 설정이 안되어 있으면, cmmand not found가 뜬다.

/home/root 하위 디렉토리 및 파일들은 내가 만든 디렉토리 파일들로 설정이 편하게 할려고 이리 함. 보안적인 부분은 추후 aws에서 해볼듯

참고로 설정은 옆집 김치찌개 조리법처럼, 만든사람이 생각한대로 하면 된다. 똑같은 결과를 얻고자 할수록 선택지는 정해진다고 생각. 아래 내용은 이러한 조리법

yum install jdk을 하면 아래 install과 centos의 jdk 인식 2가지 설정을 한번에 해준다. rpm도 그런듯. rpm은 1995년도 이후 CentOS면 들어가있을듯하다. 유용할듯

download site

파란색 버전의 jdk로 압축해제하면, 뜬금없이 아래와같은 안내가 뜸

[root@localhost bin]# ./javac
-bash: ./javac: cannot execute binary file

지금보면 저 ARM이 아마도 intel이 아닌 arm버전을 말하는 듯? 하는데, 64bit OS에 64bit를 제대로 넣는데? 왜그러지이이이이이이이이이이이이?하면서

centos, jdk, install로 조합한 검색 열심히 해봤자, 나오는 건 지겹도록 본 yum 명령어를 통한 설치 및 자동 config 였음. 그리고 수동설치라고 해도 yum으로 wget하는 게 나옴. 그게 일반적인 가본가하다가, 그냥 왠지 arm이 뒤늦게 보이고, 딴걸로 설치했더니

내가 아는 게 뜸. 넘쳐나는 약자에 대해서 무신경했었으니, 그럴 수 있지. 이제부터는 윈도우에서 했던 거와 같이 JAVA_HOME 등 OS가 java 명령어를 자기 일부로 받아들이게 설정 시작

JAVA_HOME 설정하면 끝날 줄 알았는데 아니었네

JAVA_HOME 설정하는 법 따라서 JAVA_HOME했고,

echo $JAVA_HOME하면 정상적으로 뜨는데, 윈도우때와 달리, 운영체제 차원에서 java 명령어를 인식 못함

결과적으로 /usr/bin 하위에 소프트링크를 걸어야겠다라고는 생각함. 근데, 윈도우사용자로서 경험한 것 내에서 해야할일을 생각하고 찾은글을 따라 했는데

현재까지 수동설치글은 못찾고, 모두 다 yum install jdk 글이라 이런 부분을 인지못함. 그렇네. 10년 전에 scp로 파일 후 guest로의 다운로드가 가능하다라는 글 1개에서 여기까지 온거면 그럴 수 있지.

이렇게 많은 명령어들을 어떻게 다 소프트링크 걸지?

yum으로 설치했다는 글에서 JAVA_HOME 설정하는 글 보면,

/usr/bin/java 가 소프트링크로 자동배치된 /usr/lib/jvm/[해당버전 jdk]/java

연결되어있어서, 이때 /usr/lib/jvm/[해당버전 jdk]를 JAVA_HOME으로 설정하고 끝남.

즉, 명령어별로 소프트 링크 거는 건 자동화함. 근데 나는 yum을 안써서 그게 안됨.

당장 눈에 보이는 java, javac에다가 소프트링크 1개씩 걸수는 있지. 근데 그건 코딩하는 사람 사고 방식은 아닌듯? 자동화를 위해선 쉘스크립트를 짜야할듯?

근데, 막연히 떼어두었는데, rpm 쓰면 해줄거 같음. rpm 우선 tar의 centos 커스텀으로 이해 쉘스크립트는 방향이 아닌듯, 로그인은 커녕 게시글전체 조회도 시간내불가할듯

설명에 따라 rpm으로 압축해제하니, 소프트링크까지 자동으로 걸어준듯함.

rpm -ivh jdk-11.0.16_linux-x64_bin.rpm

이제는 역으로 설정된 소프트링크를 바탕으로 JAVA_HOME 변경

한편, yum으로 설치하면 /usr/lib/jvm 하위에 jdk가 배치되는듯. yum 쓸때는 이것만 알아두면 될듯

이쯤에서 확인하는 rpm and yum

rpm은 지금 본것처럼 내 작업노트북과의 통신만 이루어질뿐, 외부 망을 직접 타진 않음.

Tomcat

CentOS 7 tomcat 설치 따라 진행, catalina는 안함. 안해도 되긴하는데, 세부적인건 나중에 aws

참고로, 설치 당시 최신인 9.0.65 version 설치했는데, 그새 9.0.67 나옴. 톰캣 이전 버전 다운로드 방법 참고해서 리눅스 맞춤 tar 압축파일 받는다.

톰캣이 구동할려면 JAVA_HOME이 필요. 아마 기본적으로 이 경로를 찾아가게 세팅되있을듯, 윈도우에서도 톰캣안쓰는 java application 돌릴때도 왜 꼭 JAVA_HOME이라고 명명할까했는데, 이러한 곳에서 넘어온것인듯

./ 이라는 건 윈도우에서 파일 더블클릭해서 호출하는 것

startup.sh 해서 Tomcat started 확인

curl은 ip:port 로 응답 요청 하는 걸로 아는데, 왠지 get 일듯

127.0.0.1 는 한국어에 '나와 너' 중 나에 대응하는 ip로 이해

컴퓨터들의 ip로 너(상대) 컴퓨터를 찾는데, 그러면 나를 찾는 ip도 있을법 하니까

그래서 8080 port에서 제공하는 html 을 response 로 받는것,

나는 누구? => response ( html )

스스로에게 묻고 답하는 게 웃기긴함, 그리고 127.0.0.1 보다 직관적인 이름으로 localhost라는 또다른 이름을 주었다고 생각중

curl 127.0.0.1:8080 = curl localhost:8080

상단 port와 ip 설정을 통해 Windows 10에서도 접속가능 재확인

CentOS => DB Server

virtualbox instance 복제를 통해서 기존 CentOS 설정을 그대로 가진 새로운 인스턴스를 생성, 실제로 복사한 인스턴스는 게스트 IP가 원본과 당연히 같다.

아직 게스트 간 통신을 할 것은 아니므로, 냅둔다. 조금 유의할 부분은 guest ip가 동일하므로, 두 인스턴스를 동시에 실행시키지 않는다.

(web + was) server와 달리, db는 폐쇄망을 가정.이에 따라 rpm을 통한 설정이 비교적 중요

근데 왜 이렇게 예시들에 yum을 활용한 db 설치가 1번째로 소개되나 생각하면 정말 최초 인프라 구축시에는 열어놔서 그런가? 일단 패스

yum과 rpm 종합활용

폐쇄망을 전제할때, yum을 직접은 못쓰나, 설명과 같이 인터넷을 접근해도 무방한 곳에서 yum으로 rpm 패키지를 다운로드 받은 후, 폐쇄망에 접근하여 이 rpm들을 순서대로 압축해제하는 방법이 존재하고 아주 효과적

왜냐하면 하단 'rpm만 사용하면 안되는 사례'에서 볼 수 있듯이, rpm을 활용한 설치 시, 고질적인 의존성 문제가 있음. 경우에 따라서는 개인 DBA가 해결불가능할수 있음

우선 공식사이트 경로를 통해 핵심 rpm 파일 확보 그리고 이와 버전연동이 잘 되어있을 rpm들을 인터넷이 되는 서버에서 yum --download를 통해서 별도로 확보하고 전송

개인적으로 2시간동안 돌고돈 의존성 문제가 폐쇄망 내에서도 4줄로 효과적으로 해결됨

yum, Chocolately, homebrew

설치

rpm -ivh pgdg-redhat-repo-latest.noarch.rpm

한 다음 쑥쑥 설치된다.

/usr/pgsql-12/bin 에서

postgres -D /usr/local/pgsql/data

도 가능하나, 매번 그렇듯 이러한 manually의 어려움과 실수가능성을 아시는 분들이 아래와같은 service라는 단위로 제어가능하게 해주심 감사감사

service, systemctl

sudo -u postgres psql

리눅스상에 자동 등록된 postgres user로 psql이라는 명령어를 실행

postgresSQL에 접속됨

참고자료 https://projooni.tistory.com/entry/CentOS-7%EC%97%90%EC%84%9C-PostgreSQL-13-%EC%84%A4%EC%B9%98%ED%95%98%EA%B8%B0-Offline

windows 10의 dbeaver로 접속

rpm만 사용하면 안되는 사례

12.11 도 희망일뿐, 근본적으로 다른 접근 필요

적극활용

[Postgresql] Postgresql13 rpm으로 설치 https://hgko1207.github.io/2020/09/10/postgresql-1/

https://reason1241.tistory.com/42

https://www.c-sharpcorner.com/article/postgresql-installation-and-uninstallation/

=> lib이랑 client 먼저 rpm 인스톨하면, contrib이나 server는 무관한듯

postgreSQL 다운로드

https://www.postgresql.org/download/linux/redhat/

https://yum.postgresql.org/rpmchart/

https://yum.postgresql.org/12/redhat/rhel-7-x86_64/repoview/postgresqldbserver12.group.html

scp -r postgresql12-12.12-1PGDG.rhel7.x86_64.rpm root@192.168.56.1:/home/root/postgresql

scp -r postgresql12-contrib-12.12-1PGDG.rhel7.x86_64.rpm root@192.168.56.1:/home/root/postgresql

scp -r postgresql12-libs-12.12-1PGDG.rhel7.x86_64.rpm root@192.168.56.1:/home/root/postgresql

scp -r postgresql12-server-12.12-1PGDG.rhel7.x86_64.rpm root@192.168.56.1:/home/root/postgresql

sudo rpm -ivh postgresql12-libs-12.12-1PGDG.rhel7.x86_64.rpm
sudo rpm -ivh postgresql12-12.12-1PGDG.rhel7.x86_64.rpm
sudo rpm -ivh postgresql12-server-12.12-1PGDG.rhel7.x86_64.rpm
sudo rpm -ivh postgresql12-contrib-12.12-1PGDG.rhel7.x86_64.rpm

-ivh : 패키치 설치, verbose 자세한 정보 출력, print hash marks: 설치 진행 상황을 # 문자를 이용하여 출력한다.

위와같이 공식 사이트에서 제공하는 rpm을 다운받아 설치하려고 하나, error가 뜬다. 이는 rpm 명령어의 고질적인 의존성 문제이다. 더불어 관련된 rpm 패키지가 모두 있더라도, 그 설치 순서에 따라서 설치가 되기도 안되기도 한다.

지금은 4개라서 어떻게든 추가 작업을 통해 대응가능하지만, 실무에서 10여개 이상의 rpm을 상대해야하는 상황이라면 아래와같은 방법을 혼용할 수 있다.

rpm과 yum 응용 https://letitkang.tistory.com/262

https://centos.pkgs.org/7/centos-x86_64/libicu-50.2-4.el7_7.x86_64.rpm.html

scp -r libicu-50.2-4.el7_7.x86_64.rpm root@192.168.56.1:/home/root/postgresql

sudo rpm -ivh libicu-50.2-4.el7_7.x86_64.rpm

https://pkgs.org/download/libperl.so()(64bit)

scp -r perl-libs-5.16.3-297.el7.x86_64.rpm root@192.168.56.1:/home/root/postgresql

sudo rpm -ivh perl-libs-5.16.3-297.el7.x86_64.rpm

https://centos.pkgs.org/7/centos-x86_64/perl-5.16.3-297.el7.x86_64.rpm.html

scp -r perl-5.16.3-297.el7.x86_64.rpm root@192.168.56.1:/home/root/postgresql

sudo rpm -ivh perl-5.16.3-297.el7.x86_64.rpm

1개 남아서 방심했는데, 그냥 안되는 일 하고 있구나 하면서 계속해야함

하나씩 에러뜨는대로 설치하면 되는 게 아닌 게, 두 rpm이 서로 필요하면서 또 언제까지 새로운 의존 rpm을 설치해야할 지 모름.

이에 따라 버전을 12.11 로 우선 시도

rpm -qa | grep postgre
rpm -e [rpm 패키지명]

삭제도 역순으로 해야한다. 이거까지하면 rpm으로 의존성을 관리한다는 것 무게를 다시한번 느낄 수 있다. 다른 사람이 해놓은 것이라면 더더욱 이후사람은 제어불능에 빠지기 쉽다.

임시

NAT Port Forwarding

__ 보다 대등한 관점에서__ Windows 10 과 CentOS 7 그리고 네트워크 요소를 도식화함. Windows가 VirtualBox 를 품고 있다라고 표현하려고 노력함

port forwarding 설명에 따르면, 흔히 집에 있는 wifi 공유기 생각하면 좋을 듯하다. 그리고 이 공유기를 중심으로 네트워크망 구축 시작

(CentOS7의 ip와 port)를 (작업노트북 virtualbox용 ip와 port)를 우선 확인하고

이제는 상대가 묻고 답하게 설정하기 위해선 앞선 virtualbox port fowarding을 추가 설정해야햠

CentOs7 가상머신을 선택하고, 이것의 '설정', 네트워크, NAT 확인, 2개를 연결, 임시 공유기의 포트포워딩 세팅한다고 생각 중

!! CentOS7이 '실행중' 일 때 !!

ssh root@192.168.56.1 -p 22

로 접근가능하다

한편, 여기서 192.168.blabla에는 또 이야기; 사설ip, 공인 ip가 숨어있다.

ssh가 된다면 scp도 된다.

virtualbox guest 간 통신을 위해 다른 관점의 ip 설정부터

https://m.blog.naver.com/PostView.naver?isHttpsRedirect=true&blogId=wwwkasa&logNo=221559500032

새로운 enp0s8이 생김, 내가 기존에 쓰던거는 enp0s3 와 별개이고, 어제 삽질한 게 enp0s3에는 세부설정이 enp08에 비해 없어서 그런듯?, 역시 하나 되는거 생기니까, 줄줄이 떠오름

어제 몇시간 갈려나간 문제가 한텀쉬고 왔더니 한방에 됨. 애당초 자료가 없는 환경이 아니라지만, 되기를 바라면서 했던 설정들 이 안되고, 자칫 설정하나 잘못했다가 어디까지 되돌아가야하나 하는 조바심과 불안감이 작용을 해서 그런듯, 원래그런거지이이이 기계도 아니고

한편 정확히는 어제 시도한 포트포워딩은 여전히 안되네, 내 로컬 ip의 5432로 접속하면 이게 NAT에 의해 10.0.2.15:5432로 전환되서 db에 붙는 게 당연하다고 생각했고, 내가 다른 데서 잘못했다고 생각했는데, 나중에 돌아와서 상황파악 다시해야겠다.

ssh로 접근할때는 이렇듯 내 ip:22으로 붙으면 NAT되고, 10.0.2.15:22로 가게 설정해서 작업이 됬는데, 말이지

windows 10 에서 virtualbox 의 ec2에 port forwarding을 통해서 접근했듯이, Windows10에서 포트포워딩을 경유해서 dbeaver가 virtualbox postgresql에 붙기를 기대했음

dbeaver가 192.168.56.1:5432로 들어가서 10.0.2.15:5432 로 전환되서 붙는 생각을 했고,

관련 .conf 다 설정했는데, 안됨

안되니까, 또 아 되야 하는데... 아 되야하는 데 하면서 빙글빙글 3시간정도 돌음. 그 시간에 딴 거 했으면 하나는 끝냈을텐데 설정잡는 건 역시 지능보단 심신안정인듯

일단 포트포워딩말고, virtualbox guest간 통신 설정잡고 다시 돌아와야지이이이이

외부접근 !! 방화벽이랑 설정파일 둘다 !! https://devkingdom.tistory.com/267

포스트그레 방화벽 https://tobepro.tistory.com/8

https://tbmaster.tistory.com/89

postgreSQL - 추가 방화벽 설정 관련 자료 https://wylee-developer.tistory.com/24

posrgreSQL - 외부접근 시 방화벽을 통한 설정이 권장 된다? https://rastalion.me/centos-7-%EC%97%90%EC%84%9C-%EB%B0%A9%ED%99%94%EB%B2%BD%EC%97%90-postgresql-%EB%A6%AC%EC%8A%A4%EB%84%88-%ED%8F%AC%ED%8A%B8-%EB%93%B1%EB%A1%9D%ED%95%98%EA%B8%B0/

.bash_profile 이 뭘까 포스트그레 11 센트오에스 에 설치 ; 영문모를 .bash_profile, 방화벽 설정참고 https://m.blog.naver.com/PostView.naver?isHttpsRedirect=true&blogId=geartec82&logNo=221455688560

db remote access PostgreSQL remote access

https://cloud.google.com/community/tutorials/setting-up-postgres

https://dev-j.tistory.com/20

3-tier-architecture https://jaws-coding.tistory.com/9

virtualbox 네트워크망 https://yjshin.tistory.com/entry/%EB%B2%84%EC%B6%94%EC%96%BC-%EB%B0%95%EC%8A%A4-VirtualBox-%EB%84%A4%ED%8A%B8%EC%9B%8C%ED%81%AC-%EC%84%A4%EC%A0%95%ED%95%98%EA%B8%B0

온프레미스 클라우드 https://www.microsoft.com/ko-kr/microsoft-365/business-insights-ideas/resources/cloud-storage-vs-on-premises-servers

# [리눅스마스터2급 관련 지식, 좋음] https://velog.io/@layssingcar/%ED%94%84%EB%A1%9C%ED%86%A0%EC%BD%9C-Protocol-TCPIP

ipconfig, netstat 깔기, ubuntu

• AWS
• GCP
• Azure
• OCI ( Oracle Cloud Infrastructure )

AWS

IAM

DB

https://it-eldorado.tistory.com/115

• encoding utf8에서 이모지 있는 utf8로 변경하는 거 차차

12.12에 제일 가까워보이는 12.11 로

몇분 기다리면, 이렇듯 데이터베이스 리스트에 사용가능이 뜬다. 참고로 예전에 있던 건 지웠다.

새삼스럽지만, 클릭 3번이내로 DB가 만들어진다는 건 감사한일이네

dbeaver - postgresql 연결

https://8iggy.tistory.com/71

!! 아 port 5432가 아니라, 평소 ec2 접속할때처럼 22 열어두었다가 삽질함 !!

그리고 공식가이드와 어느새 pgadmin4 ui 변경됨

vpc

* VPC ID는 자동생성되고, Name는 내가 사후기입한 부분

subnet

기입값에 따라 vpc 생성 완료, 여기서 서브넷 ID 클릭

여기서 공인 IPv4 생성인데, 아직 몰것음

소유자 번호 아깐 가리고, 지금은 안가렸는데, id는 괜찮은듯해서

아래와 같이 자동으로 라우팅 테이블 생성

다시 vpc 생성하되, 아래와같이 vpc 등(vpc and more)

열심히 무언가 한다.

새로 생겼다. 뒤에 -vpc가 거슬려서 추가로 name은 my-vpc-02로 정정함

추가

aws ec2 jdk, node 설치

aws ec2 jdk 설치 https://mchch.tistory.com/223

aws ec2 node 설치 https://docs.aws.amazon.com/ko_kr/sdk-for-javascript/v2/developer-guide/setting-up-node-on-ec2-instance.html

추가

scp ec2 https://dev.classmethod.jp/articles/use-scp-upload-scp/

• Cloud
  • aws, gcp, azure, oci
• virtualization software
  • virtualbox, vmware

Cloud

• AWS
• GCP
• Azure
• OCI(Oracle Cloud Infra)

Features

• public cloud 구축과 제어를 위한 가상 머신(서버), 가상 데이터베이스, 네트워크 등의 가상자원과 제어 서비스를 제공

cloud는 결과적으로 유료인 만큼, 수많은 설정과 이에 따른 에러 발생가능성을 전문전문가들이 해결해줌. 그리고 부분무료인 것들을 통해 이런 이점을 활용가능

Virtualization Software

• Oracle VirtualBox
• VMware

Features

• public cloud 구축 경험와 함께 한다면, 온프레미스 구축 과정을 간접적으로 가늠할 수 있다.
• 가상 머신 생성을 지원한다.

물론 이것도 virtual로서 이성적으론 physical과 상반되는 개념이나, 개발자의 오감을 기준으로 Cloud Infra에 비하면 물리적인 내 노트북 HW를 기반으로 한다는 점에서 온프레미스 구축과정에 보다 근사하다고 생각,

실제로 화끈하게 집에다가 물리서버 설치한 경우 아니면, 개발자의 오감을 기준으로 하면 물리서버의 물리는 상상(the Imaginary one)임. 물리서버 호스팅업체 통해서 물리서버 대여해도 눈에 보이진 않음.

지금보니까 physical의 반댓말이 virtual이라고 해도되는건가?라면서 나름 단어들의 관계를 생각해봤는데, 그냥 고유명사로 받아들이자. 쉐도우 복싱하기 싫음.

Practices

goto myExperience : public cloud infra

goto myExperience : on-premise-oriented

!! 기본적인 시스템 환경 설정의 경우 !!

설정은 옆집 김치찌개 조리법처럼, 만든사람이 생각한대로 해야 한다. 똑같은 결과를 얻고자 할수록 선택지는 한정된다고 생각.

위의 내용들은 이러한 정해진 조리법에 대한 내용들로서, 깊은 생각보단 '옆집에서 그렇구나'

하면서 해야 체력소모가 덜하다. 특히나 virtualbox의 윈도우업데이트 이슈는 많은 잠을 요구한다.

1. ERD, UI 설계 예시를 학습한다.
2. ERD, UI 설계 도구를 활용한다.

나에게 있어 설계란, 개발을 요청하는 사람들이 자신의 생각을 효과적으로 정리할수 있게 해주는 틀

erd , ui 전반도 혼자할 건 아닌듯, 해봤자 내가 원하던 건 이게 아니었다 라고 하도하도 많이많이많이 해서 agile 나왔것지.

ERD

Entity Relationship Diagram, 우선 '논리 스키마'로 이해

개념, 논리&물리 스키마 설계

wiki Data Modeling : Conceptual, logical and physical schemas 참고

• 개념 설계 : 조감도
• 논리 설계 : 평면도
• 물리 설계 : 치수재기

개념 설계는 학교 조감도에서 크게 학교본관, 학교별관, 농구장, 축구장 등의 구성요소들을 표시하듯이 대상과 구성요소를 정의하는 것으로 우선 이해

논리 설계는 위와 같은 구성요소별 구체적인 속성값, 학교본관의 강의실, 교무실 등,들을 정의하는 단계로 이해

물리 설계는 강의실 설계도에 대응하여 특정 치수의 책상과 의자를 배치하듯이,특정 DBMS 업체별 아키텍처 특징이나 문법에 따라, tablespace 등을 고려하여 DDL을 작성하는 것으로 우선 이해

개념설계부터 하면 좋을 듯한데, 상대가 없으므로 논리&물리로 바로감

ERD 설계 : 논리&물리 설계

ERD 전문 툴의 경우, 사용하고자 하는 DBMS 종류를 설정하면 논리 설계에 대해 자동으로 물리설계가 지원됨. (Entity => Table)

가령, Entity Relationship Diagram을 작성하면 이에 대응하는 Table DDL을 자동 설계 및 작성해줌 draw.io도 ERD를 지원하나, 자동으로 DDL을 생성해주는 ERD 전문툴을 쓰면 효과적이다.

ERD and DA#5

이번의 경우 DA#5가 주어짐, 인터넷 자료가 충분하지 않으므로 반드시 가이드를 사용할 것

• 툴 다운로드 시 문의 필요
• 가이드

!! 유의 !! 가이드에 따르면 Barker 표기법이 기본값이고 관계선은 IE로 바꾸어도 Entity 형태는 여전히 Barker notation을 따라 끝이 둥굴다.

그러나 참고하고자 하는 PostgreSQL Sample DataBase ERD의 경우, IE 표기법이므로을 엄격히 지키는 것으로 보인다. 내 수준엔 혼용보단 부득히 하게 일관되게 Barker를 사용한다.

* 화면창을 살펴보면 옵션이라는 탭이 여러곳에 존재한다. 운좋게 빨리 찾았다.

한편, wikipedia Entity–relationship model 챕터에서 barker, IE(Crow's foot notation) 외 여러 표기법(notation)에 대해서 소개한다.

실습

* 최소의 ERD부터 시작, 그리고 제약조건 잘안지킴, 좀 DA#5랑 친해져야 겠다.

처음에는 1개의 article이 여러개의 board에 분류가능하고, board는 여러개의 article을 가지는 다대다로 접근했다. 그러나 이는 1개의 사건(plot)이 여러개의 Story로 분기가능한 상황에 보다 밀접할듯

사용자는 게시글을 작성하고, 주어진 board에 해당 article을 분류한다고 접근했다. board를 소유하기 보단

자동 스크립트 생성 기능 확인, db 연결해서 바로 넣고 싶은데, 설정 상 예측불가한 시행착오 보단, postgreSQL 자료형 등 손수 기입 결정

최적최적화된 자료형 설정이 DA의 주요한 관심사가 아닐까 하지만 나의 현 역량과 상황 상, 이러한 세부사항은 추후 db 연결과 자동 생성 시 반영

참고로, postgreSQL sampledata의 ddl문을 보면 file 테이블의 film_id는 integer, 이를 사용하는 film_category의 film_id는 smallint이다.

모든 category가 쓰이지 않고, 일부만 쓰이는 데 초점을 맞추어 이렇게 자료형을 선언했으리라 생각한다.

자동 생성 스크립트의 커스텀

아마도 안정성을 위해 시작과 끝에 모두 테이블 drop이 존재한다. 이를 지워야한다.

그리고 자동생성 스크립트에서 일부 구문은 중간에 에러로 떠서 멈추게 된다. drop 이더라도, 작동하게 if exist가 자동 생성안되서 그런듯하다. 다른 전문ERD 툴로 자동생성했을때와 성능차이를 볼 필요가 있다.

postgreSQL의 스키마 관련해서 user란 테이블이 postgreSQL 기본 테이블이름 중 하나라 publc.user로 만들어야 했다! 다른 article, board는 무관했음. 조금 껄끄럽지만, spring security의 user 객체명을 우선하여 지속사용

ms odbc and postgres

sql server 대신 postgresql https://www.ibm.com/docs/ko/rational-build-forge/7.1.2?topic=setup-odbc-data-source-microsoft-sql-server

https://www.postgresql.org/ftp/odbc/versions/msi/

DBeaver and DML

dbeaver를 활용한 DML 생성 및 제어 시 보다 편리하게 자동스크립트를 활용가능했다.

엑셀 사용할 줄아는 사람이면 SQL문법 DB별로 몰라도 소통가능할듯

찾아보면, 조인 자동스크립트도 있을듯

WEB ERD툴(무료)

DA#5가 GUI & 한글 기반으로 클릭해보면서 해볼 건 많다. 친해지고 싶다.

근데 개별 옵션값 설정(Barker => IE) 시 예상치 못한 문제(Entity 모양은 여전히 Barker인 경우) 등에 대해서 대응할 인터넷 예시를 못찾았다.

이에 따라 평소 알던 WEB ERD 추가, 그리고 무료는 많이 알수록 좋으니까

무료 ERD툴 예시들 중 web 기반은 대체로 협업기능을 추가로 제공하여 누락을 최소화하기 좋다. QuickDBD의 경우, 자동 DDL 기능도 지원하는 것을 확인하였다.

UI

UID로 이해

완전 나한테 딱 필요한 자료 https://brunch.co.kr/@supernova9/195

내 역량과 상황 상 추후 역으로 작성하면서 학습예정

툴은 피그마 부터 ppt 보다 나은 게 있것지, 대체로 공유잘되고, 상시업데이트일듯

https://www.samsungsds.com/kr/insights/figma.html

추가

Jira Database Schema - goto

erd 이렇게 보여줘도 되는듯. 혼자 생각할때, erd도 대외비밀 아닌가했는데, 크랙커가 저 스키마를 사용가능할 정도로 침입했다는 것 자체가 파괴일듯,

나같으면 겨우 db에다가 select할게 아니라 들키기 전까지 한두개 심어둘듯

1. UML의 usecase, class, sequence diagram 예시를 학습한다.
2. draw.io 활용능력을 키운다.

나에게 있어 설계란, 개발을 요청하는 사람들이 자신의 생각을 효과적으로 정리할수 있게 해주는 틀 로 우선 정리

게시판과 같이 기능 당 CRUD 가 1대1로 대응하는 세부적인 영역의 경우, 개발자는 큰 고민없이 바로 시작가능함.

하지만, 이보다 더 복잡한 비즈니스 룰에 따르는 기능이라면 고객(또는 담당자)은 자신이 원하는 비즈니스의 영역과 구분을 한번에 말하기 힘들고, 중첩된 영역에 대해선 혼자서 말하기 어려움

즉, UML이라는 건 1명의 담당자와 1명의 개발자가 소통하기 위한 도구보단, 서로 다른 업무 혹은 서로 중첩되는 업무를 담당하는 수십명의 담당자들과 한 명의 개발자가 문제를 정의하고 소통하기 위한 도구에 가깝다고 생각.

설계

(TO ME) 내가 개발하고 싶은 걸 다른 사람도 이해하고, 적용할 수 있게 전달하는 방법

- 최소한 누락은 없어야 - 가능하면 개발을 좀 빠르게 진행하는데 도움

(TO ME) 나에게 개발을 요청하는 사람들이 자신의 생각을 효과적으로 정리할수 있게 해주는 도구

• 누락이 없기 위해서는, 설계 기간 동안 언제나 접근가능하고, 수정가능해야함. 문제가 없다면 상시 공유해도됨
• 개발지식은 지양하고 당사자가 UML에 필수적으로 참여해야함

wikipedia's Design chapter에 의하면,

UML offers a way to visualize a system's architectural blueprints in a diagram

여기서 system이니 blueprints니 하는 것들은 여러 당사자들의, 수많은 업무(job)와 프로세스, 그리고 절차들의 합으로서 한번에 나오는 게 아니라고 판단. 이러한 접근과 설계 UML 예시를 바탕으로 기본 경험을 습득

신기하게도, 처음에는 온전히 개발자의 영역이라고 생각하고 접근하고, '한번에' 누락도 없어야하고, 개발에 직접적으로 도움이 되는 '무언가'를 완성하려고 하니까 손도 못댐.

그리고 하는 것 없이 시간은 시간대로 들고, 막연했음, 확신이 없고, 붕뜬 느낌. 근데 원래 그래왔던 거 같음. 처음의 접근을 바꿨으면 됬지.

UML

• wikipedia's UML = Unified Modeling Language
• wikipedia의 modeling lanaguage overview에 의하면, modeling language = {graphical , textual}이고, UML도 해당

Selected UML

• Behavior
  • Usecase Diagram
  • Sequence Diagram
• Structure
  • Class Diagram

한편, 개인적으로 하도 영어문법을 많이 배워서 그런가, language하면 grammer로서 textual만 강하게 떠오름. 회화중심으로 배웠으면 language라는 것에 손짓,몸짓 등 눈으로 보이는 것들도 좀더 쉽게 떠올랐을 것 같음

한국어로 '배운 걸 너의 언어로 표현하라'라고 하면 나는 마인드 맵같은 그림부터 그렸을듯함. 편하니까, 그리고 나만 편한 게 아니니까 UML은 코드가 아닌듯

Usecase Diagram

(TO ME) 시각적 요구사항 정의서

일반적으로 엑셀의 글자형태로 제공되는 요구사항 정의서에 대응하여 diagram으로 표현하는 방식이라고 이해. 이에따라 명세적 요구사항 정의서부터 시작

Requirement Specification

요구사항 정의서, 요구사항 기술서, 명세서와 동급으로 일단 이해

• goto google docs
• 참고 예시들 : RS 예시1, RS 예시2, RS 예시3

기능적/비기능적 요구사항

• Functional Requirements(FR)
• Non-Functional Requirements(NFR)

설명에 따라, FR은 메소드로 구현되어 결과를 리턴하는 기능. NFR의 경우 대체로, 그 회사 비즈니스 룰에 의해 제약되는 조건으로 우선 이해, 가령 반도체회사 제조 공정에서만 요구되는 특정 최소값이라든지

Usecase List and Diagram

상단 요구사항을 유즈케이스 목록로 상세화

추가로, Diagram

• 지속 수정을 고려하여 Actor와 usecase 사이 선은 생략
• 현재는 단일 게시판으로서 '게시판 선택(접근)'의 경우 기본값으로 자동 지정되므로 임의로 점선 표시
• 특정 게시판을 접근했을 때, 해당 게시판의 화면 내에서 게시글이 모두 조회되고, 등록/검색 가능하다고 전제
• 게시글상세 화면에서 수정과 삭제버튼을 배치할 것이므로, 상세 조회 아래 수정/삭제
• draw.io and usecase diagram와 draw.io desktop 활용
• 참고 예시 : usecase 예시1, usecase 예시2

Class Diagram

(나중에 인텔리제이 플러그인으로 그릴예정)

• 현재는 상속 안보임, User와 Member 해서 회원쪽에 sns 로그인관련 상속이 생길수는 있을 것 같지만, 지금은 관련없는듯
• 메소드명은 jpa 메소드명들 우선순위로 할듯, 다만 지금 맵퍼라서 계속 바꿔나갈예정

draw.io and class diagram 참고는 해둠

현재 이클립스의 경우 관련 uml 플러그인활용(object aid을 위해선 추가 설정이 필요함. 추후 인텔리제이에서 관련 플러그인 활용으로 대체)

Sequence Diagram

(나중에 인텔리제이 플러그인으로 그릴예정)

draw.io and sequence diagram 우선 활용

현재 이클립스의 경우 관련 uml 플러그인활용(object aid을 위해선 추가 설정이 필요함. 추후 인텔리제이에서 관련 플러그인 활용으로 대체)

설명에 따라 다운로드 및 설치

설치 중 옵션값 변경 시 스스로 제어할 수 있는 옵션이 아니라면, 반드시 기본값대로 설치할 것

설명에 따르면, port ; 5432 root user : postgres root user password : 본인 기입 값 locale : korea

참고로, 나는

user : com password : puter locale : US

이다.

*password는 설명하다가 어짜피 보여지기에 적어둠. 명령어 parameter 값이구나 하게

PostgreSQL sample Data

postgreSQL에서 공식적으로 제공하는 기본 테이블과 데이터를 넣는다.

설명 속 root user 기준 데이터 넣기에 따라 Data를 넣는다.

Download link of sample data을 다운로드 받으면 zip 형태인데 풀면 guide에서 요구하는 tar이다.

gui 인 pgAdmin4으로 load 하는 걸 강력히 강력히 추천한다. 이 또한 기본 제공 툴이다.

Client Tool

db 접근해서 data를 제어하는 도구. 다른 예시로는 oracle sql developer

dbeaver

설명과 postgreSQL port, root user, password 기본값에 따라서 연결

대체로 더 많은 것들이 gui로 표현되서 클릭해보면서 배울 수 있다.

dbeaver - postgreSQL 연결

pgAdmin4

postgreSQL 기본값으로 깔면 주는 툴, tutorial 등에서 사용해서 잠깐 겸함. 근데 dbeaver만큼 여러 DBMS를 지원할 지는 몰겠음

Persistence

설명에 의하면, Persistence (Architecture)란 데이터를 특정 DBMS에 종속되기 보단, data를 저장하는 방식인듯. 이 방법에는 여러 가지 기준이 있는데, 대표적으론 저장기간인듯. 휘발성/비휘발성 이런거

이런 점에서 persistence 관련 api, framework는 우선 노트북껐다켜도 보존해야할 중요데이터를 어디에 어떻게 저장할지를 도와주는 도구로 일단 마무리.

Persistence API ? framework ?

java persistence api - goto

persistence framework - goto

각자 잘 냅두고, 난 persistence 영역이라 일단 퉁친다. 거기에 난 mybatis니까 framework

mybatis framework

구멍가게 코딩단의 스프링 도서 기준

p90 : overview of mybatis

나는 공식문서를 보고 양자택일인 줄 알았는데... 그림과 같이 서로 보완 되는 것으로서 같이 써야 한다.

2개를 모두 써야한다는 걸 알고, 공식문서의 소개 부분을 읽으니까, 호환성이라는 게 이제야 보인다. 다만, 시작하기 스텝의 필요조건 mybatis-spring 2.0.7 을 쓰기 위한 최소 3.5 이상의 mybatis dependency는 예시에 보이지 않는다.

나는 이걸 보고 착각 mybatis-spring 2.0.7 의존성만 추가해서 문제가 있었다. 그럴수있지. 기계도 아니고. 한글번역해준거에 감사

추가 : mybatis and mybatis-spring 설명

p90 : mybatis and spring legacy prj

• spring-jdbc
• spring-tx
• mybatis
• mybatis-spring

4가지의 디펜던시가 필수적으로 필요하다고 한다. 2가지만 넣고 되는 글도 있는데...내가 안되서 패스, 그리고 tx도 써야하고

pom.xml 에 dependency 추가

https://mvnrepository.com/ 이라는 사이트, 다른말로 Central 사이트, central repository 등등에서

무료로 dependency를 제공한다. 상기 디펜던시를 검색하고, 마냥 최신버전이 아닌, 다른 디펜던시들과 호환되는 디펜던시를 써야한다.

가령, 가장 최신 버전의 spring-tx를 썼을때, 임의 선택한 mybatis dependency 는 최신 버전의 spring-tx를 아직 지원안할수도 있다. 여러 종류의 호환성은 디펜던시별로 설명된다.

goto

vscode로 눈을 소중히

p91 : root-context.xml and SQLSessionFactory

DB connection 관련 객체를 spring은 bean으로 바로 제공한다. Spring Framework가 아니었더라면, 수많은 class들을 손수 코딩하고 또 @Bean 등의 어노테이션으로 빈등록해야한다. 이러다가 손가락 나가는 거인듯

나는 root-context.xml에서 명시하여 호출만 하면 된다.

SQLSessionFactory: SQLSession 모음 bean, 아마 oop의 factory 패턴이 적용되어 bean으로 등록될듯

우선 root-context namespaces 에서 mybatis-spring 추가, xml file 상에서 namespace라는 개념을 쓰던 게 C++로 전달된건가 하고 일단 넘어감.

SqlSessionFactoryBean 추가

한편, 이러한 SqlSessionFactory 가 효과적인 connection pool로, 그리고 특정 DB, user(com)이 port 5432의 postgresql로 접근하도록 설정하는 설정 부분이 밑줄 그은 부분들이다 ; 빨간줄, 검정줄

!! 여기서 bean id는 datasource라고 하고, ref는 dataSource라고 해가지고 1시간 날림 !! 근데, 내가 이것들 다 손수 코딩했으면 최소 1일 날림

참고로, 나는 psql을 통해 com이라는 유저를 생성하였고, 그래서 root user인 postgres가 아니다.

결과 : junit을 통한 테이블 조회

추가적으로 관련 디펜던시 추가 설정해서 rest controller를 만들어서도 조회가능하다. jsp 화면 안만들어도 되서 편하다.

json, xml 리턴 시 필요한 디펜던시

https://mvnrepository.com/artifact/com.fasterxml.jackson.core/jackson-databind/2.13.3

• how to utilzie functions of mybatis

• hikari 더 자세한 내용들; 옵션값, 깃허브 https://minkwon4.tistory.com/208 https://github.com/brettwooldridge/HikariCP

추가 : data load by psql

Legacy prj나 이로부터 빌드된 앱이 db에 접근하기 위해서는 url, username, password 생성이 필요하다.

공식 문서를 따라 데이터와 유저, com, 를 생성하고 필요정보를 수집해보자

example : postgresql user crud

CREATE USER miriam WITH PASSWORD 'jw8s0F4' VALID UNTIL '2005-01-01';

CREATE USER com WITH PASSWORD 'puter' VALID UNTIL '2023-09-20';

난 언제쯤 오타를 안낼까, 내면 수정하면 되지

dummy data 설명/출처 보단, 우선 정리본을 추천

chcp65001 해도 한글이 깨지나 했는데, 해외 sample data에 한글이 없을듯?

오히려 한글이 아닌 무언가가 한글로 잘못 표기되다가 생기는 거 같음.

db 까보면 테이블이랑 데이터는 들어가있음. 어쩌면 내가 처음 개인 블로그에서 다운받은 dvdrental.tar가 다소 손상된 상태일 수 있다 정도 생각, 공식사이트 dvdrental.tar로 시도

그리고 다음부터는 심신의 안정을 위해 pgadmin이라는 gui 툴을 쓰자. 주는 데 써야지

유저 생성하고, 이 유저로 접근할 데이터를 세팅했다.

추가 : postgreSQL 12 공식 문서

• IDE = Integrated Development Environment ; eclipse
• Framework ; spring, spring boot

돌아다니다보면, framework vs api vs libraries set 해서 서로 비교해서 판정하는 게 있긴한데, 방향성이 유사해도 개발자가 서로 합의해서 만든것도 아니고, 각자 발전해온 걸 그냥 교집합과 차집합이 있겠지 하고 마무리.

그리고, 나는 세상 모든 framework를 비교대조하기 보다, spring framework에서 소개하는 이것으로 framework를 부분 이해 하겠음. 하다보면 좀 늘것지

IDE와 plugin 호환성

• eclipse
• spring tool suite(STS)
• Intellij

최신 IDE일수록 이전 플러그인들과 호환되지 않는 경향이 있다. 만약 지금까지 나온 모든 플러그인 및 관련 jar를 들고있다면 IDE 자체 용량만 수십기가에 이를 것이다.

가령, 22년 9월 기준, STS 4.16.0 은 spring legacy prj를 생성하기 위해 설정을 했지만 플러그인을 깔아도 무수히 많은 에러가 뜬다. 추가적인 수동 설치나 조정이 필요한 것으로 보인다.

Prerequisite

• JDK
• WAS

IDE의 java 프로젝트를 서버에서 구동하려면 jdk와 was가 사전에 설치되고, 이클립스 상에서 설정되야한다.

JDK 11

• jdk 11 설치

• Windows 환경변수 설정

WAS

web application server

Tomcat

• 9.0.65 버전 - download Windows-x64

참고로, boot에서는 아에 내장 시킴, 이게 답이다.

Windows OS에서 tomcat 구동에 따르면, 리눅스 OS에서 tomcat 구동해서 초기화면 봤을때의 감격을 Windows OS에서도 맛볼 수 있다. 물론 이 부분은 이클립스를 통해 제어하는 게 더 효과적이다.

undertow

web server인 apache가 nginx로 바뀌어 간다면, tomcat 다음은 뭘까해서 찾아봄. tomcat과 undertow 설명

IDE and plugins

STS4, eclipse 2022-09, eclipse 2022-03 이클립스 순으로 spring Legacy Project 생성하는 과정을 설명

참고로, Intellij가 가장 쉽고 빠르게 Spring Legacy Project 를 생성할 수 있을 것으로 보인다. Intellij로 생성 시 생성되는 applicationContext.xml, dispatcher-servlet.xml 는 root-context.xml, servlet-context.xml 대응하는 것으로 보인다. - goto

software 설치 시 유의사항 : 된다면 ZIP으로 다운받자. exe말고

.exe파일로 설치하면 Users/User 폴더 하위에 영문모를 .p2, . 같은 폴더나 파일들이 잔뜩 쌓인다. 제어도 안되고

zip으로 받아서 반디집으로 압축해제하는 것도 클릭 수 차이 없다. 다운로드는 지원하는 한 .zip이나 .jar가 권장

STS : spring-tool-suite-4

이클립스에 이러저러한 플러그인들 왠만한건 다 깔아준 IDE, 심신안정에 매우 좋음. STS 4.16.0 의 경우, Spring Boot Project가 기본이다.

추가 : 내 sts의 버전과 뼈대 eclipse 버전 확인하는법

STS 설치, spring legacy 설정

sts 설치

Legacy prj 세팅

위와 링크를 따라 세팅 시, 나의 경우, 디펜던시 Missing 에러문이 뜬다. 또한, 최근 글에서 나와 동일한 사례가 검색된다.

Missing 된다는 것 관련 jar를 추가하라는 상단 댓글에 따라 진행해도해당 jar의 3.7을 요구하는데, 공식사이트에 나오는건 3.25이라 해결되지 않는다.

추가적으로 링크를 따라서 add-on 설치 외 다른 jar나 자료를 다운받았지만 나는 안됬다.

여전히 추가 설정해야할 에러들이 많이 보인다. 왜냐하면 STS 4.16.0은 legacy prj를 지원하는 Spring Tools Add-on for Sprint Tools 4 와 호환되지 않기 때문이라고 볼 수 있다.

물론 과거의 글들을 보면, 아주 손쉽게 Spring Tools Add-on for Sprint Tools 4만 다운로드 받으면 legacy prj 생성이 가능해지는 것으로 보이나, STS 4.16.0 이전 버전을 사용했을 것으로 예상된다. goto previous versions

위 에러들 하나씩 상대하다보면 끝은 있겠지만, 처음부터 spring legacy prj에 맞을 만한 이클립스와 플러그인을 사용하는 게 낫다.

2022-09 eclipse

22년 9월 기준 가장 최신 IDE이다. download

Project create

이클립스 상에서 spring plugin 설치 안 할 시, File => New => Other... 해서 나오는 프로젝트 생성 위자드에 스프링이 안뜨지 않는다.

그래서 아래와 같은 최신 spring plugin을 설치

위 plugin 과 이미지의 'Spring Tools 3 Add-On for Spring Tools 4 3.9.22.RELEASE를 깔아도,다른 글과 달리, restart하면 spring legacy prj는 뜨지 않는다. 사실 STS 4와 동일해졌을 뿐이다.

위와같은, 이클립스 2022-09 에서의 설치 에러 로그 살펴보면, 이클립스가 접근하는 서버에서 이클립스 버전 2022-09의 디렉토리에서는 해당 플러그인을 maintained 되지 않는 것으로 보인다.

이클립스 플러그인 파일서버가 있다면, 버전별로 플러그인들을 따로 저장하고 제공하지 않나 싶다.

이를 통해 이클립스 버전에 따라 호환되는 플러그인이 있다 정도로 정리할 수 있다. 이러한 맥락에서 spring legacy prj보다 과거의 dynamic web 등의 prj는 더 지난 이클립스를 써야 할 것으로 예상한다.

이제보니까 pluglin 설명에 설명은 되있으나, 설명서 다읽고 노트북 쓰는 사람없다는 점에서 그렇구나 하고 지나간다.

구체적인 버전은 more info 클릭해야 보이는구만, 다음부터는 클릭할듯

2022-03 eclipse

앞선 plugin 설명에 2022-03까지 지원된다고 되어있으므로, 2022-03 version으로 설치. 그래도 반년전 정도꺼 까지 지원된다는 게 대단한듯, 무료인 거 생각하면 할수록 eclipse는 위대한 듯, 한편 spring legacy prj가 생각보다 오래 전에 만들어진 거 같음.

하지만 역시 쉽게 되는 게 없음. 아래 2개의 플러그인이 앞선 경우와 달리 잘 깔리나, prj 생성 wizard에 spring legacy가 안뜬다. update를 해야한다.

여기 까지 딱 12시간 걸렸다. sts, eclipse 2022-09에서 진전은 있지만 끝이 없는 에러의 굴레에서 시간을 너무 썼다.

하지만 이것도 아직 끝이 아니다.

설명에 따르면 2022-03이면 jdk 11 version 써야 해서 그런듯 하다.

그리고 추가로 eclipse.exe와 동일한 디렉토리의 .ini를 설명에 따라 .ini 파일 바꿔야함

근데 이런걸 도대체 어떻게 아는거고, 어떻게 공부한담, 만든 사람이 어디다가 올려놨겄지? 링크 남겨줬으면 좋겠다

임시결과

spring legacy prj 속 home.jsp. 자동생성 시 최소 값이 home.jsp이다.

사실 index라는 단어의 한글 해석 1순위가 목차라는 점에서 요즘과 같이 다채로운 화면구성에 어색한 표현이라고 매번 느낌.

반가운 home 화면 가운데 ? 가 있음. 이건 친숙한 인코딩 설정문제임

workspace encoding

설명에 따라 workspace 수준에서 jsp 포함 인코딩을 설정한다.

일케 한 다음 prj 수준에서 인코딩 불맛 보려고 encoding 임의로 바꾼거 아니면 그대로 따라감

Config JDK of Project

설명에 따라, Project 수준에서 prj facet에서 추가 설정해야함

결과

lombok of eclipse 2022-03

설명에 따라, 롬복은 spring plugin과 같은 급이다. 실제로 인텔리제이에서는 플러그인 형태로 제공한듯하다. 그러나 이클립스는 무료니까 따로 연결해야한다.

이로서 이클립스에서 모두에게 제공하는 spring Legacy 프로젝트 생성과 설정이 마무리 되었고, 다음부터 보다 프레임워크 관점에서 맞춤 시작

Framework

spring, spring boot, django 등 여기서 지원하는 기능들과 목표들, 그 모든 것. 쓰다보면 공통점도 있고, 차이점도 있것지, 나는 그 경계 뒤지기보단 우선 적재적소

Spring Framework

• spring MVC
• spring and web app
• spring boot framework tutorial

튜토리얼의 경우, 인코딩같은 세부세팅 잠시제쳐두고, 최신 버전인 boot를 통해 개괄적으로 spring framework 기본 개념 단어들 리마인드하기 좋음. 처음하는 사람들에겐 완전 비추

version

설명에 따라, GetMapping 등의 어노테이션 사용을 위해 pom.xml 에서

<org.springframework-version> 을 기본 3점대에서 4.3.18.RELEASE로 설정. 221007기준 5점대 존재.

spring.io ; spring framework

Best code structure

서비스 변동성이 작고, 작기를 희망한다면 by layer 서비스 변동성이 크기를 희망한다면 by feautre

code structure

상단 보라색 네모들, controller, service, repository들로 package 구조(code들이 들어가고 배치될 곳)를 설정 영역이 code structure라는 영역으로 칭하는 것 같다.

이러한 참고 글들의 출처의 출처를 거슬러 어디 공식 사이트가 나오면 좋겠지만, 충분하다고 생각하여 패스

그리고, spring.io라는 스프링 프레임워크 공식사이트를 돌아본 결과, 아직까지는 spring framework 레벨에서 code structure를 정의하지 않아보인다.

설명에 의하면 There is no specific layout or code structure for Spring Boot Projects. However, there are some best practices followed by developers that will help us too.

이고, 2개의 code structure가 제시된다.

• code structure by feature
• code structure by layer

code structure by feature

domain을 1순위로 패키지를 구조화해서 코드들을 배치하는 것으로 이해하기 좋다. 참고로 그렇다고 controller, service, repository가 사라진 건 아니다.

code structure by layer

명시적인 controller, service, repository를 1순위로 패키지를 구조화해서 코드를 배치하는 것으로 이해할수 있고, 대체로 기존 프로젝트들의 code structure가 이를 준수하는 것으로 알고 있다.

그리고 나는 그동안,

spring framework is spring MVC of MVC spring MVC is controller, service, repository spring framework is controller, service, repository

이라고 여겨왔기에 다른 걸 상상하기가 어렵고, 비교할 게 없으니 이로 인한 문제도 불가피하다고 생각해왔다.

설명에 의하면 by layer는, 내가 몸소 경험해봤듯이,

Though the above structure looks feasible and easy to locate classes by a layer. It has few disadvantages when compared to Structure by Feature.

• Features or Modules cannot be shipped separately.
• Hard to locate a class pertaining to a certain feature.
• Code Refactoring on a certain feature is difficult since the feature classes located in every layer.
• It causes merge conflicts among developers using GitHub, BitBucket, etc. for Collaboration.

이러한 단점이 부각되고,

by feature는

• Find a class to be modified is easy.
• By deleting a particular sub-package, all the classes related to a certain feature can be deleted.
• Testing and Refactoring is easy.
• Features can be shipped separately.

이렇다고한다.

하지만, 프로젝트가 정말작고, 처음배우는 사람이 있으면, 위 by layer의 장점인 feasible(실행하기좋은), easy to locate 이득이 단점을 상회한다고 생각한다. 당장 위 spring MVC 도식과 연결지어 이해하고 검색하기 더 좋다고 생각한다.

MyChoice

이번 프로젝트의 경우, code structure는 계속 키울것이므로 by feature

이 부분은 gradle, boot로 바꿔도 동일할듯, java code일뿐이라

크게 3가지의 features; user, article, board (게시판 관련)에 따라서 code structure 설정 및 해당 클래스 추가

그리고, dto and entity 관련 글, dto entity 분리해야하는 이유 참고하여 dto, entity 구분

Junit

• 화면 안만들고 기능체크가능
• 멘탈 파괴 방지

바로 위 사진에서 볼 수 있듯이, src/test/java라는 디렉토리가 기본값이다. 이를 사용하기 위한 추가설정이 아래와 같이 필요하다.

최근 eclipse의 경우, Libraries path에 ModulePath, ClassPath 가 존재, 예전 버전일 수록 구분안했다. 설명 참고는 하고, 우선 '친숙한' classpath에 junit library를 배치하였다.

설명에 따라 처음에 junit dependency가 있지만 추가로 spring-test 더 넣어야한다. 참고로, vscode로 조회하면 눈이 매우 편하고, vscode를 통해 수정과 저장 후, eclipse에서 파일 다시 열면 충돌도 없고 매우 편한다. 프론트와 파일조회는 역시 vscode다.

초기값 세팅으로는 junit test 에서 sl4j의 log가 콘솔에서 출력되지 않게 세팅되어있었다. 아래 같이 info로 수준을 맞춘다.

log level

Application Server

1. IDE : eclipse

2. 1 version : 2022-03

3. 2 plugins

4. 2.1 Spring Tools 3 (Standalone Edition) 3.9.14 RELEASE

5. 2.2 Spring Tools 3 Add-On for Spring Tools 4 3.9.22.RELEASE

6. 3 Project

7. 3.1 Spring Legacy Project and SpringMVC Template * eclipse 2022-03 ; Spring Tool 3와 호환되는 마지막 버전(22년 9월 기준)

8. Framework : springframework

9. 1 version : 4.3.18.RELEASE

10. 2 Build Tool : Maven

11. Web Application Server(WAS) : tomcat

12. 1 version : 9.0.65

13. Develoment kit : JDK

14. 1 version : openJDK 11

* local

Database Server

1. Database : PostgreSQL

2. 1 version : 12.12, compiled by Visual C++ build 1914, 64-bit

3. client tool : dbeaver 22.2.0 , pgadmin4

4. persistence framework : mybatis 3.5.6

* local

OS

1. version : Windows 10 desktop

Package Structure

C: ├── sample-package │-----├── eclipse-2022-03 │-----└── package-worksapce │------------└── LegacyMVC │------------└── Servers

* package-workspace 하위 Servers는 eclipse에서 tomcat 등록하면 생김

(나의 현재 tomcat 위치)

C: ├ Softwares │---ㄴ apache-tomcat-9.0.65

* User 폴더 하위 배치는 피했지만, 앞으론 Softwares 보다 세분화할 필요를 느낌.

Explanation

• IDE & Framework : Eclipse & Spring

• Database : PostgreSQL 12.12

위 설명 속에서 WAS, JDK, DB 다른 구성요소들이 sample-package가 '전제 한대로 또는 기본값대로' 설정이 되야 세팅된 IDE와 lombock 등 세부 설정값들을 통째로 사용가능하다.

물론, free sample 로서 자잘한 warning이나 내가 인지하지 못한 전제의 개입으로 작동안할 수도 있다.

Download

public google drive

the additional

1. JDK 11 - link
2. Tomcat 9.0.65 - link
3. PostgreSQL - link
4. DBeaver - link

상단 내역은 ,필요 시 회원가입을 하여, 각자 다운받아야한다.

https://www.google.com http://localhost:8080/home.jsp

* https 는 http 파생형

매일 쓰고 있던 거고, 쓰는데 문제없으면 계속 쓰면 됨.

근데 나는 http로 Web service 만들다가 보안뚫림. 천천히 봐둘려고

Chrome과 HTTP

google 감사

매일 쓴다는데 보여야 좀 공부하지

https://velog.io/@910/%EC%9B%B9-%ED%95%B4%ED%82%B9%EC%9D%84-%EB%8F%84%EC%99%80%EC%A3%BC%EB%8A%94-%EA%B0%9C%EB%B0%9C%EC%9E%90-%EB%8F%84%EA%B5%ACDevtools-%EC%82%AC%EC%9A%A9%EB%B2%95-w4072171

가볍게 찍고 다음은 피들러

피들러 Fiddler

http, https 에 딱 맞은 관련 도구, Chrome devtool 보다 효과적으로 예상,

https://pyoungt.tistory.com/m/35

WEB HTTP guide

the essence of HTTP : ~ is in understanding how the Web works and how to apply that knowledge to we programming and administration.

=>

osi 7계층별로 영단어마냥 암기하고 잊어버린 것들 중 하나가 http인데, 더 이야기가 있는듯, 그리고 그러겠거니 하지만, boot 에서 django로 grpc 통신해본적이 없음. 할 때 도움될듯

우선 친숙한 pdf 43페이지 ; HTTP Messages , 307 페이지 ; Secure HTTP(HTTPS) 부터 시작

chapter.part.section

=> 3.1.1

3. HTTP Messages

• How Messages flow ; 3.1
• The Three parts of HTTP messages(start line, headers, and entity body) ; 3.2
• The differences between request and response messages ; 3.2
• The Various methods that request messages support ; 3.3 ~
• The Various status code
• What the various HTTP headers do

3.1 The Flow of Messages

keywords

HTTP msg = blocks of data = meta block + other block, proxies(?, 맨날 듣는 거에 비해 사실 느낌만 앎) HTTP application (Inbound, OutBound, upstream, down stream) ; 인바운드 아웃바운드 업무 말은 들었는데, 여기서 나온거인듯?

3.1.1 Messages Commute Inbound to the Origin Server

3.1.2 Message Flow Downstream

3.2 The Parts of a Message

3.2.0 Message Syntax

• 3.2.1 start line
• 3.2.2 headers
• 3.2.3 body 비교적 자주 보던 것들, 크롬데브툴스 감사

3.2.1 Start Lines

the first line of request and response messages ; methods, status codes, reason phrases, version numbers ...

Request line

Response line

Methods

• the method begins the start line of requests, telling the server what to do

Examples

get, head, post, put, trace, options, delete

??? put 대신 patch 많이 쓰는데, 언급이 안됨, 비교적 최근 추가된건가

한편, 과거에는 put 이 톰캣이랑 같이 어떤 용량 제한이 있어서, 용량 넘어가면 안된다고 한듯, 불가피하게 post 썼다고 한듯, 하는 김에 delete도 post로 퉁치고

생각해보니까 타임리프에서도 form 태그에서 put, delete 쓸려면 application.properties에 설정 추가해야했음. 기본값이 get, post만 지원함

근데, 그러면 기본값에 충실하면, get, post 외는 js로 처리하라는건가? 이렇게 일부만 form 태그 쓸거면 그냥 js로 ajax통신을 기본으로 해서 get,post, put, delete 하면 안되나? form 태그는 너무 제한적인 느낌

Status codes

Examples

• 200 : OK
• 401 : unauthorized ; 스프링 부트 시큐리티 , csrf랑 연관
• 404 : Not Found ; 스프링 부트 시큐리티 쓰면 쉽게 리다이렉트 가능했던듯

3.2.2 Headers

additional information to request and response messages , name : value ; Content-length : 19

3.2.3 Entity Bodies : Body

• third part of http msg
• optional ; get http msg는 body가 없음

3.3 Methods

start lines 의 일부

3.3.0 Safe Methods

get , head : safe methods that ensures that by those methods, no changes occur at server that get those msg method

멱등성인가 그거 말하는듯, 멱등성 말 개어렵네, 딱 잊어먹기 좋음, safety 정도로 우선기억

3.3.1 GET

(실습 예정)

3.3.2 HEAD

GET 전에 start lines, Header 만 먼저 받아서 원하는 게 있나 없나 체크용이라는데, 현재에 이르러서 내가 자주 못본거 보면 그냥 GET해서 response에 status 404 뜨면 예외처리하는 방식으로 대체되지 않았나함

3.3.3 PUT

the inverse of the way that GET reads documents from a server

라는 표현으로 볼때, 왜 PUT은 보낼 때 아규먼트 싸그리다 보내야 하나 느낌은 오지만, 결과적으로 현재는 일부 아규먼트만 보내도 되는 PATCH가 우세한다. 나는 hidden tag로 하긴했는데, 해본거고

3.3.4 POST

3.3.5 TRACE

중간에 firewaslls , proxies, gateways, or other applications 같은 걸 거쳐갈때 request가 변형될 가능성이 높고

'The TRACE method allows clients to see how its request looks when it finally makes it to the server'

라고는 하는데, 역시 안써보니까, 이 후 설명이 모르겠음. CGI 언급되는거보면 어쩌면 현재 API 방식 아닐지도

3.3.6 OPTIONS

이것도 실습하면서 볼듯,

3.3.7 DELETE

3.3.8 Extension Methods

LOCK, MKCOL, COPY, MOVE ; 부트에서 지원하면 해보고 아니면 말고

3.4 Status Codes

start lines 의 일부

지금 껏 이거 따라서 client 딴에서 js 등으로 예외처리한듯

좀더 시각적인 자료 https://developer.mozilla.org/ko/docs/Web/HTTP/Status

3.5 (Detail of) Headers

Header 의 상세 설명

For more Information

순서상 body 나오면 좋겠는데 아님

Secure HTTP

내 톰캣이 다시 털리지 않기 위해

14.0 Making HTTP Safe

authentication ; 신분증 줘봐 client server간 Integiry ; data 교환해도됨 Encryption ; eavesdropping 예방, 훔쳐듣기 예방 Efficiency, Ubiquity, blabla

아는 단어 우선

14.0.1 HTTPS

더 좋은 시각자료 https://blog.eleven-labs.com/en/understanding-ssltls-part-1/

14.1 Digital Cryptography

Cyphers ; algorthims, 또는 일대일 함수, 이것의 결과는 cyphertext

Keys ; 암호화하고 복호화할때 쓰이는 행렬 정도 떠오름, 대칭 비대칭있고, 퍼블릭 있는데, 최종적으론 비대칭 && 퍼블릭이었나

signatures ; checksum, 까먹음, ascii에서 1bit 쓴다고한게 이거였나 certificates ; 공인인증서,

내가 한국에서 정발된 정품윈도우를 사면 알아서 딸려있기 때문에 체감하기 힘들다고 했던 거가 certificate인지 key인 기억안남, 하다보면 만나것지

여기는 좀 자세히 읽어야긋다.

임시

• cloud front 에서 http/2 설정해서 통신가능 https://evan-moon.github.io/2019/06/13/http2-with-aws/ => boot gRPC 통신으로 구현 가능

• ? gRPC https://docs.microsoft.com/ko-kr/aspnet/core/grpc/comparison?view=aspnetcore-6.0

• http/3 도 한다고는 함 https://aws.amazon.com/ko/blogs/korea/new-http-3-support-for-amazon-cloudfront/

• 유닉스, 리눅스, 윈도우 유닉스는 virtualbox 리눅스는 aws linux2, oracle linux(파일서버 만들어서 내 자료공유 편하게 될라나) 윈도우는 노트북

• 시간관리랑 운동 ; 하다보면 되것지, 인강듣는 시간 배치

UTF-8 인코딩 Linux 운영체제에 EUC-KR 인코딩 한글포함 파일과 UTF-8 인코딩 한글포함 파일을 몇 개 만들고 프로그램을 작성하여 각 파일명이 한글을 포함하는지 여부와 포함한다면 인코딩이 UTF-8 또는 EUC-KR 인지 판별하는 프로그램 코딩

+a 유니코드와 UTF-8 그리고 EUC-KR, 리눅스 파일시스템 파일명 인코딩 방식, 자바 코드, 자바스크립트에서 한글 인코딩 방식

접근과 해석

접근과 해석1 : 실습 시스템 환경을 중심으로

실험을 위해 Windows10 과 AWS Linux 2을 실습 시스템 환경으로 설정할 시, Windows에서 Linux로 파일전송을 하더라도 파일이름의 한글이 깨지지 않는다.

Windows 도 NTFS 3.1의 MFT 파일 저장 방식을 이래로, 메타데이터인 파일의 이름의 경우 utf-8가 보장되고, 점진적인 업데이트를 통해 메모장의 내용과 같은 파일 내용 또한 UTF-8이 기본값이다.

물론, 한국 Windows의 인코딩은 경우, 한글의 기계어 전환을 위해 사용되어온 CP949 인코딩 방식이 여전히 핵심적인 부분을 차지 하나, 최소화되간다고 이해가능하다.

이러한 흐름 속에서, 윈도우 사용자가 임의로 인코딩을 변경하여 파일을 리눅스로 서버로 전송한 경우에 대한 해결방안 도출이 우선된다.

이는 리눅스 쉘스크립트 문법과 한글 인코딩 개념에 대한 이해를 바탕으로 한글 파일 이름에 대해서 특정 명령어들를 실행시키는 것으로 귀결된다.

하지만 이러한 해결책은 이전 사례들을 포괄하지 못한다.

접근과 해석2 : 근본 시스템 환경을 중심으로

'리눅스 한글 깨짐'으로 구글링하면, Windows and Linux 통신 간에 파일 이름의 한글이 깨지는 현상이 있다.

현재 나의 개발환경에서는 재현불가능한 에러이다. 하지만, 기존 시스템은 내가 결정하는 게 아니다. 주어지는 것이다. 그러므로 이러한 사례들을 포괄할 수 있는 접근과 해결책 도출이 타당하다.

해결책1 : Linux 상에서의 조회와 인코딩 변경

깨진 파일명에 대해서는 cat, rm 등의 명령어가 작동하지 않는다. 자연스럽게 리눅스 상에서 할수있는 건 매우 제한된다. 그래도 파이썬 스크립트를 통해서 이런저런 시도를 해볼 수 있을 것으로 생각되나,

이러면 인코딩, 파일시스템, 자바와 자바스크립트 인코딩 개념들과이 근본적인 부분으로 다다르지 못한다.

해결책2 : Windows 에서의 전처리

기존 윈도우에서 보낼때부터 utf-8 인코딩을 확실히 보장하여 보내는 것이다.

물론, 윈도우 파일 시스템의 문서와 UTF-8로의 점진적인 업데이트에 의하면, 충분히 UTF-8이 보장된 상태로 선뜻 이해할 수 있다.

하지만, 문서와 달리, 현실 속에서는 EUC-KR 인코딩 회귀, 쉘 명령어 버전과 호환성의 문제, 윈도우 운영체제 크랙 버전 사용 시 업데이트 불가 문제 등 비정량적인 요소들이 인코딩 문제에 개입한다. 이에 따라 윈도우 운영체제 상에서의 UTF-8 인코딩은 생각보다 현저히 낮게 보장된다.

이에 따라, 윈도우 운영체제만이라도 UTF-8 인코딩을 확실히 보장해주는 해결책이 필요하다.

=> cp 65001, 아윤 노션 적극 참고

배운 점

• bash shell의 명령어 유틸리티의 버그들을 아윤 자료가 없었으면 인지도 못했음, 근본적인 지식이 문제 해결에 필수적인 경우를 습득

• 인터넷 자료는 실용적으로 당장의 문제를 해결할지도 모르지만, 가령 인코딩 에러 시 EUC-KR로 인코딩을 역행, 잠시 문제를 미룰뿐임

• 혼자 했으면, 이상함을 느끼기까지 못해도 2주는 걸렸을 것 같지만, 다른 관점의 자료덕에 한번에 느낌, 내 일 해준 느낌 감사

관련

Win-to-Linux 접근 수단들

파일 이름에 한글이 있을 때 깨지는 사례1

추가 : 컴파일과 인코딩

java 파일의 인코딩은 운영체제가 파일을 저장할때, 운영체제에 설정된 기본 인코딩으로 저장된다.

가령, 메모장의 기본 인코딩이 UTF-8인 Windows10의 경우, 메모장으로 Hello.java 파일 생성 및 저장 시, UTF-8로 저장되고, UTF-8로 조회해야 깨지지 않는다.

다만, 메모장의 기본 인코딩이 UTF-8인 Windows10이여도 cmd나 powershell 등 쉘의 인코딩은 cp949이다. 같은 운영체제에서 메모장은 UTF-8, 쉘의 인코딩은 cp949로 서로 다르다. (cp949, UTF-8의 혼용)

(나.txt 는 사전에 UTF-8로 인코딩된 파일이다.)

환장하겠는건, 내 윈도우 노트북에서 cmd는 chcp 65001이 바로되는데, powershell은 안된다. 맥북 사야겠다.

컴파일러의 인코딩은 운영체제 따라서.

JAVA 컴파일러의 인코딩 방식도 운영체제에 따라 기본값이 변동하는 것으로 보인다.,Windows is cp949, Linux is UTF-8,

동일한 자바파일을 윈도우상에서 컴파일 시도할때, UTF-8로 저장된 자바 파일임에도, cp949로 조회하여 컴파일에 실패한다. 하지만, 동일한 파일을 리눅스로 전송하면 별도의 문제없이 조회하여 컴파일된다.(컴파일러 버전은 동일)

javascript 파일의 인코딩 또한 js파일 저장 시 편집기의 인코딩 설정대로 파일이 기계어로 저장되고, 이와같은 인코딩을 선택한 쉘이나 편집기로 보냐에 따라 파일이 제대로 읽힌다.(UTF-8은 UTF-8, cp949는 cp949로)

다만, node의 자바스크립트 엔진을 사용한다면, 윈도우에서든, 리눅스에서든 운영체제와 별개로 컴파일 시 한글 깨짐 현상은 없다.

내 윈도우 노트북에서 git bash shell로 같은 문제 알집을 보면 한글명이 깨지는 게 보인다. 그리고 액면가로는 역시나 명령어가 안먹는다.

물론, 정확히는 리눅스 서버 상에서 발생하는 경우는 아니지만, 이러한 단서들로부터 추론할때, 과거의 인코딩 문제를 가진 파일들의 한글 이름이 깨졌고, 이에 따라 처음부터 utf-8로 보내야 했을 것이다.

분석

비록, 윈도우 OS 상에서의 사례지만, 리눅스 서버와 같이 Bash Shell을 사용한다는 점에 집중하여 문제를 분석해봤다.

우선 locale을 통해 현재 인코딩을 확인해보았다. 참고로 git bash shell의 경우 쉘 창을 우클릭하면 Options 항목의 text에서 인코딩을 바꿀 수 있다.

현재 eucKR로 쉘의 인코딩을 변경 해도, UTF-8로 저장된 파일 이름들이 ls 하면 정상적으로 조회된다. ??? 이 아니라

운영체제의 인코딩이 문제가 아니라, 명령어(one of shell's utilities)마다의 무언가가 문제일 수도 있다고 우선 정리.

한편, 내 개인 윈도우 노트북으로 gitbash 상에서 UTF-8로 인코딩된 파일들에 대해, 인코딩을 eucKR로 변경하고 조회해도

file -i *

하면 한글명이 하나도 안깨진다.

어쩌면 git 다운로드 시, 접근하는 미러 사이트들의 파일들이 들쭉날쭉할지도 모른다고 추가적으로 생각하는 중이다.

그리고 리눅스 운영체제 실험상황같이 Bash Shell이라는 공통점에 집중하였지만, 근본적으로 윈도우 운영체제에서의 실험으로서 실험 조건이 불명확하다.

대표적으로 Shell을 통해 scp를 통해 리눅스 서버의 커널에 접근하고 서버를 제어한다.

하지만, filezilla와 같은 관련 툴은 서버 접근과 제어 중에서도 파일 전송이라는 특수 목적을 집중하여 서버에 접근하고 제어한다. puTTy의 경우 key를 보다 손쉽게 설정한 접근을 도와준다.

그러나 이러한 연결 수단들(이하 임의로 Shell & the Relate) 또한 인코딩 설정 부문이 있고, Filezilla의 경우 UTF-8이 기본값이거나 지원가능하다.

Windows <= Shell & the Relate => Linux (Kernal)

참고자료

• Powershell vs FileZilla , 비교대조로 빠르게 이해 https://www.saashub.com/compare-powershell-vs-filezilla?ref=compare

• Powershell Encoding Config https://docs.microsoft.com/ko-kr/powershell/module/microsoft.powershell.core/about/about_character_encoding?view=powershell-7.2