01. ELK ?

Elasticsearch, Logstash, Kibana의 머리글자를 따온 것입니다. 여기서 Elasticsearch는 데이터를 저장하고 분석하고, Logstash는 데이터를 수집하고 가공, Kibana는 시각화 및 모니터링 도구입니다.

02. ELK Stack ?

데이터를 수집, 분류, 검색해서 정보를 입맞에 맞게 시각화 해 주는 오픈소스입니다. 오픈소스에서 Stack 이라고 표현하는 거는 개별적으로 역할을 하는 기능들을 모아서 연결하여 더 유연하고 강력한 기능을 제공하는 기술단위를 뜻 합니다.

예를 들어, MEAN (Mongo DB, Express JS, Angular, Node JS) Stack,

LAMP(Linux, Apache HTTP Server, MySQL, PHP) Stack이 있습니다.

ELK Stack도 마찬가지로 Beats이 추가가 되면서 ELK 라고 표현하기 보다는 ELK Stack이라고 더 많이 쓰입니다.

02-01. Elasticsearch

Elasticsearch는 Lucene 기반 검색, 분석엔진입니다. Logstash를 통해 수신한 데이터의 저장소 역할을 합니다. JSON기반의 분산형 RESTful 검색엔진입니다.

• Lucene 기반 검색, 분석엔진 루씬 기반 검색엔진으로서 강력한 기능들을 가지고 있는데, 그 중 하나가 scoring, 연관도에 따른 정렬입니다. 검색어에 대해 유사도 스코어를 기반으로 한 정렬을 제공하는데, 이것은 문자열 콘텐츠에서 검색을 수행할 때 강력한 기능이 됩니다.
• JSON기반의 분산형 RESTful 검색엔진 모든 통신을 REST API를 이용하도록 만들어서 프로그래밍 언어와 무관하게 활용할 수 있습니다. 별도의 드라이버 라이브러리가 없더라도 웹 브라우저나 curl 명령어, Postman 등을 이용해 기능을 활용할 수 있습니다.

02-02. Logstash

Logstash는 서버사이드 데이터처리 파이프라인입니다. 다양한 소스에서 동시에 Data 수집하고 변환하여 stash 보관소로 보냅니다. 수집할 로그를 선정해서 지정된 대상 서버(Elasticsearch)에 인덱싱하여 전송하는 역할을 담당합니다.

02-03. Kibana

Kibana는 데이터를 시각적으로 탐색하고 실시간으로 분석할 수 있습니다. HTML과 JavaScripts 엔진입니다.

02-04. Beats

Beats는 서버에 에이전트로 설치하여 다양한 유형의 데이터를 Elasticsearch 또는 Logstash에 데이터를 전송합니다.

• Filebeats 보안 장치, 클라우드, 컨테이너, 호스트 또는 OT에서 수집하는 로그와 파일을 경량화된 방식으로 전달합니다.

• Metricbeat 시스템과 서비스에서 메트릭을 수집합니다. CPU부터 메모리, Redis, NGINX까지 Metricbeat를 통해 다양한 시스템 서비스 통계를 가볍게 전송할 수 있습니다.

• Packetbeat 호스트와 컨테이너의 데이터를 Logstash 또는 Elasticsearch로 전송하는 경량 네트워크 패킷 분석기입니다.

• Winlogbeat Windows 이벤트 로그를 Elasticsearch와 Logstash로 스트리밍합니다.

• Auditbeat Linux 감사 프레임워크 데이터를 수집하고 파일 무결성 모니터링 이벤트를 실시간으로 전송하여 추가적인 분석이 가능하도록 지원합니다.

• Heartbeat 활성 상태를 감지하고 서비스가 가능한지 모니터링합니다. URL 목록을 제공하면 Heartbeat에서 잘 작동 중인가? 라는 간단한 질문을 한 후, 향후 분석을 위해 정보와 반응 시간을 전송합니다.

• Functionbeat 클라우드 서비스 제공자의 Function-as-a-Service (FaaS) 플랫폼에서 기능으로 배포하여 클라우드 서비스로부터 데이터를 수집, 전송, 모니터링합니다.

이때까지 서버를 생성하고, 서버에 접근 권한이 있는 유저가 초기 프로젝트를 셋팅하는 것 까지 했다. 이제는 다른 사용자가 SVN 연동해서 저장소 불러오고, 수정 하는 방법을 알아보고자 함

난 새로운 WorkSpace를 만들어서 진행함

1. 프로젝트를 SVN으로 받을 때

• Window -> show view -> SVN Repositories

• 밑에 SVN Repositories가 생성이 되고, 빈 창에 우클릭 -> new -> Repository Location 클릭

• SVN 서버 URL입력 **이때 나는 프로젝트를 Check Out할 것이기 때문에 Repo명/Project명까지 함

• 해당 Repository 우클릭 -> Check Out 클릭

• 나는 현재 새로운 workspace이므로 여기에 프로젝트를 Check Out함

• 잘 생성되었는 지 확인

2. 작업을 한 후 SVN Server로 전송

• Check Out한 프로젝트 우클릭 -> Team ->
• Synchronize with Repository : 서버에 있는 파일과 어떤점이 다른지 비교
• Commit : 작업한 파일을 서버에 올리는 기능
• Update : 가장 최근에 Commit된 시점을 불러옴
• Update to Revision : 특정 지점을 Update 할 수 있음

셋팅 🚀

1. Eclipse Subversion (Subclipse) 설치, 스프링도 마찬가지

Eclipse Help -> Eclipse Marketplace

• Subclipse 설치

• 느긋하게 기다려줌

• Confirm

• "I accept the terms of the license agreement" 체크 후 Finish

• 느긋하게 기다려줌

• 중간에 이런 것이 뜨면 Install anyway해줌

• Restart 해줌

SVN-Server와 이클립스(Client) 연결 🤔

Window의 Perspective -> Open Perspective -> Other

• SVN Repository Exploring 선택 후 Open

• Add SVN Repository 선택

• Server side Repo url 입력
• 회사에서 주는 Server Repo를 넣으면 됨

• **Server 에서 등록된 Username과 Password를 넣어준다
• **회사에서 할당 해준 Username과 Password를 쓰면 됨

• server side repo(위 사진에서 https://desktop ~~ /svn/Test 우클릭하고 Refresh(새로고침) 해주면 Username과 Password를 입력하는 창이 뜨고, 똑같이 입력해주면 됨

• SVN 연결 완료

프로젝트 업로드(중요) 👍

• Perspective변환

• 해당 프로젝트 우클릭 -> Team -> Share Project

• SVN 선택

• Use existing repository location: 선택

• 현재 프로젝트명을 그대로 생성할 것이라고 두는 것 vs "Use specified folder name" 선택해서 폴더명을 새롭게 지정
• 난 그냥 finish

• 화면 전환에 관환 내용인데 Yes를 누르면 Synchronize 화면으로 전환됨

• 해당 프로젝트 우클릭 -> Commit 클릭

• Commit comment와 함께 OK를 누르면 서버로 전송이 됨

• server의 visualSVN Server를 통해서 보면 초기 프로젝트가 잘 생성됨을 알 수 있음

아무것도 안뜨면

• 1번째 SVN Repositories Explore 아이콘을 클릭
• 2번째 프로젝트 우클릭 -> refresh 클릭
• console의 commit 메세지와 history창 열어서 revision을 봄

설치 📃

1. VisualSVN Server (OS에 맞게 설치)

2. VisualSVN Server - Setup

• Next 누른다

3. Lisense Agreement

• 동의하고 Next 누른다

4. Select Components

• Next 누른다

5. Initial Server Configuration

• location : VisualSVN Server가 설치될 장소
• Repositories : Repo들이 들어 있는 장소
• Server Port : 통신할 포트번호 (기본은 https의 443포트지만 사용하고 있거나, 사용할 예정이라면 다른 걸 막 만들어서 써도 됨 근데 그러면 url 뒤에 포트를 명시해줘야함, 443은 할 필요 x)
• Backups : 백업 파일들이 들어있는 곳

아마 회사라면 location은 devtool들을 모아놓은 C:\dev\VisualSVN Server\로 설정할 것이고 Repositories는 D:\Repositories\로 만들 것 같음

6. Search Indexing Configuration

• 뭐 공식문서에 따르면

Consider enabling the full-text search feature that allows finding files with the specified content in the web interface. To enable the full-text search capabilities, you have to enable search indexing for repositories.

막 이렇게 적혀있는데 무시하고 Next를 누르자 (만약 Search indexing 허용하면 45일만 공짜로 쓰고 나중에 돈 내야함..)

7. Authentication Mode

• Use Subversion authentiaction을 체크하자 (만약 windows authentication을 사용하낟고 하면 이것도.. 6번과 같은 이유로 돈 내야함)

8. Ready to Install

• 설치ㄱ

Serverside Repository 생성 🏃‍♂️

❗ 아마 회사 내에서 발급해 준 Server Repository가 있을 것이다. 없을 시에는 이렇게 만들면 됨

1. Repository 생성

• Sidebar의 Repositories를 우클릭하면 Create new Repository를 누르자

• Regular FSFS repository를 선택하고 Next

• Repository name을 설정하고 Next

• Empty repository를 선택하고 Next

• All Subversion users have Read/Write access를 선택하고 Next

• Allow search indexing of this repository(현재 Test repo를 찾을 수 있도록)를 선택하고 Create

• 이제 Repository URL로 다른사람과 협업이 가능한 서버 Repo가 생성되었다

사용자 계정 생성 🤷‍♂️

❗ 위에 서버랑 마찬가지로 회사에서 만들어 준 사용자 계정이 있을 것이다. 즉 그 계정은 서버로 부터 Repo 접근 권한(Read/Write)을 받은 것이고 우리는 받은 계정을 토대로 Server Repository URL과 연결해서 Server Repo에 접근하면 됨

❗ 만약 받은 계정이 없으면 Server에서 사용자를 만들어 줘야함

1. 사용자 생성

• Sidebar의 Users 우클릭해서 Create New User를 함
• 이 계정의 User name과 Password를 통해서 Server Repo를 이용할 수 있음
• Password 같은 경우 대/소문자 구분이 가능해서 잘 해줘야함

• SVN은 Apache 재단에서 만든 형상관리 프로젝트의 이름
• 프로젝트시에 실수가 발생하면 소스코드를 이전 상태로 되돌리거나, 변경된 이력을 확인할 필요가 있고 협업시에 충돌에 대한 처리도 필요하기 때문에 형상관리가 필요함

2️⃣ 단어

• 중앙 저장소(Repository) : 원본 소스를 저장하고 있는 저장소
• Checkout : SVN에 들어있는 프로젝트 파일을 내 컴퓨터로 가져오는 과정(실제 프로젝트에서는 SVN을 연결해 주기에 SVN Repository Exploring 탭에서 내려받을 항목을 우클릭한 후 Check Out을 눌러주면 내컴퓨터에 프로젝트가 들어옴)
• 작업 디렉토리(Working Copy) : 원본 저장소로부터 Checkout을 통해 내려 받은 내 로컬 PC에 있는 작업 사본 디렉토리
• 커밋(Commit) : 작업 디렉토리에서 변경, 추가 및 삭제된 파일을 원본 저장소인 서버에 적용하는 것
• 갱신(Update) : checkout을 받은 작업 디렉토리를 원본 저장소의 가장 최신 commit된 버전까지 업데이트
• 리비전(Revision) : 소스 파일을 수정하여 커밋하게 되면 일정한 규칙에 의해 숫자가 증가하는데 저장소에 저장된 각각의 파일 버전이라 할 수 있음
• 되돌리기(Roll Back) : 작업 디렉토리에 저장되어 있는 사본을 특정 리비전 또는 특정 시간으로 복원할 수 있도록 하는 명령어

my name is JaeBeom