netstat -nap|grep 8080
sudo kill $(sudo lsof -t -i:8080)

참고

유명한 코인 거래소 몇 군데 고객센터에 문의를 해보니, 공통적으로 거래소에서 실시간으로 이루어지는 현물/선물 거래(spot/futhurs)는 트랜잭션 ID가 생성되지 않는다고 한다. 트랜잭션 아이디는 오직 deposit, withdrawal(거래소 지갑으로 입금, 거래소 지갑에서 외부지갑으로 송금, 외부 뱅크로 출금)할 때에만 생성된다고 한다.

트랜잭션 ID는 이전 트랜잭션의 해시와 연결되어 위조/변조 여부를 검증할 수 있게 해준다. 블록체인에 데이터가 추가될 때(transfer)에는 반드시 검증 과정을 거쳐야하고 해시와 연결되어야하는데, 코인 거래소의 실시간 거래에는 그 과정이 없다. 입출금을 제외한 나머지 거래는 코인 거래소 내부 데이터베이스의 숫자만 바뀌는 것이다. 모두와 함께 검증할 수 없고 언제든 조작될 수 있다.

거래소는 기존 은행/금융기관처럼 중앙화시스템이며 은행보다 보안도 허술하다. 기존 기술의 단점을 그대로 가져오면서 단점만 많아졌다. 블록체인 철학에도 위배된다.

자바는 설치되어 있다고 가정한다.

1. 아래 스크립트를 bat 파일로 저장 https://raw.githubusercontent.com/technomancy/leiningen/stable/bin/lein.bat

2. bat 파일이 있는 경로를 시스템 환경변수에 추가한다.

3. lein self-install 명령어 입력

4. lein repl로 쉘 시작

파이썬 이후로 오랜만에 정말 마음에 쏙 드는 언어를 찾았다.

파이썬은 자바와 같이 쓰일일이 거의 없어서 아쉬웠는데, Clojure는 자바랑 호환도 잘 된다니 정말 좋다.

1. GoogleCredenatial 클레스에서 access token으로 자격증명을 가져오는 방법(더이상 사용되지 않음)

build.gradle

implementation "com.google.apis:google-api-services-drive:v3-rev197-1.25.0"
implementation 'com.google.api-client:google-api-client:1.23.0'//google apis
implementation "com.google.http-client:google-http-client-jackson2:1.39.1"

public static final JsonFactory JSON_FACTORY = JacksonFactory.getDefaultInstance();
public static final HTTP_TRANSPORT = GoogleNetHttpTransport.newTrustedTransport();

   public Drive getDriveService(String accessToken) throws IOException {
        return new Drive.Builder(
                HTTP_TRANSPORT,
                JSON_FACTORY, getCredential(accessToken)
            )
            .setApplicationName("appname").build();
    }


    public Credential getCredential(String accessToken) {
        return new GoogleCredential.Builder()
                    .setClientSecrets(getClientSecrets())
                    .setJsonFactory(JSON_FACTORY)
                    .setTransport(HTTP_TRANSPORT)
                    .build()
                    .setAccessToken(accessToken);
    }

    private GoogleClientSecrets getClientSecrets() {
        GoogleClientSecrets clientSecrets = null; 
        try {
            InputStreamReader clientSecretsReader = new InputStreamReader(getSecretFile()); 
            clientSecrets = GoogleClientSecrets.load(JSON_FACTORY); 
        } catch (IOException e) {
            e.printStackTrace();
        }

        return clientSecrets;
    }

    private InputStream getSecretFile() throws IOException {
        return this.getClass().getResourceAsStream("/client_secret.json"); //client scret 파일 경로(resources 폴더 기준 상대경로) 
    }
}

2. GoogleCredenatials 클레스에서 access token으로 자격증명을 가져오는 방법

build.gradle

implementation 'com.google.api-client:google-api-client:1.33.0'
implementation 'com.google.apis:google-api-services-drive:v3-rev20211107-1.32.1'
implementation 'com.google.http-client:google-http-client-gson:1.19.0' 
implementation 'com.google.auth:google-auth-library-oauth2-http:1.3.0' 

public Drive getDriveService(String accessToken) throws IOException, GeneralSecurityException {
        return new Drive.Builder(
            GoogleNetHttpTransport.newTrustedTransport(),
            GsonFactory.getDefaultInstance(), 
                new HttpCredentialsAdapter(getCredentials(accessToken))
            )
               .setApplicationName("appname")
            .build();
}

 public GoogleCredentials getCredentials(String accessToken) throws FileNotFoundException, IOException {
        return GoogleCredentials.newBuilder()
            .setAccessToken(new AccessToken(accessToken, null)) 
            .build();
    }

/
* accessToken String 타입이 아니라 AcccessToken타입으로 얻어와서 설정해도 된다.  나는 다른곳에 쓰이는 로직 안고치려고 이렇게 했다. 
* accessToken 만료기한을 null 대신 Date 타입으로 줘도 된다. 그런데 임의로 설정한 만큼 유지가 되는지는 모르겠다. 
*/

훨씬 간단하고 깔끔해졌다!

참고코드

+) 서비스 계정으로 자격증명 생성하기

public GoogleCredentials getCredentials() throws FileNotFoundException, IOException {
        InputStream serviceSecret = getClass().getResourceAsStream("/service_secret.json");  //resources 기준 상대경로 
        GoogleCredentials credentials = GoogleCredentials.fromStream(serviceSecret); 
        credentials = credentials.createScoped(Arrays.asList(DriveScopes.DRIVE)); //scope이 없으면 자격 증명이 제대로 생성이 되지 않는다. 
        return credentials; 
} 

_이것때문에 이틀을 날렸다. 뭘 찾아보다가 해결한게 아니고 비주얼 스튜디오 코드에서 자동 빌드가 안되길래 수동으로 /gradlew 입력하여 빌드한 후 우연히 에러가 해결 되었다. 잘 몰라도 포기하지 않으면 에러는 어떻게든 해결 되는 것 같다. _

cmd에 ipconfig로 나오는 주소가 아니라, 구글에 my ip address 쳐서 나오는 주소를 입력해야 한다.

에디터블 테이블을 동적으로 생성하는 단계까지 완료했다. 테이블 셀을 클릭하면 입력창이 활성화되고, 값을 바꿀 수 있다. 1줄 추가 버튼을 누르면 테이블이 1줄 추가된다. 앞으로 데이터베이스를 연동해 봐야겠다.

1. editable 테이블 만들기
2. editable 테이블에 데이터베이스에서 가져온 데이터가 들어가도록 만들기
3. editable 테이블 컬럼으로 필터하여 조회할 수 있게하기(구글 시트에서 필터 적용하면 컬럼에 뜨는 역삼각형 기호)
4. 데이터 전체를 가져오는 것이 아니라, 트위터처럼 끝까지 내리면 재로딩 되는 무한 스크롤로 만들기(로딩되는 시간을 줄이기 위함)
5. 구글 시트와 디자인 맞추기

5번은 완료된거나 마찬가지다. 어떤 사람이 pug 와 scss 파일로 똑같이 만들어놓은게 이미 있기 때문이다. https://codepen.io/oliviale/pen/rPjgmB 물론 pug scss에 대해 좀 공부를 하긴 해야한다. 나한테는 생소한 개념이다.

언어는 자바스크립트 + express.js로 할 것이다. 실패한다고 해도 많은 공부가 될 것 같다.

use mysql;
update user set password=password('powerfull-password') where user='root';

그러나 이상하게 계속 sudo로만 접속되고 mysql -u root -p 명령어로는 ERROR 1698 에러를 띄우며 접속이 되지 않았다.

스택오버플로우에서 해답을 찾았다.

sudo로 접속 후 다음 명령어를 입력하면 된다.

USE mysql;
UPDATE user SET plugin='mysql_native_password' WHERE User='root';
FLUSH PRIVILEGES;
exit;
service mysql restart

이렇게 하고 나서는 sudo 로그인을 할 때에도 정확한 비번을 입력해야한다.

mysqladmin -u root password

기존 설정한 비번을 바꾸고 싶을 경우

 mysqladmin -u root -p password

패스워드 입력 후 새로운 패스워드를 설정할 수 있다.

ssh키는 분실하면 복잡해지므로 꼭 안전한 곳에 보관하자

1. runtime.txt 작성

   python-'version'
   #ex python-3.10.4

2. gunicorn 설치

3. requirements.txt 작성

pip list --format=freeze > requirements.txt

format 옵션을 주지 않으면 버전이 아니라 경로가 포함되는 경우가 생기는데 이것때문에 에러가 발생할 수도 있다. 그래서 경로 없이 깨끗한 파일을 얻고 싶다면 꼭 저 옵션을 줘야한다. 전에는 이걸 몰라서 일일이 손으로 경로 지우고 버전 적는 노가다를 했었다..

4. Procfile 작성

   web: gunicorn '메인 실행파일 이름(py붙이면 안됨)':app
   #ex 메인실행파일이 main.py인 경우 web: gunicorn main:app

heroku 배포 시 주의점

1. heroku는 동적으로 port를 할당하기 때문에 꼭 지정된 포트에서 시작하지 못할 수 있다. 이 경우 지연되다가 아예 서버를 시작하지 못할 수도 있다고 한다.
2. host 옵션으로 0.0.0.0을 줘야한다.

=> 요약 app.run(host='0.0.0.0')

3. 기타 앱, 데스크톱 혹은 TV용 구글 api 클라이언트 키를 사용할 경우 heroku에서 배포할 수 없다. 이거 몰라서 한 사흘 날림

배포 중 만났던 에러들

1. gunicorn: error: unrecognized arguments: app:app 나는 flask 앱에 데스크톱 용 구글 api client 계정을 연동하여 사용하고 있었다. 데스크톱용 client 계정의 경우 브라우저가 자동으로 실행되고 사용자가 로그인을 하면 토큰을 받아오게 되는데 heroku는 실행할 수 있는 브라우저가 없었기 때문에 열리지 않았고, 응답을 하지 않은채로 계속 시간이 지나니 gunicorn에서 app을 찾을 수 없다는 에러를 낸 것이었다. 서비스 계정으로 바꾸고나니 에러 없이 잘 배포되었다.

2. H10 - App crashed object-detection 의존성 문제 어차피 데이터 분석하거나 컴퓨터 비전쪽 웹서비스가 아니라서 그냥 모듈을 requirements.txt에서 지우니 해결 되었다. 충돌 일어나는 모듈 중에 꼭 필요한 모듈이 아니라면 그냥 지워도 된다.

3. code=H13 desc="Connection closed without response" 페이지를 로드하지 못하고 30초 이상 지나면 에러로 표시된다. 1번 문제를 해결하자 같이 고쳐졌지만 더 길게 설정할 수 있는 방법이 있다.

후기

배포하는데 총 5일정도 걸렸다. 모듈 충돌 문제만 아니었으면 더 빨리 배포할 수 있었을 것이다. 꼭 가상환경 사용하자...의존성 문제 때문에 개발할 때 너무 힘들다. 배포하는 과정에서 한 80%는 에러와 싸우는 과정인 것 같다. 다음에는 도커도 사용 해봐야겠다.

만약 에디터 권한을 가진 다른 사람이 서비스 계정으로 올린파일을 삭제하면 어디에서도 파일을 찾아볼 수 없다. 서비스계정으로는 구글 로그인을 할 수 없기 때문이다.

그래서 서비스 계정으로 파일을 올린다음 소유자를 변경하려고 시도했다.

그러나 에러의 에러의 에러를 반복하다가 결국 충분한 권한이 없다는 에러 메시지를 끝으로 포기했다.

그런데 콘솔에서 서비스 계정 설정을 편집자로, 소유자를 내 구글 계정을 설정하니, 업로드는 서비스계정으로 하는데 파일은 내가 소유하게 되었다.

서비스계정 permissions 탭으로 들아간 후 Editor에 서비스 어카운트 계정을 추가하고 Owner에 파일 소유자로 하고 싶은 구글 계정을 추가한다.

설정하고 바로 적용이 안될 수도 있다. 적용 후 작동하지 않아서 안되는 줄 알았는데 며칠 후 다시 해보니 잘 되었다.

이런 폼이 있다고 해보자. 이미지를 업로드하고 크롭을 한 다음 제출해야한다.

<!DOCTYPE html>
<html>
    <body>
        <form action="/req/submit" method="POST" >
            ...
            <button id="crop">사진 크롭</button>
            <button id="submit" type="submit" ></button></input>
        </form>
    </body>
</html>

그런데 사진 크롭 버튼을 누르면 그냥 제출되어버린다. 다음과같이 사진 크롭버튼을 밑으로 빼면?

<!DOCTYPE html>
<html>
    <body>
        <form action="/req/submit" method="POST" >
            ...
            <button id="submit" type="submit" ></button></input>
        </form>
        <button id="crop">사진 크롭</button>
    </body>
</html>

제출 버튼 밑에 사진 크롭버튼이 있어서 안 예쁘다.

2. 해결 방안

실제 제출버튼을 안보이게 숨기고, 페이크버튼과 크롭버튼을 form 바깥으로 뺀다.
페이크 버튼을 누르면 실제 제출 버튼이 눌리게 하면 된다.

<!DOCTYPE html>
<html>
    <body>
        <form action="/req/submit" method="POST" >
            ...
            <button style="display:none;" id="submit" type="submit" >진짜 제출 버튼</button>
        </form>
        <button id="crop">사진 크롭</button>
        <button onclick="submit();">가짜 제출 버튼</button>
        <script>
            function submit() {
                document.getElementById("submit").click();
            };
        </script>
    </body>
</html>

3. 더 간단한 해결 방안

button 태그(사진크롭)를 input 태그로 바꾸고 onclick이벤트를 할당한다..

<input onclick="function()">

npm install -g localtunnel

2. localhost에서 프로젝트 돌리기

3. lt --port '포트번호'

정말 멋지다! 이제 테스트하려고 heroku에 배포하거나 라우터 포트포워딩할 필요없다!!

단점-오픈소스이기 때문에 종종 서버가 다운되는 일이 있다고 한다 .

그런게 싫으면 상업용 라이센스인 ngrok를 사용하면 된다.

참고: Accessing Localhost From Anywhere In 5 Min!

폴더구조

project folder/
ㄴstatic/
    ㄴjs/
        ㄴjquery-1.11.3.min.js
        ㄴsignature_pad.min.js
    ㄴcss/
        ㄴcss.css
ㄴtemplates/

templates 폴더의 html 파일에서 다음과 같이 사용한다.

<head>
    <script src="{{ url_for('static', filename='js/jquery-1.11.3.min.js')}}" type="text/javascript" />
    <script src="{{ url_for('static', filename='js/signature_pad.min.js')}}" type="text/javascript" />
    <link rel="stylesheet" href="{{ url_for('static', filename='css/css.css')}}">
</head>

일반적으로 이렇게 호출하고 file_resorce를 받아보면 file id 같은 정보만 있고 permissions 객체가 없다.

file_resource = drive.files().create(body=metadata, media_body=path, fields='id, permissions').execute()

이렇게 호출하면 permissions 객체를 리턴받을 수 있다. permissions 객체 중에서도 특정 필드값만 얻어오고 싶으면 다음과 같이 사용하면 된다

file_resource = drive.files().create(body=metadata, media_body=path, fields='id, permissions(id, role, emailAddress)').execute()

<button onclick="location.href='{{link}}'";>see in google drive</button>

metadata = {
        'name': '파일 이름.확장자', 
        'parents': ['업로드할 폴더 id'], #필수아님
        'mimeType': None
}

scope = [
    'https://www.googleapis.com/auth/drive', 
]
json_file_name = './config/credentials.json'
creds = ServiceAccountCredentials.from_json_keyfile_name(json_file_name, scope)
drive = build('drive', 'v3', credentials=creds)
file = os.path.join(os.getcwd(), 'temp', 'result.xlsx') #파일 경로 
res = drive.files().create(body=metadata, media_body=file).execute()
if res:
    print('Uploaded "%s" (%s)' % (file, res['mimeType']))

만약 columns_auto_resize 함수를 찾을 수 없다고 하면 다음과 같이 gspread의 버전을 업그레이드 한다.

!pip install gspread --upgrade
!pip install gspread_dataframe --upgrade