Please enable JavaScript.

Coggle requires JavaScript to display documents.

component deploying - Coggle Diagram

- - - - local/hogwart
        
        tag를 수정한 image를 IGAW ECR에게 push
        
        Docker push image_id
        
        push to IGAW ecr
        
        docker push 373464800694.dkr.ecr.ap-northeast-1.amazonaws.com/tradingworks-corca-bidding-algo:v0.5.1
        
        IGAW ecr login
        
        aws ecr get-login-password --region ap-northeast-1 --profile beat | docker login --username AWS --password-stdin 373464800694.dkr.ecr.ap-northeast-1.amazonaws.com
        
        docker image의 태그를 수정
        
        Docker image_id tag igaw_image_url: 0.5.1
        
        docker tag <docker image id(uri 아님, id임)> 373464800694.dkr.ecr.ap-northeast-1.amazonaws.com/tradingworks-corca-bidding-algo:v0.5.1
        
        이미지 실행 테스트(latency, performance, ...)
        
        nx performance:select tester
        
        docker run \
        -e SUPERVISOR_HTTP_URL=http://beat-supervisor.api.corca.ai \
        -e SUPERVISOR_SECRET=IGAWJJANGJJANG \
        -e KAFKA_BOOTSTRAP_SERVERS=b-4-public.beat.ddg8gb.c2.kafka.ap-northeast-1.amazonaws.com:9196,b-2-public.beat.ddg8gb.c2.kafka.ap-northeast-1.amazonaws.com:9196,b-3-public.beat.ddg8gb.c2.kafka.ap-northeast-1.amazonaws.com:9196 \
        -e SLACK_ENDPOINT_ERROR_LOG=https://hooks.slack.com/services/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 \
        -e FEATURE_STORE_URL=redis://default:60ba8fab3c6f537af54e04184dbdc8f5@18.177.137.246:6379 \
        -p 50051:50051 \<docker image uri>
        
        이미지를 확인한 image_url: tag로 pull
        
        ecr login
        
        aws ecr get-login-password --region ap-northeast-1 | docker login --username AWS --password-stdin 598978303951.dkr.ecr.ap-northeast-1.amazonaws.com
        
        Docker pull image_url: tag
      - IGAW ECR
        
        IGAW ECR에서 최종적으로 수령
        
        igaw_image_url: 0.5.1
      - Corca ECR
        
        생성한 docker image를 확인
        
        image_url: tag
      - github action
        
        push image to Corca ECR
        
        자동으로 tag값 생성
        
        과정에서 push까지 자동으로 진행
        
        결과 확인
        
        aws의 ecs 접근
        
        1 more item...
        
        작성한 docker 파일을 github action을 이용하여 build
        현재 main브랜치에 merge시 자동으로 deploy된다고 한다.
        
        절차
        
        github 접속 후 repository 내 Actions 탭 좌측 작성한 yml 파일 확인
        
        Build and Push에서 Run workflow
        
        github repository 내의 Actions 탭 내 workflow를 통해 진행 확인
        
        만약 활성화를 원한다면 ecr에서 해당 이미지 uri를 복사
        
        aws의 ECS 에서 클러스터 후 클러스터명(예: BEAT) 이 후 서비스명(예: feature-generator)
        
        1 more item...
        
        aws내 ECS 에서 태스크 정의-새 태스크 정의 생성으로 해당 이미지 uri를 입력하여 태스크 정의 생성
        
        .github/workflows 내부에 yml 파일작성
        
        BEAT의 경우 현재 최상위 디렉토리에 build-and-push.yml이 작성되있음
        
        참조 youtube
        
        WebMagic Informatica
  - - - cloud watch
        
        로그 그룹
        
        해당 component
- - - - main.py
        
        aws내 실행될 메인 로직
        
        환경변수 초기화 및 redis 설정
        
        핸들러
        
        event["Records"]를 이용하여 파일명 획득
        
        get_object로 읽은 뒤, json load
        
        이후 redis에 저장
        
        main 실행부
        
        s3-event.json 을 open 후 event를 읽은 후 이를 핸들러에 넘겨줘서 실행
      - env.py
        
        main.py 에서 이용할 환경변수 설정
  - - - amazon 이벤트 알림 메시지 구조
    - - redis 저장 구조
  - - - DEBUG, FEATURE_STORE_URL, SLACK_ENDPOINT_ERROR_LOG
    - - build 내의 Dockerfile.feature-updater