Apr 19, 2022 - 백엔드 아키텍쳐 (beta v1.0) 1차

(회사 소스를 제거하다보니, 너무 난해한 문서가 되었음. 관련 내용은 한번더 예제 샘플 생성 후, velog 쪽으로 신규 개설 후 작성해야할듯..)

관련 용어 정리

객체 폭발

  • 계층간 사용되는 데이터 구조를 다른 계층에서 사용 시 또다시 객체를 만들 때 중복되서 다시 객체가 생성되는 현상을 의미함.

응집도

  • 하나의 클래스가 하나의 기능(책임)을 순도 높게 담당 (해당 문서에서는 기능적 응집에 국한되어 이야기함.)

Entity, Domain : 엔티티 정의 (데이터베이스의 필드[컬럼])

  • 핵심 업무 규칙을 캡슐화
  • 메서드를 가지는 객체 거나 일련의 데이터 구조와 함수의 집합
  • 가장 변하지 않고, 외부로부터 영향받지 않는 영역

UseCase

  • Service (UseCase) : 비즈니스 규칙 정의 (Service → ServiceImpl)
  • ServiceImpl : 비즈니스 구체화
  • 애플리케이션에 특화된 업무 규칙을 포함
  • 시스템의 모든 유스 케이스를 캡슐화하고 구현
  • 엔티티로 들어오고 나가는 데이터 흐름을 조정하고 조작

전통적인 Controller, Service, Repository

simple3

mapstruct 를 이용한, 전통적인 웹 애플리케이션 구조입니다.
웹 계층, 도메인 계층, 영속성 계층으로 구성되어있습니다.

웹 계층은 도메인 계층에 의존하고,
도메인 계층은 영속성 계층에 의존하기 때문에 자연스레 데이터베이스에 의존하게 됩니다.

전통적인 계층형 아키텍처에서 전체적으로 적용되는 유일한 규칙은,
특정한 계층에서는 같은 계층에 있는 컴포넌트나 아래이 있는 계층에만 접근 가능하다는 것이다.

따라서 상위 계층에 위치한 컴포넌트에 접근해야한다면, 해당 컴포넌트를 계층 아래로 내려버리면 됩니다.
그리고 그런 내려지는 행위가 반복되면, 지름길을 만드는 것을 당연하게 생각하면,
하위 계층은 점점 비대하게 됩니다.

계층(Layer)를 구분하는 이유는 다음과 같습니다. 프로젝트의 이해도가 낮아도 전체적인 구조를 빠르게 이해가능합니다. (메소드명의 목적이 명확할 수록 더욱 빠르게 이해가능합니다.) 작성하고자하는 계층이 명확할 수록 더 빠르게 개발가능합니다.

다만, 각 레이어별로 수집개의 클래스들이 존재하게 되면서 코드 파악이 더욱 어려워질 수도 있으며, Layer 기준으로 분리했기에 코드의 응집도가 떨어질 수 있습니다.

그래서 1차 개발 시, 그 계층을 중지시키기 위한 Reader, Writer 를 만들었습니다.
추후, Master, Slave 의 구성을 위해서 분리하는 작업을 진행했습니다.

Request 객체를 전달하게 되면 의존성이 생기므로 전송 데이터 객체(DTO)와 같은 형태로 Wrapping하여 전달.
Return type의 경우 최종 응답 데이터 뿐만 아니라 다양한 정보(Meta data)들을 담아야 하는 상황이 발생할 수 있으므로 애그리거트 객체를 생성하여 사용

이 두가지를 편하게 사용하기 위해 mapstruct 를 도입하게 되었습니다. (https://mapstruct.org/)

그외의 규칙

  1. 파라미터는 단 한개만 사용 (강제 사항은 아님)
  2. 모든 프론트엔드의 return 하는 데이터는 테이블 기반으로 합니다. (필드명 등 편의성 사용)
  3. 중복은 허용되지 못합니다. 우발적 중복은 허용가능합니다.
    진짜 중복
    - 한 인스턴스가 변경되면, 동일한 변경을 그 인스턴스의 모든 복사본에 반드시 적용해야한다.
    우발적 중복(거짓된 중복)
    - 중복으로 보이는 두 코드의 영역이 각자의 경로로 발전한다면, 즉 서로 다른 속도와 다른 이유로 변경된다면 이 두 코드는 진짜 중복이 아니다.
    

와 같은 다양한 규칙으로 만들어진 계층 구조는 다음과 같습니다.

simple3

컨트롤러 → Service → Reader(or Writer) → Repository 형태로 호출됩니다. Service는 Use Cases 영역에 속하며, 각 계층간 분리를 위해, 서비스 영역은 Model 객체만 가지며, 컨트롤러와 Reader에서 Entity , Payload 등의 데이터를 Model 객체로 가공하여 전달합니다. (이때 MapStruct 가 사용됩니다.)

Reader와 Writer를 도입한 이유는 persistence 영역의 JDBC 가 JPA로 변경되었을 때나, DB 이중화 작업 시,
Service(Use Cases)의 최소한의 변경을 위하여 도입하였으나,
결국 불필요한 복제가 필요한 로직이 되었습니다.

불필요한 Reader 와 Writer 를 지우고 경량화가 가능하자는 의견들이 나오게 되었습니다.
그리고 Service 또한 모듈로 분리하는 것입니다.
추후 Master, Slave 시 Replication 대응을 위해 필요할 수도 있지만, 어노테이션으로 슬레이브, 마스터를 가리킬 수 있으므로 큰 강제성을 하지 않아도 된다고 생각합니다.

신규입사자분의 경우 대부분의 기존 Controller, Service, Repogitory 환경에서 작업했을 테니, 이해하거나 적응하기 어렵고, 우회할 수 있는 여러 여지가 있기 때문에, 강제성을 가지고 개발을 할 수 있는 구조가 무엇인지 다시금 고민하게 되었습니다.
(ex : 주입이 상관없으므로 interface 없는 @Service 생성, Service에서 바로 Repogitory 호출을 막을 방법이 없는 등.)

격리벽을 높여 강제성을 만드는 여러 방법 중에는 public > protected > default > private 에 default 만 정의하여 ,
구현체는 스프링부트의 어노테이션에서 주입하는 형태로만 허용 등이 있을 수 있었습니다.

결국 클린 아키텍쳐로 구성된 최종 서비스 구성도 입니다.

simple3

input 과 output 으로 만들어진 구조를 간단하게 포트 & 어댑터 디자인 패턴이 적용된 모듈입니다.
잘못된 의존성을 막기 위해 아키텍쳐를 여러 개의 빌드 아티택트로 만드는 여러가지 방법을 “만들면서 배우는 클린 아키텍쳐”란 책에서 영감을 받았습니다.

simple3

해당 구조에서 왼쪽에서 2번째 항목으로 구성을 구현하게 되었습니다.

어댑터 패턴 (adapter pattern)

한 클래스의 인터페이스를 클라이언트에서 사용하고자하는 다른 인터페이스로 변환합니다.
어댑터를 이용하면 인터페이스 호환성 문제 때문에 같이 쓸 수 없는 클래스들을 연결해서 사용할 수 있으며, 호환되지 않는 인터페이스를 사용하는 클라이언트를 그대로 활용할수도 있습니다.
이렇게 함으로써 클라이언트와 구현된 인터페이스를 분리시킬수 있으며, 향후 인터페이스가 바뀌더라도 그 변경 내역은 어댑터에 캡슐화 되기 때문에 클라이언트를 바꿀 필요가 없어집니다.

여기서 Port 개념이 추가되면서, 보통 포트와 어댑터 패턴이라고 합니다.
이미 api-admin 란 서비스를 구현한다고 했다면, 실제 구조는 다음과 같습니다.

simple3

컨트롤러 영역인 presenters 모듈
서비스 영역인 usecases 모듈 그리고 jdbc 를 직접구현하거나 이미 만들어져있는 Repogitory 모듈을 dependence하는 persistence 모듈로 분리합니다.

presenters-xxxx

  1. dependencies
dependencies {
    implementation(project(":modules:common-util"))
    implementation(project(":modules:common-payload"))
    implementation(project(":modules:modules-usecases:usecases-xxxx"))

    // mapstruct
    implementation("org.mapstruct:mapstruct:1.4.2.Final")
    annotationProcessor("org.mapstruct:mapstruct-processor:1.4.2.Final")

    implementation 'org.springframework.boot:spring-boot-starter-web'
    implementation 'org.springframework.boot:spring-boot-starter-validation'

    testImplementation 'org.junit.jupiter:junit-jupiter-api:5.7.0'
    testRuntimeOnly 'org.junit.jupiter:junit-jupiter-engine:5.7.0'
}

공통 payload

공통 utils

usecases

mapstruct

springboot-web

  1. package 구조

동일 class 는 구현체 오류가 나는 걸 방지하기 위해 앞에 Presentation 의 약어 Pre를 붙여서 만듬.

persistence-xxxx

  1. dependencies
dependencies {

    implementation(project(":modules:repository"))
    compile(project(":modules:db"))
    implementation(project(":modules:common-util"))
    implementation(project(":modules:modules-usecases:usecases-xxxxx"))
    implementation 'org.springframework.boot:spring-boot-starter-data-jdbc'
    runtimeOnly 'org.mariadb.jdbc:mariadb-java-client'

    implementation 'org.springframework.boot:spring-boot-starter-web'

    // mapstruct
    implementation("org.mapstruct:mapstruct:1.4.2.Final")
    annotationProcessor("org.mapstruct:mapstruct-processor:1.4.2.Final")

    testImplementation 'org.junit.jupiter:junit-jupiter-api:5.7.0'
    testRuntimeOnly 'org.junit.jupiter:junit-jupiter-engine:5.7.0'
}

modules:repository
modules:db
modules:common-util
modules:modules-usecases:usecases-xxxxx

  1. 패키지 구조

usecases-xxxx

  1. dependencies
dependencies {
    implementation(project(":modules:common-util"))
    implementation(project(":modules:message"))
    testImplementation 'org.junit.jupiter:junit-jupiter-api:5.7.0'
    testRuntimeOnly 'org.junit.jupiter:junit-jupiter-engine:5.7.0'

    // https://mvnrepository.com/artifact/org.mariuszgromada.math/MathParser.org-mXparser
    implementation group: 'org.mariuszgromada.math', name: 'MathParser.org-mXparser', version: '4.4.2'

    implementation 'org.springframework.boot:spring-boot-starter-web'
}
  1. 패키지

port.input →
port.output →

트랜젝션 위치?

@Transactional

implementation("org.springframework:spring-tx:5.3.6")

원하는 위치나 로직이 있을 경우 dependencies 에 추가함.

에 추가함.

모든 맵핑을 처리할 것인가?

디코드 3.0의 경우 객체 폭발이라고 할 정도로, entity → model → payload(request,response) 형태의 객체를 만들었습니다.

  • 완전 맵핑 전략으로 갈 것인가?
    결합을 낮추는 게 안정적이라는 기준을 가진다면, 완전 맵핑이 맞습니다.
    • entity 의 필드 변경이 request, response에 영향을 주면 안된다.
    • 격리벽 → entity
  • 불완전 맵핑 전략으로 갈 것인가?
    단순 CRUD 인 api-admin 에서는 비즈니스 모델의 변경이 entity, payload에까지 영향을 주었습니다.
  • trade-off 에 맞추어 각자 생각하여 진행할 것인가? : 개발자 본인의 판단의 선택을 존중합니다. 도메인의 복잡도가 높을 수록, 도메인모델(Entity)를 전체 노출 시킬일이 거의 없을 겁니다. 그러나 복잡도가 낮을 경우에는 도메인모듈에 곧 테이블(DB)며, request Json 이 되므로, 객체폭발을 시킬 이유가 없다고 보여집니다.

Apr 18, 2022 - flyway 사용법

회사 내부에서 flyway 컨퍼런스 한 내용을 요약해서 정리합니다.

초기 설정방법

build.gradle

compile 'org.flywaydb:flyway-core'

application.yml

spring:
  flyway:
    schemas: alice
    locations: classpath:db/migration,classpath:db/callback
    url: jdbc:mariadb:aurora://127.0.0.1:3307,127.0.0.1:3308/xxxx
    user: alice
	baselineOnMigrate: true     # V1__init
	out-of-order: true          # 비순차적 커밋

기존 datasource 에 설정된 user 정보, 패스워드 접속 url 를 flyway 속성에 맞게 넣으시면됩니다.

baselineOnMigrate: true 설명

테이블이 이미 존재하는, 비어있지 않은 스키마(데이터베이스)에서 실행될때, 
자동으로 기준선을 설정할지를 정의하는 옵션.

기준선이란, baseline 까지의 모든 마이그레이션을 제외하고 현재 기준 데이터베이스부터 시작한다는 뜻임. (기존 테이블을 유지할때 사용하면 됨.)

out-of-order: true

마이그레이션을 순서없이 실행할 수 있음.
이미 V1.0 이 있고 V3.0 을 적용했는데 이전 V2.0을 적용할때 에러가 나지 않게 하는 옵션

파일 생성법

init을 이용하여 SCHEMA_VERSION 테이블을 생성하면 V1 로 생성되기 때문에 처음 파일명은 V2 로 생성합니다.
( 위의 application 의 baselineOnMigrate: true 설정이 되어있어야합니다.)

V1__init.sql 은 flyway 에서 검증을 하지 않으므로, 이미 생성되어있는 테이블의 이력관리용으로 사용하거나 빈파일로 처리해도 무방합니다.

파일명은 V 와 숫자로 버전명을 지정하고 under_bar 두개로 시작되어야합니다.

simple1

이미 동작(RUNABLE)한 파일을 삭제 하거나 수정하면,

org.flywaydb.core.api.exception.FlywayValidateException: Validate failed: Migrations have failed validation

위와 같은 오류가 발생합니다.

에러가 발생하는 이유는, flyway 에 맞지 않는 형식이거나 이미 존재하는 테이블명, 존재하지 않는 테이블 명(or 인덱스나 유니크 키가 있다는 등등)등의 이유가 많으므로 해당 스크립트를 실행할 경우 IF NOT EXIST 나 IF EXIST 의 조건절을 넣으시면 좋습니다.

CREATE TABLE IF NOT EXISTS banner (
    id                       bigint auto_increment primary key,
    banner_type_id           bigint       null,
    title                    varchar(100) not null,
ALTER TABLE `product_detail_template_info`
    DROP INDEX IF EXISTS `idx_product_detail_info_product_id`;

브랜치를 사용하기 위한 명명규칙

한명의 전담 DBA가 있고,

분기를 거의 사용하지 않을 경우 예제 샘플처럼 V1, V2 순차적 작업이 좋습니다.

simple2

그러나 여러 개발자가 데이터 변경을 할 경우,

순차적 작업에 의한 충돌이 발생할 수 있기에 단순한 V1, V2 가 아닌,

날자시간분까지로 분리하여 사용합니다.

V 뒤의 접미사를 날짜시간분_행위_테이블명으로 지정합니다.

ex) V202102151212_Create_admin_user.sql

simple3

위의 경우, 생성된 순서와 반영 순서가 뒤섞일 수 있으므로,

순차적으로 마이그레이션을 하는 옵션을 true 에서 false 로 변경합니다.

		out-of-order: true          # 비순차적 커밋

에러 처리 방법

마지막으로 에러가 발생할 경우, 에러가 발생된 sql 파일의 이력을 삭제하는 작업을 진행합니다.

afterMigrateError	After failed Migrate runs

callback/afterMigrateError__repair.sql

DELETE FROM flyway_schema_history WHERE success=false;

참고주소: https://flywaydb.org/documentation/concepts/callbacks

여러가지 Callbacks 스크립트를 작성할 수 있습니다. 마이그레이션 시작 전, 시작 후, 에러가 발생할 때 등등,

여기서는 단순히 마이그레이션 에러가 발생하면, 실패한 이력을 삭제하여, 다음 스크립트가 진행할 수 있게 합니다.

flyway 작업 범위

DDL 만 사용하도록 합니다.

잘못된 flyway 의 경우 생성된 테이블인 flyway_schema_history 의 특정 row까지 삭제 후 재실행할 때,

insert 구문이 있다면 중복 데이터가 들어가거나 오류로 인해 동작하지 않게 됩니다.

해당 기능을 적용하는 범위는 개발에만 테이블을 만들고, 스테이징, 운영 등에 반영이 안되는 휴먼 에러 및 이력 관리 용이므로 ,

단순 DELETE, INSERT 과 같은 DML은 수정 권한을 가진 담당자가 처리하는 것을 원칙으로 합니다.

참고 예제 샘플

https://github.com/youngclown/batch-flyway

Apr 18, 2022 - 육각형 아키텍쳐 전설에 의하면...

요즘 재미있게 읽으면서 회사 실 프로젝트에 적용한

“만들면서 배우는 클린 아키텍쳐 - 자바 코드로 구현하는 클린 웹 애플리케이션”

이라는 책이 있습니다.

원서를 사려다가, 페이스북에 조영호님이 감수를 한다고 해서 기다리다가 출시하자마 구매한 책입니다!

거기 내용에 재미있는 글이 있습니다.

육각형 아키텍쳐에 대해서, 애플리케이션 코어가 육각형으로 표현되어 이 아키텍쳐의 이름이 되었다고 한다.
육각형 모양은 사실 아무 의미가 없다고 한다.
팔각형으로 그리고 팔각형 아키텍쳐로 그래도 상관없다고 한다.
전설에 따르면…..
이라는 글입니다!!

simple2

이라는 번역판을 보고, 원문이 너무 궁금해서 확인해보니,

simple2

According to legend, 
the hexagon was simply used instead of the common rectangle to show 
that an application can have more than four sides connecting it to other systems or adapters. 
Within the hexagon, 
we find our domain entities and the use cases that work with them. 

비슷하게 씌여있네요!