🚀 Deploy: Ver1.0.0 배포 by thelightway24 · Pull Request #80 · yakplus/batch

thelightway24 · 2025-05-20T06:09:42Z

No description provided.

✨ Feat: Embedding 공통 인터페이스 개발

✨ Feat: api 데이터 정제

* 📦 Chore: 포트 번호 변경 * 📦 Chore: git-action 테스트 서버 상태 URL 변경 * 📦 Chore: 오타 수정

* ✨ Feat: Embed 모델 2개(KM-BERT,KR-SBERT) 추가 * ✨ Feat: 임베딩 처리 클래스 생성 * ✨ Feat: Api Raw 데이터 테이블 병합 * ✨ Feat: 테스트 컨트롤러 추가 및 사소한 오류 수정 * ♻️ Refactor: 통합 테이블 생성 구조 변경 * 🐛 Fix: 테이블 병합 코드 주석처리

* 📦 Chore: index 패키지 병합 * ♻️ Refactor: 임베딩 Entity 객체 분할 * 📦 Chore: 파일명 오류 수정 * 📦 Chore: entity 테이블 수정 * ♻️ Refactor: 패키지 구조 변경 및 임베딩 처리 * ♻️ Refactor: 패키지 구조 변경 및 임베딩 처리 * 🐛 Fix: 똑같은 페이지만 가져오는 오류 수정 --------- Co-authored-by: Copilot <175728472+Copilot@users.noreply.github.com> * ♻️ Refactor: 이미지 데이터 저장 로직 개선 * ♻️ Refactor: 이미지 데이터 저장 로직 개선 * ♻️ Refactor: 메서드명 변경 * ✨ Feature/#16 테이블 병합 (#25) * ✨ Feat: 테이블 병합 추가 * 🐛 Fix: image 저장 과정 중 Object Mapper 오류 수정 * 🐛 Fix: 저장 방법이 안가져와지는 문제 수정 * ✨ Feat: 임베딩 포트 어댑터 추가 (#28) * ✨ Feat: 임베딩 포트 어뎁터 추가 * ♻️ Refactor: 맵핑 공통함수 DrugMapper로 분리 * ✨ Feature/#29 색인 코드 통합 (#30) * ♻️ Refactor: EsIndexName을 GovDrugRawDataPort에서 받아오도록 수정하였습니다. * 📝 Docs: DrugIndexer와 ElasticsearchDrugAdapter 클래스의 주석을 수정하였습니다. * ♻️ Refactor: Elasticsearch에서 개별저장하는 로직을 Bulk로 저장하도록 변경하였습니다., 로그를 추가하였습니다. * ♻️ Refactor: 에러 로그를 추가하였습니다. * 📦 Chore; 주석 추가 (#32) --------- Co-authored-by: Copilot <175728472+Copilot@users.noreply.github.com> Co-authored-by: HaechangLee <112938092+HaechangLee@users.noreply.github.com> Co-authored-by: JUNG ANSIK <jaszzzzz@naver.com>

* ✨ Feat: 증상 Document, Repository 정의 * ✨ Feat: 증상 파싱 로직 구현 * ✨ Feat: 증상 인덱싱 기능 구현

📦️ Chore: esIndex명 반환하도록 수정

🐛 Bug: es인덱싱 이미지url null 값처리

🐛 Bug: pageable 인자 0 부터 시작하도록 변경

* ♻️ Refactor: 임베딩 DB 접근 port 변경 * ♻️ Refactor: JPA findAll OrderBy 삭제 * ♻️ Refactor: JPA 테이블 타입 변경

* ♻️ Refactor: 임베딩 DB 접근 port 변경 * ♻️ Refactor: JPA findAll OrderBy 삭제 * ♻️ Refactor: JPA 테이블 타입 변경 * ♻️ Refactor: 임베딩 모델 변경

…Default 어노테이션이 없어 빌더로 객체 생성시 기본값이 설정되지 않는 문제를 해결하였습니다.

* ✨ Feat: 임시 파일 정의 * ✨ Feat: 일반 의약품만 가져오도록 변경 * ✨ Feat: 증상 사전 RDB 저장로직 구현 * ✨ Feat: 증상 ElasticSearch 색인 로직 구현 * ✨ Feat: 키워드 검색 테이블 통합 및 색인 로직 구현 * ♻️ Refactor: Document 객체 필드 이름 변경 * ✨ Feat: 성분명도 포함해서 색인하도록 변경 * ✨ Feat: 증상 사전 로그 및 에러 처리 추가

* ✨ Feat: 임시 파일 정의 * ✨ Feat: 일반 의약품만 가져오도록 변경 * ✨ Feat: 증상 사전 RDB 저장로직 구현 * ✨ Feat: 증상 ElasticSearch 색인 로직 구현 * ✨ Feat: 키워드 검색 테이블 통합 및 색인 로직 구현 * ♻️ Refactor: Document 객체 필드 이름 변경 * ✨ Feat: 성분명도 포함해서 색인하도록 변경 * ✨ Feat: 증상 사전 로그 및 에러 처리 추가 * 🐛 메소드 호출 오류 수정 --------- Co-authored-by: pcb7893@naver.com <122460524+chanbyoung@users.noreply.github.com>

* ✨ Feature: 임베딩 모델 선택 기능 * ♻️ Refactor: 스위치 모델을 구조에 맞게 수정하였습니다. (RDB -> ES) * ♻️ Refactor: 이제 RAWDATA를 꺼내어 Embedding한 후 Embedding테이블에 넣을 때 스위칭로직을 이용하여 한 모델씩만 사용 가능합니다.

* ✨ Feature: 스프링 배치 의존성 및 Job으로 전환 * �✨Feature: 테이블 병합 실패 로직 추가 및 불필요 파일 삭제 * ♻️ Refactor: 패키지 구조 수정 및 기타 오류 수정 * 📦 Chore: PR템플릿 위치 변경 * 🐛 Fix: embed Step 오류 수정

* ✨ Feature: yakplus-batch의 코드 통합 초안 * 🐛 Fix: 컴파일 오류 수정 -1 * 🐛 Fix: 컴파일 오류 수정 -2 * 🐛 Fix: Job 매니저 TaskExecuter 이름 변경에 따른 오류 수정 * ♻️ Refactor: 패키지 구조 변경 * 📦 Chore: Swagger 의존성 추가 및 설정 추가 * ✨ Feat: 스웨거 적용 * ✨ Feat: `DrugControllerDocs` 설명 추가 * ♻️ Refactor: 키워드 색인시 한약 제외하도록 쿼리 변경 * 🐛 Fix: 임베딩 오류 수정 및 불필요한 로그 삭제 --------- Co-authored-by: leelise <jaszzzzz@naver.com> Co-authored-by: pcb7893@naver.com <122460524+chanbyoung@users.noreply.github.com>

* 📦 Chore: 증상 사전 빌드 시 추가 * 📦 Chore: 증상 사전 빌드용 수정

* 🐛 Fix: 인덱스 청크 사이즈 수정 * 🐛 Fix: 이미지 url ES필드 타입 수정

thelightway24

모두 고생하셨습니다 👍

HaechangLee

고생많으셨습니다!

LEELISE

고생하셨습니다~!

HaechangLee and others added 30 commits April 24, 2025 12:26

📦️ Chore: build gradle 수정

0ae8325

✨ Feat: Openai Embedding 함수 추가

a6d02ef

🐛 Bug: application.yml openai api key 추가

8b48c6d

♻️ Refactor: 주의사항 유형 enum 삭제

a33906a

✨ Feat: Embedding 공통 인터페이스 개발

d5681ba

✨ Feat: Embedding 공통 인터페이스 개발

7385df5

✨ Feat: Embedding 공통 인터페이스 개발

✨ Feat: API 데이터 정제 추가

4b461a8

Merge branch 'dev' into feature/#1-API-데이터-정제

647a349

✨ Feat: API 데이터 정제

012c872

✨ Feat: api 데이터 정제

✨ Feat: 전체 요청수 계산 클래스 생성

385b0fe

📦 Chore: 테스트 서버 배포 추가

5f5b94a

* 📦 Chore: 포트 번호 변경 * 📦 Chore: git-action 테스트 서버 상태 URL 변경 * 📦 Chore: 오타 수정

🐛 Fix: 컴파일 오류 수정

9eee333

🐛 Fix: API URI 환경 변수 오류 수정 (#12)

d5ca2ff

✨ Feat: 이미지 전체 저장

6426d9f

✨ Feature/#35 증상 인덱싱 저장 로직 구현 (#36)

8fa865c

* ✨ Feat: 증상 Document, Repository 정의 * ✨ Feat: 증상 파싱 로직 구현 * ✨ Feat: 증상 인덱싱 기능 구현

♻️ Refactor: 색인포트 통합 (#37)

f26f44d

✨ Feature/#40 임베딩 모델 선택 기능 (#41)

284a3c4

📦 Chore: 테스트 코드 삭제 및 배포 코드로 수정

4d46af6

🐛 Fix: 응답 객체에서 items 추출 실패해도 진행되도록 수정 및 로그 기록

747a55f

📦 Chore: 불필요한 로그 삭제

a1b5e07

📦 컨트롤러 일부 수정

eecc5a6

🐛 Fix: 트랜잭션 삭제

ea7e929

🐛 Fix: 메모리 오류 수정

5cbb4db

📦️ Chore: esIndex명 반환하도록 수정

11b2813

📦️ Chore: 임베딩 색인시 인덱스명 반환

240c1f8

📦️ Chore: esIndex명 반환하도록 수정

🐛 Bug: es인덱싱 이미지url null 값처리

001e795

🐛 Bug: es인덱싱 이미지url null 값처리

6b8fc3c

🐛 Bug: es인덱싱 이미지url null 값처리

HaechangLee and others added 22 commits April 29, 2025 15:07

🐛 Bug: pageable 인자 0 부터 시작하도록 변경

2253796

🐛 Bug: pageable 인자 0 부터 시작하도록 변경

♻️ Refactor: 임베딩 DB 접근 port 변경 (#48)

214dd2f

* ♻️ Refactor: 임베딩 DB 접근 port 변경 * ♻️ Refactor: JPA findAll OrderBy 삭제 * ♻️ Refactor: JPA 테이블 타입 변경

📦️ Chore: gptEmbeddingLoadingAdapter 로깅 추가 (#50)

d334d2c

♻️ Refactor: 임베딩 모델 변경 (#51)

6f0cb8e

* ♻️ Refactor: 임베딩 DB 접근 port 변경 * ♻️ Refactor: JPA findAll OrderBy 삭제 * ♻️ Refactor: JPA 테이블 타입 변경 * ♻️ Refactor: 임베딩 모델 변경

🐛 Bug: 페이지 정렬방식 변경 (#53)

a15090e

🐛 Fix: 약품 효능 파싱 문제 수정 (#55)

8548019

✨Feature: 한약 구분 및 허가 만료 일자 추가 (#57)

927b9b7

🐛 Fix: DrugDetailEntity 객체의 필드 isHerbal의 기본값을 false로 설정하였으나 @Builder.…

89bc6e5

…Default 어노테이션이 없어 빌더로 객체 생성시 기본값이 설정되지 않는 문제를 해결하였습니다.

🐛 Fix: JPA Entity 수정 (#59)

234792a

🐛 Fix: #58 jpa entity null 오류 (#60)

dcbcb3d

♻️ Refactor: 임베딩 어뎁터 동작 수정 (#65)

aa20e77

♻️ Refactor: 임베딩 저장/로딩 포트통합 (#67)

fcd117c

📦 Chore: 증상 사전 빌드 시 추가 (#73)

04de952

Feature/#72 증상 사전 추가 (#74)

f4ee624

* 📦 Chore: 증상 사전 빌드 시 추가 * 📦 Chore: 증상 사전 빌드용 수정

🐛 Fix: 인덱스 청크 사이즈 수정 (#76)

30b802a

🐛 Fix: 이미지 url ES필드 타입 수정

b177515

* 🐛 Fix: 인덱스 청크 사이즈 수정 * 🐛 Fix: 이미지 url ES필드 타입 수정

🐛 Fix: 색인을 위한 어댑터 이름 영문 소문자로 변경 (#79)

efd462a

thelightway24 requested review from HaechangLee, LEELISE and chanbyoung May 20, 2025 06:09

thelightway24 commented May 20, 2025

View reviewed changes

HaechangLee approved these changes May 20, 2025

View reviewed changes

chanbyoung approved these changes May 20, 2025

View reviewed changes

LEELISE approved these changes May 20, 2025

View reviewed changes

thelightway24 merged commit ebbc26a into main May 20, 2025
2 of 6 checks passed

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

🚀 Deploy: Ver1.0.0 배포#80

🚀 Deploy: Ver1.0.0 배포#80
thelightway24 merged 53 commits intomainfrom
dev

thelightway24 commented May 20, 2025

Uh oh!

thelightway24 left a comment

Uh oh!

HaechangLee left a comment

Uh oh!

LEELISE left a comment

Uh oh!

Uh oh!

Reviewers

Assignees

Labels

Projects

Milestone

Development

Uh oh!

4 participants

Conversation

thelightway24 commented May 20, 2025

Uh oh!

thelightway24 left a comment

Choose a reason for hiding this comment

Uh oh!

HaechangLee left a comment

Choose a reason for hiding this comment

Uh oh!

LEELISE left a comment

Choose a reason for hiding this comment

Uh oh!

Uh oh!

Reviewers

Assignees

Labels

Projects

Milestone

Development

Uh oh!

4 participants