문과지만 괜찮아

*주의!* 2025년 1월 말부터 시작했던 Project 온 세상이 주식이야 관련 포스팅입니다. 아래의 순서대로 진행될 예정입니다.OutroChrome Extension 마무리기타 Frontend 및 Spring Backend 개발LLM Application - LangGraph 전환 및 API 구현회고마지막 Chrome Extension 관련 포스팅은 아래의 링크에서 확인할 수 있다.Project: 온세 세상이 주식이야 - Chrome Extension 개발 Intro & MVP Project: 온 세상이 주식이야 - Chrome Extension 개발 Intro & MVP현재 계획 중에 있는 Chrome Extension 개발은 아래와 같이 진행될 예정이다.MVP Chrome Extension 개발C..

*주의!* 2025년 1월 말부터 시작했던 Project 온 세상이 주식이야 관련 포스팅입니다. 아래의 순서대로 진행될 예정입니다.OutroChrome Extension 마무리기타 Frontend 및 Spring Backend 개발LLM Application - LangGraph 전환 및 API 구현회고MVP까지만 포스팅을 진행한 후 갑자기 '온 세상이 주식이야'(이하 온세주)를 급작스럽게 마무리하게 됐다. 현재까지 만들어진 결과는 아래와 같다. 그리고 결론적으로 프로젝트 온세주는 실패한 프로젝트다. 구체적인 이유에 대해서는 위의 각 포스팅에서 구현 결과와 함께 언급할 예정이지만 아래와 같은 핵심적인 문제들이 있었다.프로젝트에서의 나의 역할이 프로젝트에서의 나는 Frontend 개발 - Chrome ..

*주의!* 작년에 정리하지 못했던 Project Joing의 문서입니다. 포스팅은 아래의 순서로 진행될 예정입니다.이미지 생성 모델 선정 3 - Flux.1 Schnell vs Flux.1 DevFlux.1 Dev Fine-tuning: LoRa & PEFTFlux.1 Dev Fine-tuning: AI-ToolkitFlux.1 Dev Fine-tuning: 학습데이터 수집 학습 데이터 확보와 학습 계획 Flux.1 Dev Fine-tuning: 학습과정 및 결과 비교마무리 및 회고작년 9월 말에 시작한 프로젝트가 12월 말에 드디어 끝났었고 이 포스팅은 그에 대한 회고다.프로젝트 Joing 초기 목표 달성 결과기능 단위 개발 목표LLM Application: 기획안 평가 및 요약, 피드백 생성목표결과총..

*주의!* 작년에 정리하지 못했던 Project Joing의 문서입니다. 포스팅은 아래의 순서로 진행될 예정입니다.이미지 생성 모델 선정 3 - Flux.1 Schnell vs Flux.1 DevFlux.1 Dev Fine-tuning: LoRa & PEFTFlux.1 Dev Fine-tuning: AI-ToolkitFlux.1 Dev Fine-tuning: 학습데이터 수집 학습 데이터 확보와 학습 계획 Flux.1 Dev Fine-tuning: 학습과정 및 결과 비교마무리 및 회고테스트 학습을 통해 현재 어느 정도 학습데이터와 유사한 결과가 출력되고 있다. 이에 더해서 추가적으로 학습계획에 언급한 내용처럼 Fine-tuning을 통해 결과를 비교해 볼 예정이다. 변경사항이 있다면 학습데이터의 비중의 경..

*주의!* 작년에 정리하지 못했던 Project Joing의 문서입니다. 포스팅은 아래의 순서로 진행될 예정입니다.이미지 생성 모델 선정 3 - Flux.1 Schnell vs Flux.1 DevFlux.1 Dev Fine-tuning: LoRa & PEFTFlux.1 Dev Fine-tuning: AI-ToolkitFlux.1 Dev Fine-tuning: 학습데이터 수집 학습 데이터 확보와 학습 계획 - 2Flux.1 Dev Fine-tuning: 학습과정 및 결과 비교마무리 및 회고학습계획 작성 이후에 Caption 생성과 테스트 학습을 진행했다. Caption 생성Caption 생성의 경우 AI-Toolkit에서도 사용한 Florence-2 모델을 활용했다.간단하게 Florence-2 모델의 경우..

*주의!* 작년에 정리하지 못했던 Project Joing의 문서입니다. 포스팅은 아래의 순서로 진행될 예정입니다.이미지 생성 모델 선정 3 - Flux.1 Schnell vs Flux.1 DevFlux.1 Dev Fine-tuning: LoRa & PEFTFlux.1 Dev Fine-tuning: AI-ToolkitFlux.1 Dev Fine-tuning: 학습데이터 수집 학습 데이터 확보와 학습 계획Flux.1 Dev Fine-tuning: 학습과정 및 결과 비교마무리 및 회고직전 포스팅에서는 AI-Toolkit의 선정 배경이었다면 지금부터는 본격적인 AI-Toolkit을 활용한 Fine-tuning 과정이다. 먼저 AI-Toolkit을 활용한 Fine-tuning을 위해서 아래와 같은 순서로 작업을..

*주의!* 작년에 정리하지 못했던 Project Joing의 문서입니다. 포스팅은 아래의 순서로 진행될 예정입니다.이미지 생성 모델 선정 3 - Flux.1 Schnell vs Flux.1 DevFlux.1 Dev Fine-tuning: LoRa & PEFTFlux.1 Dev Fine-tuning: AI-ToolkitFlux.1 Dev Fine-tuning: 학습데이터 수집 학습 데이터 확보와 학습 계획Flux.1 Dev Fine-tuning: 학습과정 및 결과 비교마무리 및 회고저번 포스팅에서 잠시 언급했듯이 LoRa Fine-tuning을 통해 우리는 기존 모델의 weight를 조정하는 adapter를 만들어야 한다. 구체적인 LoRa가 Adapter를 만드는 과정은 아래의 포스팅을 확인하면 된다. ..

*주의!* 작년에 정리하지 못했던 Project Joing의 문서입니다. 포스팅은 아래의 순서로 진행될 예정입니다.이미지 생성 모델 선정 3 - Flux.1 Schnell vs Flux.1 DevFlux.1 Dev Fine-tuning: LoRa & PEFTFlux.1 Dev Fine-tuning: AI-ToolkitFlux.1 Dev Fine-tuning: 학습데이터 수집 학습 데이터 확보와 학습계획Flux.1 Dev Fine-tuning: 학습 및 결과 비교마무리 및 회고왜 하필 LoRa일까?Image Generation Model을 Fine-tuning 하기 위해서 대표적으로 2가지 방식이 있다. 첫번째로는 DreamBooth이고 두번째가 LoRa 방식이다. (Full Fine-tuning도 있으나..

*주의!* 작년에 정리하지 못했던 Project Joing의 문서입니다. 포스팅은 아래의 순서로 진행될 예정입니다.이미지 생성 모델 선정 3 - Flux.1 Schnell vs Flux.1 DevFlux.1 Dev Fine-tuning: LoRa & PEFTFlux.1 Dev Fine-tuning: AI-ToolkitFlux.1 Dev Fine-tuning: 학습데이터 수집Flux.1 Dev Fine-tuning: 학습 및 결과 비교마무리 및 회고 작년(2024년)에 '이미지 생성 모델 선정 2'를 작성한 내 자신에게 소리치고 싶다. '야 그거 아니야!!!' 문제상황 1: Flux.1 Schnell의 특징Flux.1 Schnell을 사용하기로한 결정적인 이유 'GPU를 상대적으로 적게 사용하고', '생성..

현재 계획 중에 있는 AI 관련 기능 개발은 아래와 같이 진행될 예정이다.MVP AI 기능데이터 전처리기본 AI AgentAPI 서버 전환1차 API 서버 최적화Github: FastAPI Best Practice비동기 처리 2차 AI 기능 고도화데이터 전처리 -> LLM for Data Preprocessing or ChatGPT 파인튜닝기본 AI Agent -> Multi AI AgentAPI 서버 전환 -> Fail Over, Exception Handling, Web socket구현 계획 선정 동기위와 같은 구현 계획을 선정하는 데에 있어서 한 가지의 현실과 그로 인한 수요가 크게 작용했다. 먼저 현실이다.흔히 말하는 SaaS(Software as a Service)에서의 AI 개발은 현재 불가능..