DiningAI 팀 개발 상황 공유

[jh941213]

매주 팀 프로젝트 상황을 공유합니다. 매주 올려주세요!

[PhoebeBaek]

4주차 Progress

• 아키텍처 작성
  

• 데이터 체크

• Naver API를 활용해서 특정 키워드 몇가지에 대한 식료품 데이터 수집 가능할 것으로 보임

• 상품명, 가격 및 이미지와 같이 필요한 데이터 확보 가능

• 개발할 에이전트 및 R&R 확정

• 식료품 분석 에이전트: 장바구니에 넣은 식료품과 구매한 식료품을 조회하는 에이전트

• 레시피 영상 분석 에이전트: 식단 작성 시 참고할 유튜브 레시피 영상을 조회하고 해당 영상을 요약하는 에이전트 -> 재현

• 유저 인터페이스 에이전트: 선호 음식, 필요 영양소 및 알러지와 같은 데이터를 인풋으로 제공받는 에이전트. 구매한 상품의 경우, 소진한 양에 따라서 활용 가능한지 여부를 인풋으로 받도록 구현

• 개인 맞춤형 식단 제공 에이전트: 주어진 데이터를 기반으로 최종 5일 치 식단표와 각 메뉴의 레시피를 제공하는 에이전트

• 메뉴 이미지 기반 식료품 추천 에이전트: 메뉴 이미지를 업로드하면 해당 메뉴를 만들기 위해 필요한 식료품 추천 및 레시피 제공 -> 소정

• 상품 추천 비교 에이전트: 상품 옵션을 가격, 평점 기반으로 비교하는 에이전트 -> 수현

Action item

• 활용할 데이터 필드 확정 및 데이터 적재

[PhoebeBaek]

5주차 업데이트

• Autogen 설치 및 기초 테스트 진행
• Autogen-Bedrock 테스트 진행
• 기술 발표 진행

[PhoebeBaek]

6주차 업데이트

DB 세팅

• Naver API 활용한 Items 데이터 적재

에이전트 구축

메뉴 이미지 기반 식료품 추천 에이전트:

• Autogen x Gemini 호출 환경 세팅

레시피 영상 분석 에이전트:

상품 추천 비교 에이전트:

[PhoebeBaek]

7주차 업데이트

에이전트 구축

메뉴 이미지 기반 식료품 추천 에이전트:

• Multimodal input 제공받는 tool을 MCP 활용하여 구축
• Multimodal input을 받아 식료품 분석하는 에이전트 구축
• 간단한 데모 웹 구축

레시피 영상 분석 에이전트:

상품 추천 비교 에이전트:

[gusdlgustn]

• 상품 추천 비교 에이전트
• 최저가, 평균 별점, 원산지, 리뷰 기반 식료품 추천 에이전트 구축
• 상품 페이지의 상세정보 이미지 활용

[jh941213]

[PhoebeBaek]

9주차 업데이트

에이전트 구축

메뉴 이미지 기반 식료품 추천 에이전트:

• TEXT2SQL MCP 툴 구축
• Autogen team을 통한 각 에이전트 협업 구조 구축(진행 중)

레시피 영상 분석 에이전트:

상품 추천 비교 에이전트:

[PhoebeBaek]

10주차 업데이트

에이전트 구축

메뉴 이미지 기반 식료품 추천 에이전트:

• TEXT2SQL MCP 툴 수정
• Autogen team을 통한 각 에이전트 협업 구조 구축(진행 중)

[jh941213]

10주차 업데이트 내용 :

1. MCP , A2A 학습 및 예제 실습

• FastMCP 구축 테스트
• PyA2A 코드 실습
  회의 후 팀원들 코드 적용 반영 예정

2. 제미나이 Cook-book 멀티모달 예제 (음성) PR 요청 -> 추후 Dining AI 오픈소스 부분 Ipynb 파일로 PR요청 예정
3. 테디노트 youtube LangGraph 3시간 몰아보기 복습 중

[gusdlgustn]

10주차 업데이트 내용

• mcp, a2a 관련 공부
• 상품 페이지의 상세정보 이미지 활용 (진행중)