CAFE

과제게시판

[VLM]moondream2

작성자김위제|작성시간26.06.10|조회수24 목록 댓글 3

moondream2

https://huggingface.co/vikhyatk/moondream2

모델 불러오기

 

Hugging Face에서 제공하는 moondream2 예제를 사용하여 추론

 

예시 사진

 

영상 설명

입력

short caption

이미지의 가장 핵심적인 주제를 보통 한 문장으로 아주 간결하게 요약

Normal caption

이미지의 전반적인 상황은 물론, 배경, 사물의 색상, 인물의 구체적인 행동, 객체 간의 위치 관계 등을 여러 문장으로 상세하게 묘사

 

 

결과


영상 질문

Visual Querying

질문을 적어서사용


영상 검출

 

Obejct detection

단어에 맞는 객체 검출

 

pointing

 


카메라를 사용하여 추론

 

 

영상 캡션

 

영상에 관한 질문 / 사람 검출

 

 

다음검색
현재 게시글 추가 기능 열기
  • 북마크
  • 신고 센터로 신고

댓글

댓글 리스트
  • 작성자Sungryul Lee | 작성시간 26.06.11 훈련가기전에 moondream 모델 파인튜닝
    1. 파인튜닝예제 찾기
    2. 훈련데이터 포맷조사
    3. 예제를 이용하여 파인튜닝
    4. 결과분석

    졸작 데이터셋 만들어서 파인튜팅 해볼것
    1. 훈련데이터 포맷조사
    2. 졸작 데이터셋 포맷정의
    3. 졸작 데이터셋 제작
    4. 파인튜닝
    5. 결과분석
  • 작성자Sungryul Lee | 작성시간 26.06.13 위 예제실행환경이 리눅스인지 윈도우즈인지?
  • 답댓글 작성자김위제 작성자 본인 여부 작성자 | 작성시간 26.06.14 리눅스os 24,04 입니다
댓글 전체보기
맨위로

카페 검색

카페 검색어 입력폼