<패스트캠퍼스 오프라인 프롬프트 엔지니어링 3기 수강생을 위한 공지>
안녕하세요.
안녕하세요.
슬래시페이지를 구독해 주신 후 이 글에 댓글을 하나씩 남겨주세요. 제가 직접 멤버 권한을 드려야 "논문 요약", "프롬프트"를 보실 수 있습니다.
관련 질문도 이 공지의 댓글로 남겨주세요!
14 Comment
Reaction
Comment
Share
<패스트캠퍼스 오프라인 프롬프트 엔지니어링 3기 수강생을 위한 공지> 안녕하세요. 슬래시페이지를 구독해 주신 후 이 글에 댓글을 하나씩 남겨주세요. 제가 직접 멤버 권한을 드려야 "논문 요약", "프롬프트"를 보실 수 있습니다. 관련 질문도 이 공지의 댓글로 남겨주세요!
질문을 위한 공간
<공지사항>
패스트캠퍼스 온라인 강의 수강생분들께,
패스트캠퍼스 온라인 강의 수강생분들께,
안녕하세요.금일 1/15일 패스트캠퍼스에서 공지를 받고 찾아주신 분들이 많은 것 같습니다.
온라인 강의를 수강하는 분들은 슬래시페이지 내 "논문 요약"페이지를 보실 수 있는데요. 이 페이지에 대한 초대권을 1/15일로 마감한다는 공지였습니다.
- 온라인 강의는 평생 소장이라 1/15일 이후에도 계속 들으실 수 있습니다.
- 온라인 강의는 평생 소장이라 1/15일 이후에도 계속 들으실 수 있습니다.
-슬래시페이지 내 멤버 권한을 못받으신 분들은, 댓글로 남겨주시면 천천히 등록해두겠습니다.
- 먼저 슬래시페이지를 구독해주셔야 제가 멤버로 추가할 수 있으니, 구독을 눌러주세요.
- 먼저 슬래시페이지를 구독해주셔야 제가 멤버로 추가할 수 있으니, 구독을 눌러주세요.
감사합니다.
2 Reactions
40 Comment
Reaction
Comment
Share
<공지사항>
안녕하세요. 슬래시페이지 내 "논문 요약"본 접근법에 관련하여 공지드립니다.
- 패스트 캠퍼스 온라인 강의: 온라인 수강신청 후 안내 받은 "링크"로 접속하신 후 멤버로 등록하시면 해당 페이지가 보이실 거예요. 멤버로 추가했는데도 페이지가 보이지 않는 경우에 댓글 남겨주세요.
- 패스트 캠퍼스 오프라인 강의: 디스코드와 수업 현장에서 해당 링크를 공지드린 링크로 접속하시면 돼요. 멤버로 추가하셔야 페이지가 보입니다. 보이지 않는 경우에 댓글 남겨주세요.
감사합니다.
안녕하세요. 슬래시페이지 내 "논문 요약"본 접근법에 관련하여 공지드립니다.
- 패스트 캠퍼스 온라인 강의: 온라인 수강신청 후 안내 받은 "링크"로 접속하신 후 멤버로 등록하시면 해당 페이지가 보이실 거예요. 멤버로 추가했는데도 페이지가 보이지 않는 경우에 댓글 남겨주세요.
- 패스트 캠퍼스 오프라인 강의: 디스코드와 수업 현장에서 해당 링크를 공지드린 링크로 접속하시면 돼요. 멤버로 추가하셔야 페이지가 보입니다. 보이지 않는 경우에 댓글 남겨주세요.
감사합니다.
40 Comment
Reaction
Comment
Share
안녕하세요?
출간하신 책과 다른 분들의 책을 몇 권 읽었습니다.
출간하신 책과 다른 분들의 책을 몇 권 읽었습니다.
그 중 퓨샷(Few-shot)에 대한 혼동이 있어 문의 드립니다.
일부 책에서는 '퓨샷 학습' 으로 표기되어 내용을 설명하고 있던데,
여기에서 '퓨샷' 이 '학습'에 대한 영역인가? 라는 의문이 들었습니다.
제가 정의하기로는 '훈련' 또는 '학습'은 모델을 만들 때 사용하는 용어이고,
'유도' 또는 '추론'은 모델을 사용할 때 사용하는 용어로 정의했습니다.
그런데 '퓨샷'은 모델을 사용하는 상황인데 왜 굳이 '퓨샷 학습'이라고 표기했느냐 입니다.
이런 상황 때문에 LLM에 대해 지식이 부족한 고객의 경우 오해하는 상황이 나타났습니다.
'그럼 LLM모델에 질문만 해도 모델이 학습하는거야?'라고 생각하더라고요.
좋은 가르침 부탁드립니다 m(__)m
2 Comment
Reaction
Comment
Share
Share
김
김지민
안녕하세요 대표님, 오늘 좋은 북콘서트를 열어주셔서 감사합니다. 유익하고 많이 배웠습니다!
<프롬프트 구성 순서 관련>
1. 동일한 내용(시스템 프롬프트, 검색된 문서, 질문)이라도 순서에 따라 결과가 달라지더라구요.
혹시 프롬프트의 구성 순서가 프롬프트를 설계할때 중요한 요소일까요?
<프롬프트 구성 순서 관련>
1. 동일한 내용(시스템 프롬프트, 검색된 문서, 질문)이라도 순서에 따라 결과가 달라지더라구요.
혹시 프롬프트의 구성 순서가 프롬프트를 설계할때 중요한 요소일까요?
<RAG 시스템 - 프롬프트 평가>
2. rag의 프롬프트 결과를 만족도로 평가하기에는 한계(시간, 인력)가 있다고 생각합니다. 개발자는 도메인(법, 금융, 의학) 지식이 부족하니, 프롬프트 설계는 물론 평가할때 (할루시네이션 유무, intent를 잘 파악, context 활용)기준을 다 체크하기엔 힘듭니다.대표님께서는 어떤 기준과 방법으로 프롬프트 성능을 평가하시나요?
<테스트 케이스 생성>
3. 저는 문서내용 기반으로 사용자 의도를 예측한 질문, 정답 답변(GT), 모델 답변 이렇게 하고 나온 결과를 평가합니다.
프롬프트를 평가할 도메인 (법, 의학) 질문(테스트케이스)을 만드는 것도 일이더라구요.. 저는 llm의 도움을 받지만,, 대표님께서는 테스트 케이스를 직접 만들어서 평가하시나요? 어떻게 하시나요?
3. 저는 문서내용 기반으로 사용자 의도를 예측한 질문, 정답 답변(GT), 모델 답변 이렇게 하고 나온 결과를 평가합니다.
프롬프트를 평가할 도메인 (법, 의학) 질문(테스트케이스)을 만드는 것도 일이더라구요.. 저는 llm의 도움을 받지만,, 대표님께서는 테스트 케이스를 직접 만들어서 평가하시나요? 어떻게 하시나요?
위의 질문들은 제가 직접 사내 rag 시스템의 프롬프트를 테스트 하고 평가하면서 겪고 고민하고 있었던 부분입니다 감사합니다.
1
See latest comments
순서가 프롬프트를 설계할때 중요한 요소일까요?
네~ 순서 중요하고 절대적으로 영향을 미칩니다. 어떤 요소를 어떤 순서에 따라 놓느냐에 따라 결과가 달라져요. 예를들어, 번역 같은 경우는 "명령문" -"문서" 의 순서가 정확한 번역의 결과를 얻으니까요. 하려는 과제에 따라, 순서가 참 중요합니다. 그래서, 프롬프트를 어느 정도 제작했다면 요소별 구조테스트를 진행합니다.
2. rag의 프롬프트 결과를 만족도로 평가하기에는 한계(시간, 인력)가 있다고 생각합니다. 개발자는 도메인(법, 금융, 의학) 지식이 부족하니, 프롬프트 설계는 물론 평가할때 (할루시네이션 유무, intent를 잘 파악, context 활용)기준을 다 체크하기엔 힘듭니다.대표님께서는 어떤 기준과 방법으로 프롬프트 성능을 평가하시나요?
3. 저는 문서내용 기반으로 사용자 의도를 예측한 질문, 정답 답변(GT), 모델 답변 이렇게 하고 나온 결과를 평가합니다.
프롬프트를 평가할 도메인 (법, 의학) 질문(테스트케이스)을 만드는 것도 일이더라구요.. 저는 llm의 도움을 받지만,, 대표님께서는 테스트 케이스를 직접 만들어서 평가하시나요? 어떻게 하시나요?
위의 질문들은 제가 직접 사내 rag 시스템의 프롬프트를 테스트 하고 평가하면서 겪고 고민하고 있었던 부분입니다 감사합니다.