AI/NLP
-
[EMNLP 2024 ๋ ผ๋ฌธ ๋ฆฌ๋ทฐ] ESC-Eval: Evaluating Emotion Support Conversations in Large Language ModelsAI/NLP 2024. 12. 28. 23:11
์ค๋ ๋ฆฌ๋ทฐํ ๋ ผ๋ฌธ์ [EMNLP 2024] ESC-Eval: Evaluating Emotion Support Conversations in Large Language Models์์ฐ์ด์ฒ๋ฆฌ ํ ํํ ์ค ํ๋์ธ EMNLP์ ESC (Emotion Support Conversations) ๋ ผ๋ฌธ์ด๋ค.ESC ๋ถ์ผ ๋ ผ๋ฌธ๋ค์ ์ฝ๋ค๋ณด๋ฉด ํ๊ฐ ๋ฐฉ์ (์ธ์ ํ๊ฐ + ๊ธฐ๊ณ ํ๊ฐ) ์ด ์์ฐ์น ์๋ค๋ ๋๋์ ๋ฐ์ ์ ์๋๋ฐ๋กคํ๋ ์ ๊ธฐ๋ฐ ํ๊ฐ ๋ฐฉ๋ฒ์ ์ ์ํ ๋ ผ๋ฌธ์ด๋ผ ๊ถ๊ธํด์ ์ฝ์ด๋ณด์๋ค.ํน์ดํ ๊ฑด ๋ ผ๋ฌธ ์คํ ์ GPT-4๋ฅผ ์๋นํ ๋ง์ด ํ์ฉํ๋ค. ์ญ์ ์ต์ ๋ ผ๋ฌธ.๋๋ GPT-4๋ฅผ ํ์์ ๋ง์ด ์ ์ฉํ๊ธฐ ๋๋ฌธ์ ์์ด๋์ด๋ฅผ ๋ง์ด ์ป์ด๊ฐ ์ ์์๋ค. (๋ ผ๋ฌธ ์ฝ์ ๋๋, ๊ฐ๋ฐํ ๋)์ค๋ ๋ ผ๋ฌธ ๋ฆฌ๋ทฐ์์๋ ๋๋๊ณ ํ์ฉํด๋ณด๊ฒ ๋ค.๋ณธ ๋ ผ๋ฌธ์ ๊ธฐ์ฌ๋..
-
AI ๋ํ์์์ ์์งํ ์ง๋ก ๊ณ ๋ฏผ: ๊ณต๊ธฐ์ ์ ์ฐ์ง vs ์ฌ๊ธฐ์ ๊ฐ๋ฐ์ vs ์ ํ๋ฒAI/NLP 2024. 12. 26. 02:34
์ด ๊ธ์ ChatGPT 4o์ ๋๋ ์์ฑ ๋ํ๋ฅผ ๋ฐํ์ผ๋ก ์์ฑ๋์์ต๋๋ค. ์ง๋ก ๊ณ ๋ฏผ๊ณผ ์๊ฐ ๊ด๋ฆฌ, ๋ฉํ ๊ด๋ฆฌ ๋ฑ ์์ฆ ์ ์ ์ํฉ์ ์ ๋ฆฌํ๋ฉด์, ๊ฐ์ ๊ณ ๋ฏผ์ ํ๋ ๋ถ๋ค๊ณผ ๊ณต์ ํ๊ณ ์ถ์ด ๊ธ์ ๋จ๊น๋๋ค. 1. ๊ณต๊ธฐ์ ์ ์ฐ์ง vs ์ฌ๊ธฐ์ ๊ฐ๋ฐ์: ํ์ค์ ์ธ ๊ณ ๋ฏผ1) ๊ณต๊ธฐ์ ์ ์ฐ์ง- ์ฅ์ : - ์์ ์ฑ๊ณผ ์๋ผ๋ฐธ(Work-Life Balance)์ด ๊ฐ์ฅ ํฐ ๋งค๋ ฅ์ ๋๋ค. - ๊ธ์ต ๊ณต๊ธฐ์ ์ ํนํ ๋จ๋ค์ด ๋ณด๊ธฐ์ "์ ๋ฐฉํ๋ค"๋ ํ๊ฐ๋ฅผ ๋ฐ์ ๋งํผ ์ฌํ์ ์ธ์๋ ์ข์ต๋๋ค. - ๊ธฐ์ ํธ๋ ๋๊ฐ ๊ธ๊ฒฉํ ๋ณํด๋ ์๋์ ์ผ๋ก ์ฌ์ ๋ฅผ ๊ฐ์ง๊ณ ์ปค๋ฆฌ์ด๋ฅผ ์ด์ด๊ฐ ์ ์์ต๋๋ค. - ๋จ์ : - ์ ํ๋ธ ๊ฐ์ ๋ถ์ ๊ฒธ์ ์ด ์ด๋ ค์. - ๊ณต๊ธฐ์ ์ ๋ด๋ถ ๊ท์ ์ ๊ฒธ์ ๊ธ์ง๊ฐ ์ผ๋ฐ์ ์ด๋ผ ์ ๊ฐ ์ ๋ง ํ๊ณ ์ถ์ ์ ํ๋ธ ํ๋์ ์ด์ด๊ฐ๊ธฐ ์ด๋ ต์ต๋๋ค..
-
IMDB ์ํ ๋ฆฌ๋ทฐ ๊ฐ์ ๋ถ์ ํ๋ก์ ํธ ์ ๋ฆฌ ๋ฐ ์ถํ ๋ฉด์ ๋๋นAI/NLP 2024. 12. 19. 21:37
1ํ๋ 2ํ๊ธฐ ์์ ์ ๋ง๋ฌด๋ฆฌํ๋ฉฐ, ํ๋์ ์ ๋ฆฌํด๋ณด๋ ค ํ๋ค.AI๋ฅผ ์ํ ํต๊ณํ ์๊ฐ์ ์์ฑํ ๊ฐ์ธ ๋ถ์ ๋ณด๊ณ ์์ ๋ํ ํ๊ธ ์ค๋ช ๋ฐ ๋ฉด์ ์ง๋ฌธ์ ์์ํด ์ค๋นํด๋ณด์๋ค.(๊นํ๋ธ์ ์๋ฌธ์ผ๋ก README๋ฅผ ์์ฑํด๋์๋ค.)ํ๋ก์ ํธ ๊นํ๋ธ ๋งํฌ : https://github.com/Yerin99/IMDB-Movie-Review-Sentiment-Analysis GitHub - Yerin99/IMDB-Movie-Review-Sentiment-Analysis: AI ๋ํ์ 1-2 [AI๋ฅผ ์ํ ํต๊ณํ] ๊ฐ์ธ ๋ถ์ ๋ณด๊ณ ์ : ์AI ๋ํ์ 1-2 [AI๋ฅผ ์ํ ํต๊ณํ] ๊ฐ์ธ ๋ถ์ ๋ณด๊ณ ์ : ์ํ ๋ฆฌ๋ทฐ ๊ฐ์ ๋ถ์. Contribute to Yerin99/IMDB-Movie-Review-Sentiment-Analysis d..
-
BigComp Paper Reject FeedbackAI/NLP 2024. 12. 19. 16:51
BigComp์ ๋ ผ๋ฌธ์ ์ผ๋๋ฐ ๋จ์ด์ก๋ค. ๊ทธ๋ ์ง๋ง ๋ฆฌ๋ทฐ์ด๋ถ๋ค์๊ฒ ๋ฐ์ ๋ฆฌ๋ทฐ๊ฐ ์์ฒญ ๋ ์นด๋กญ๊ณ , ๋ ๋ค์์ ๊ผญ ๋ฐ์ํด์ผ๊ฒ ๋ค๋ ์๊ฐ์ด ๋ค๋งํผ ์ ์ฉํ๋ค.๋ด๊ฐ ๋๋ฌด ์์ผํ๊ฒ ์์ฑํ๋ ๊ฒ ๊ฐ๋ค.๋ฆฌ๋ทฐ ์ ๋ฌธ์ ๋ธ๋ก๊ทธ์ ์ฐ๋ ๊ฑด ๋ฌธ์ ๊ฐ ์๊ธธ์ง๋ ๋ชจ๋ฅด๊ฒ ๋ค๋ ์๊ฐ์ด ๋ค์ด, ์ถ์์ ์ผ๋ก ์ ๋ฆฌํ ๋ด์ฉ๋ง ์ฌ๋ฆฌ๋ ค๊ณ ํ๋ค.๋ ผ๋ฌธ Reject Feedback (์ข ํฉ์ ์ธ ํฅํ ๊ฐ์ ๋ฐฉํฅ): 1. ๋ค์ํ ๋ฐ์ดํฐ์ ๋ฐ ๊ท๋ชจ ํ๋:๋ ๋์ ๋ฒ์ฃผ์ ๋ฒค์น๋งํฌ ๋ฐ์ดํฐ์ (NQ, WebQSP, Mintaka ๋ฑ)์ ํ์ฉํ๊ณ , ๋ฐ์ดํฐ์ ํฌ๊ธฐ๋ฅผ ํ์ฅํ์ฌ ๋์ฑ ํํํ ์คํ ๊ฒฐ๊ณผ๋ฅผ ์ ์.2. ๋ค์ํ LLM ๋ฐ ๋ชจ๋ธ ๋น๊ต ์คํ:GPT-4, Llama, PaLM ๋ฑ ๋ค์ํ ๋ชจ๋ธ๊ตฐ์ ๋ํด ์ผ๊ด๋๊ฒ ๊ฐ์ ํจ๊ณผ๊ฐ ์๋์ง ๊ฒ์ฆ.3. ๊ฒฐ๊ณผ ๋ถ์ ๊ฐํ:๋จ์ ์ฑ๋ฅ ํฅ์ ์์น ..
-
[๋ ผ๋ฌธ ๋ฆฌ๋ทฐ] Towards emotional support dialog systems : (1) IntroAI/NLP 2024. 11. 19. 18:23
์ค๋ ๋ฆฌ๋ทฐํ ๋ ผ๋ฌธ์ NLP ํํฐ์ด ํํ์ธ ACL 2021์ ๋ฑ์ฌ๋ Towards emotional support dialog systems์ด๋ค. ์์ ESC (Emotional Supportive Conversation) ๋ถ์ผ์ ๊ด์ฌ์ด ์๊ฒผ๋ค.ํญ์ ํ๊ณ ์ถ์ ์ฃผ์ ์๋๋ฐ, ๋ด๊ฐ ๋ฌด์จ ์ฐ๊ตฌ์ฃผ์ ๋ฅผ ํ๊ณ ์ถ์์ง ์ ํํ ๋ชจ๋ฅด๋ค๊ฐ ๋๋์ด ์ธ์ด๋ก ๋ช ๋ช ํ ๊ธฐ๋ถ. [๋ ผ๋ฌธ์ ์ฃผ์ ๋ด์ฉ]1. ์ ์์ ์ง์ ๋ํ (ESC) ๊ณผ์ ์ ์2. Helping Skills Theory (Hill, 2009) ์ ๊ธฐ๋ฐํ ESC ํ๋ ์์ํฌ ์ ์3. ๊ฐ์ ์ง์ ๋ํ ๋ฐ์ดํฐ์ธํธ ESConv ๊ตฌ์ถ[์ฐ๊ตฌ ๊ฒฐ๊ณผ์ ์์]1. ํจ๊ณผ์ ์ธ ์ ์์ ์ง์์ ์ ๊ณตํ๋๋ฐ ์์ด ์ง์ ์ ๋ต์ ์ค์์ฑ2. ๋ ๋ง์ ์ ์์ ์ง์ ์์คํ ์ ํ๋ จํ๋ ๋ฐ ์์ด ESConv์ ..