누가 메시지를 보내느냐에 따라 효과와 느낌이 달라질까?
많은 서비스에서 챗봇 기술을 도입하려는 시도가 늘고 있습니다. 챗봇의 퍼소나(Persona)를 어떻게 설정해야 하는지에 대해서는 많은 고민이 있지만, 여전히 답은 모호합니다. 챗봇 서비스가 도입될 서비스의 종류에 따라, 예상 사용자에 따라 선호도나 효과에 큰 차이가 있기 때문이죠. 예를 들면, 쇼핑과 같은 서비스에서는 가벼운 말투나 즐거움이 강조되어야 하는 반면, 교육이나 금융, 건강 분야에서는 신뢰도를 높이는 것이 중요할 수 있습니다. 이 연구에서는 헬스케어 분야에서 어떤 챗봇 에이전트가 메시지를 보내는 것이 사용자에게 선호되는지, 에이전트 종류에 따라 메시지 효과가 달라지는지를 실험 방법을 통해 확인해봅니다.
누가 메시지를 보내느냐에 따라 효과와 느낌이 달라질까?
많은 서비스에서 챗봇 기술을 도입하려는 시도가 늘고 있습니다. 챗봇의 퍼소나(Persona)를 어떻게 설정해야 하는지에 대해서는 많은 고민이 있지만, 여전히 답은 모호합니다. 챗봇 서비스가 도입될 서비스의 종류에 따라, 예상 사용자에 따라 선호도나 효과에 큰 차이가 있기 때문이죠. 예를 들면, 쇼핑과 같은 서비스에서는 가벼운 말투나 즐거움이 강조되어야 하는 반면, 교육이나 금융, 건강 분야에서는 신뢰도를 높이는 것이 중요할 수 있습니다. 이 연구에서는 헬스케어 분야에서 어떤 챗봇 에이전트가 메시지를 보내는 것이 사용자에게 선호되는지, 에이전트 종류에 따라 메시지 효과가 달라지는지를 실험 방법을 통해 확인해봅니다.
Delivering Cognitive Behavior Therapy to Young Adults With Symptoms of Depres...Junhan Kim
Delivering Cognitive Behavior Therapy to Young Adults With Symptoms of Depression and Anxiety Using a Fully Automated Conversational Agent (Woebot): A Randomized Controlled Trial
Choice, transparency, coordination, and quality among direct to-consumer tele...Nuri Na
지난달 23일 보건복지부는 일부 대상에 한하여 원격진료를 허용하는 법안을 통과하겠다 예고하였습니다. 이 슬라이드는 우리나라보다 한발앞서 원격진료를 제공하고 있는 미국의 경우에서, 피부과 질환에 대한 진료의 퀄리티가 어떻게 나타나고 있는지를 평가한 미국의사협회의 논문입니다. 진료의 정확성을 높이기 위해 앞으로 원격진료 서비스가 갖추어야 할 점들에 대하여 시사하는 바가 많은 연구입니다. 디스플레이 속에서 의사를 만난다면 어떤 일이 벌어질 지 미리 살펴보시기 바랍니다.
Health Mashups: Presenting Statistical Patterns between Wellbeing Data and Co...Yoojung Kim
Health Mashups: Presenting Statistical Patterns between Wellbeing Data and Context in Natural Language to Promote Behavior Change
Bentley, F., Tollmar, K., Stephenson, P., Levy, L., Jones, B., Robertson, S., ... & Wilson, J. (2013). ACM Transactions on Computer-Human Interaction (TOCHI), 20(5), 30.
Delivering Cognitive Behavior Therapy to Young Adults With Symptoms of Depres...Junhan Kim
Delivering Cognitive Behavior Therapy to Young Adults With Symptoms of Depression and Anxiety Using a Fully Automated Conversational Agent (Woebot): A Randomized Controlled Trial
Choice, transparency, coordination, and quality among direct to-consumer tele...Nuri Na
지난달 23일 보건복지부는 일부 대상에 한하여 원격진료를 허용하는 법안을 통과하겠다 예고하였습니다. 이 슬라이드는 우리나라보다 한발앞서 원격진료를 제공하고 있는 미국의 경우에서, 피부과 질환에 대한 진료의 퀄리티가 어떻게 나타나고 있는지를 평가한 미국의사협회의 논문입니다. 진료의 정확성을 높이기 위해 앞으로 원격진료 서비스가 갖추어야 할 점들에 대하여 시사하는 바가 많은 연구입니다. 디스플레이 속에서 의사를 만난다면 어떤 일이 벌어질 지 미리 살펴보시기 바랍니다.
Health Mashups: Presenting Statistical Patterns between Wellbeing Data and Co...Yoojung Kim
Health Mashups: Presenting Statistical Patterns between Wellbeing Data and Context in Natural Language to Promote Behavior Change
Bentley, F., Tollmar, K., Stephenson, P., Levy, L., Jones, B., Robertson, S., ... & Wilson, J. (2013). ACM Transactions on Computer-Human Interaction (TOCHI), 20(5), 30.
2. 문제인식
• 강아지 행동이 이상한데 혹시 병에 걸렸
나??
• 무슨 병인지라도 알고 싶은데 어떡하지??
• 병명이 뭔지 어떻게 알아보지? 일일이 다
글을 써서 검색해야 하나??ㅜㅜ
• 사람 우울증 자가진단 같은 것처럼 증상에
대해 클릭해서 병명이 딱 나오는 게 있으
면 좋을 텐데 ㅜㅜ
3. 이상 증세를 보일 때
정보를 찾는 경로
• 수의사/동물병원 만
– 4명
• 수의사/동물병원 + 다른 경로도 이용
– 20명
• 다른 경로만 이용
– 18명
• 이상 증세가 있는 경우 바로 병원에 가는
것이 아니라 일단 정보를 검색해 보는 경
우가 많다.
6. 설문결과
문항 답변
1. 반려동물을 키웠거나
키우고 있습니까?
네
55
아니오
21
2. 반려동물 질병 자가
진단 원클릭 서비스가 필
요하다고 생각하십니까?
네
70
아니오
6
3. 반려동물 질병 자가진
단 원클릭 서비스의 결과
가 불안감을 감소시킬 수
있다고 생각하십니까?
결과가 심각한
병으로 예상되
더라도 불안감
을 감소시킨다
20
결과가 심각하
지 않은 병으로
예상되는 경우
에는 불안감을
감소시킨다
49
어떠한 결과가
나타나더라도
불안감이 감소
하지 않는다
7
4. 반려동물 질병 자가진
단 원클릭 서비스의 결과
에 대한 신뢰도는 어느
정도 입니까?
74.75 61.16 45.00
63.25
7. 반려동물 경험 여부에 따른
자가진단 필요성 인식
1-네 1-아니오 1-합
2-네 53 17 70
2-아니오 2 4 6
2-합 55 21 76
반려동물을 키운 경험 여부에 따라 자가진단의 필요성에 차이가 있는 지 알아보
기 위해 Fisher의 exact test를 시행하였다.
H0 자가진단의 필요성에 차이가 없다
H1 반려동물을 키운 경험이 있는 경우 자가진단의 필요성을 더 크게 인식한다
8. > fisher.test(rbind(c(53,17),c(2,4)), alternative="greater")
Fisher's Exact Test for Count Data
data: rbind(c(53, 17), c(2, 4))
p-value = 0.04602
alternative hypothesis: true odds ratio is greater than 1
95 percent confidence interval:
1.034462 Inf
sample estimates:
odds ratio
6.052606
단측검정 시행결과, 반려동물을 키워 본 경험이 있는 경우 필요성에 대해 더
크게 인식한다고 생각할 수 있다.
9. 신뢰성 점수에 대한 t-test
> t.test(reliability~q1,data=anovatest2,var.equal=TRUE)
Two Sample t-test
data: reliability by q1
t = -0.1399, df = 74, p-value = 0.8891
alternative hypothesis: true difference in means is not equal to 0
95 percent confidence interval:
-8.776370 7.624854
sample estimates:
mean in group 1 mean in group 2
63.09091 63.66667
반려동물 키운 경험 여부 따라 신뢰도가 차이
나지 않는다.
10. 불안감 감소 정도에 따라 신뢰성 점
수 평균에 차이가 있는 지 여부
Analysis of Variance Table
Response: reliability
Df Sum Sq Mean Sq F value Pr(>F)
q2 2 5189.8 2594.90 13.663 9.115e-06 ***
Residuals 73 13864.4 189.92
---
Signif. codes: 0 ‘***’ 0.001 ‘**’ 0.01 ‘*’ 0.05 ‘.’ 0.1 ‘
ANOVA 결과 최소한 어느 한 집단의 평균이 다르다고 볼 수 있다.
12. 제공 서비스
1. 현재 증상 체크 후 예상되는 병명 제시
-해당되는 증상을 직접 글로 쓰는 것이 아니
라 클릭하게 함으로써 편의성을 꾀함.
2. 사용자들이 자신이 겪은 질병과 증상에 대해
체크할 수 있도록 하여 정보를 업데이트
-많은 정보가 쌓이는 경우 실제로 겪은 데이
터에 기반해서 더 정확한 병명을 제시 가능
13. 계획
• 웹페이지를 통해 제공
• 모바일 페이지는 추후 제공
• 개/고양이부터 제공
• 다른 반려동물에 대해서는 추후 제공할 예
정(사용자들로부터 정보를 제공받는 것은
초기부터 시작할 것임)
14. 경쟁/보완 관계
• 경쟁관계는 굳이 생각한다면 동물병원이라고 할 수도
있겠으나, 이 사이트는 특정 동물병원과 전혀 연관이
없고 사이트를 통해 동물병원을 알선하지도 않을 것이
기 때문에 전혀 경쟁관계가 성립하지 않는다고 생각.
• 자가진단 말고 증세에 대해 병명을 진단해주는 곳은
동물병원 사이트나 동물병원에 전화를 해도 알려주기
도 하고 기타 인터넷 사이트에서도 질문을 하면 답이
많이 달리니 비슷한 정보를 제공하는 곳은 많다고 할
수 있음.
• 그러나 이런 곳들과 경쟁관계라기 보다 보완관계가 성
립한다고 생각. 일단 이 사이트를 통해 예상되는 질병
을 몇 가지로 추린 후 다른 사이트에서 관련 정보를 검
색해보는 방식도 가능할 것.
15. 문제점 및 한계
• 전문성과 정확성에 문제가 있다.
• 좋지 않은 결과가 나타났을 경우 결과에 대한 책임으로부터
자유롭지 않다.
• 두 번째 서비스의 경우 사용자들이 이상한 정보를 제공할 여
지가 있다.
• 설문 문항을 잘 못 만들어서 제대로 된 조사가 이루어지지 못
했다
– 수의사/동물병원에 물어보기 전에 인터넷을 검색하는 지를 물어
봤어야 했는데 둘을 동등하게 분류해서 물어봄.
– 기존 검색방법이 불편했는지 물어봤어야 했는데 못 물어봄.
– 필요가 없다고 응답한 경우 왜 필요 없는지를 물어봤어야 했는
데(신뢰성이 없다/기존 방법으로 충분하다 등등) 못 물어봄.
– 자가진단의 필요성에 대한 일반론밖에 물어보지 못한 꼴이 되어
버렸다. 이것은 설문을 급하게 진행하려다 보니 문항을 제대로
만들지 못해 벌어진 일이다.