Using Annotations in Online Group Chats

1. Using Annotations
in Online Group Chats
+ CHI 2014
- Na Li, Mary Beth Rosson
/ 윤정원
x 2014 fall

2. CHI 2014
Using Annotations in Online Group Chats

3. THE AUTHORS
in Online Group Chats
Using Annotations
Na Li Mary Beth Rosson
College of Information Sciences and Technology
Pennsylvania State University
1

4. 2KEYWORDS
• Information interfaces
• Instant annotation
• evaluation
• conversation control
• design
in Online Group Chats
Using Annotations

5. 3
ABSTRACT
in Online Group Chats
Using Annotations
• 문서에 주석을 다는 것은
중요한 내용을 추출하고, 아이디어와 생각들을 표면화하는 널리 사용된 전략이다.
• online conversation는 글로벌한 회사들에게 중요한 커뮤니케이션 미디어이다.
BUT
• 온라인 채팅과 같이 ‘annotating dynamic texts’ 는 연구되지 않았다.

6. 3
in Online Group Chats
Using Annotations
• 문서에 주석을 다는 것은
중요한 내용을 추출하고, 아이디어와 생각들을 표면화하는 널리 사용된 전략이다.
• online conversation는 글로벌한 회사들에게 중요한 커뮤니케이션 미디어이다.
• 온라인 채팅과 같이 ‘annotating dynamic texts’ 는 연구되지 않았다.
multilingual groups
Instant Annotation(IA)
BUT
Standard chat tool
a real-time annotation-enhanced chat tool
ABSTRACT

7. INTRODUCTION
• provide users ability to connect text-based comments
• offer an additional space for interaction among users
in Online Group Chats
Using Annotations
4
Collaborative annotation tool
• features must be …. real time communication + collaboration

8. 5Related Studies
- Some observations on the "live" collaborative tagging of audio conferences in the enterprise
• web-based application, Live Conference Dashboard (henceforth LCD)
• 실시간 오디오 미팅에서의 태깅
• 태깅하려면 LCD에 로그해서 태그하면 다른 사람들에게 태그들이 보인다.
• tag cloud, tagging dashboard, timeline
• 댓글 지원하지 않음
in Online Group Chats
Using Annotations
1. Collaborative tagging system
• 정교화되지 않음
• 유저들이 태깅하는 것과 미팅에서 활발히 참여하는 멀티태스킹을 잘 못한다.
- 인지적으로 부가되는 다른 요소들 때문에

9. 5Related Studies
• a collaborative annotation sidebar
• mark an important piece of content (due date), a meeting proposal,
an idea and reaction, and a to-do item.
in Online Group Chats
Using Annotations
2. Instant Annotation(IA)
- Instant annotation: early design experiences in supporting cross-cultural group chat
• Instant Annotation (IA)
• 각각의 주석 섹션들은 옆에 대화창의 텍스트 라인에 맞춰있다.
-> 같은 컨텍스트 안에 또 다른 주석을 넣으면, 원래 남겨진 주석은 밑으로 내려가서 쌓이게 된다.

10. 5Related Studies
in Online Group Chats
Using Annotations
2. Instant Annotation(IA)
- Instant annotation: early design experiences in supporting cross-cultural group chat
• 현재 annotation이 어딘지 살필 수 있고, 이전 annotation을 스크롤해서 볼 수 있다.
• 쌓여져 있는 annotation list에서, 유저들은 annotation section을
마우스 오버해서 확장하고 full listing 을 볼 수 있다.

11. How is an IA chat tool used?
How is user experience affected by the IA functionality?
What are the costs of IA in group chats?
1
2
3
we used the prototype to explore three research questions:

12. 6Method
in Online Group Chats
Using Annotations
Using Instant Annotation In Group Chats
• a comparison study using mixed methods (behavior, surveys, interviews)
• data collected from two conditions run at different points in time

13. Task & Procedure
• 4명의 참여자들이 그룹을 만들어서 토의
• 토의 주제는 “how to spend $5000 to support environmental sustainability”
• 15분동안, 최소 8개의 아이디어들을 내달라고 했다.
• 그리고 3개의 베스트 아이디어들을 골라달라고 했다.
• 브레인스토밍+decision-making 이 과정은 실제 사무실에서 회의하는 실제 상황과 비슷
• 업무 수행후, 참여자들은 사후 경험 조사 서베이 완성,
• 개인별 인터뷰
6Method
in Online Group Chats
Using Annotations
Using Instant Annotation In Group Chats

14. Survey
• 6 scale: communication quality를 평가 - e.g. “The conversation seemed highly interactive”
• 4 scale : satisfaction - e.g. “I enjoyed communicating with my group members”
!!
• 두번째 그룹(IA)에서는 IA툴 반응에 대해 5개 더 조사
e.g. “I could easily review messages using this chat tool”
“I am distracted by the annotations in the side bar”
6Method
in Online Group Chats
Using Annotations
Using Instant Annotation In Group Chats
• 이전 online group discussion 연구에서 수행한 10 Likert-style rating scales 기준으로
• scale value range : 1= Strongly Disagree
5= Strongly Agree

15. Participants
6Method
in Online Group Chats
Using Annotations
Using Instant Annotation In Group Chats
• 각각의 조건들은 4 참여자들의 5그룹
: 각 그룹 —> 2 native + 2 non-native speaker
(성별, 교육수준, 언어능력) 유사 조건
( native와 non-native speaker들이 두 개의 다른 chat tool을 사용 할 때
개별 그룹의 chat behavior와 reaction을 정당하게 비교하게 한다. )

16. 7DATA ANALYSIS AND RESULTS
in Online Group Chats
Using Annotations
1. How Was the IA Tool Used?
• 4개의 IA group에 의해 생성된 annotaion의 수는 12~23개, total 90
• 참여자들은 실제로 IA 기능들을 사용했는데, 그룹들이 그 기능들을 사용하는 법은 다양했다.
five major use patterns
71% of the annotations

17. 7DATA ANALYSIS AND RESULTS
in Online Group Chats
Using Annotations
1. How Was the IA Tool Used?
• 왜 유저들이 IA 메인 채팅창이 아니라, side bar에 정보들을 추가하는가?
- Add Information 중에 몇 가지 케이스들을 집중 분석
!
1. 새로운 아이디어는 side bar에 제안
처음에 몇가지 안들을 쭉 확인하고, 다시 돌아가서 각각의 안들에 나온 아이디어들을 디벨롭
주석들이 아이디어 하나가 되는 것
2. 채팅에서 나온 아이디어를 확장

18. 7DATA ANALYSIS AND RESULTS
2. How Was User Experience Affected by the IA Tool?
in Online Group Chats
Using Annotations
• IA tool의 유저 경험을 조사하기 위해, 그들의 토의 경험들의 평가를 분석.
- 커뮤니케이션 과정과 토의에서 그들의 만족도를 초점으로.
!
• 개인별 사후 인터뷰 진행

19. 7DATA ANALYSIS AND RESULTS
1) Quality of Communication (QC)
• Tool and Speaker-type
- a main effect of Speaker (F(1,36)=6.11, p<.02)
- no effect of Tool or interaction of Tool and Speaker.
!
in Online Group Chats
Using Annotations
2. How Was User Experience Affected by the IA Tool?
- 커뮤니케이션의 품질을 평가하는 여섯 평가 척도로 집계.

20. 7DATA ANALYSIS AND RESULTS
- 커뮤니케이션의 품질을 평가하는 여섯 평가 척도로 집계.
• Native speakers > non-native speakers
- QC ratings (overall mean 3.94) > (over- all mean 3.41)
!
IA 사용 집단에서, native 4.30/ non-native 3.30
IA tool and language fluency have influenced perceptions of conversation control.
in Online Group Chats
Using Annotations
2. How Was User Experience Affected by the IA Tool?
1) Quality of Communication (QC)
• non-IA 집단에서, native 4.11/ non-native 2.60

21. 7DATA ANALYSIS AND RESULTS
• Interview suggest that IA may mitigate the “attenuation blocking”
problem common in group meetings
“I started typing something, and then I wiped it out,
because somebody else already raised the issue. ...
That's why I like the annotation,… “
-

22. 빠르게

23. 지나가는

24. discussion

25. point에

26. 따라갈

27. 만큼

28. 충분히

29. 빠르지

30. 않기

31. 때문에