2016 알바천국 사용성테스트 결과보고서

1. 2016.12.02 Ver 2.1
Usability Test Report
계원예술대학교 디지털미디어디자인과
박채원, 조영지, 김윤신, 안가은
알바천국 어플리케이션 사용성테스트

2. INDEX
Introduction
1 Result
2 Recommendation
3
방법론 및 진행 프로세스
테스트 목적
참가자 프로파일
테스트 환경
테스크 시나리오
테스크별 수행시간, 접근경로
리얼보이스
사후인터뷰
시선추적(Eye Tracking)
문제점에 대한 해결방향

3. INDEX
Introduction
1 Result
2 Recommendation
3
방법론 및 진행 프로세스
테스트 목적
참가자 프로파일
테스트 환경
테스크 시나리오
테스크별 수행시간, 접근경로
리얼보이스
사후인터뷰
시선추적(Eye Tracking)
문제점에 대한 해결방향

4. 1.Introduction
방법론 및 진행 프로세스
사용성 테스트
진행 프로세스
Usability Test는 서비스의 사용성을 개선하기 위한 방법 중 하나로, 구체적인 문제점을 발견하고 사용자의 행동 패턴을 파악할 수 있는 방법이다.
정성적 테스트 방식으로 진행해 7명 내외의 참가자를 사용자 리서치를 통해 선정하고 서비스 내 중요한 과정 및 기능을 과제로 제시,
과제 수행 결과 와 서비스 이용 중 참가자의 행동과 반응을 토대로 객관적인 데이터 값과 인사이트를 도출해
서비스의 장단점 및 개선 방향을 알아 보기 위한 방법으로 사용성 테스트를 진행했다.
테스트
목표 설정
시나리오
작성
테스트 진행
결과 도출
&분석
개선 방향
도출

5. 1.Introduction
테스트 목적
‘알바천국’ 사용자들이 말하는 문제점 파악
알바천국 어플리케이션 사용자들의 진솔한 의견 또는 직접 사용하는 것을 가까이서 보기위해 이 테스트를 진행한다.
사전 설문조사와 사후 개인 인터뷰를 통해 사용하면서 느낀 불편사항들을 직접 들어볼 수 있도록 하며,
이를 통해 발견한 문제점들을 분석하고 정리하여 개선까지 나아갈 수 있도록 하였다.
경쟁사 ‘알바몬’과의 비교분석
경쟁사인 ‘알바몬’을 같은 시나리오로 테스트를 진행하고 ‘알바천국’과 비교·분석하여,
‘알바천국’ 어플리케이션이 발전할 수 있는 방향을 모색한다.
‘현위치’ 메뉴의 UX/UI 분석
‘현위치’ 메뉴를 사용하는 테스크를 시행함으로써 현위치 메뉴의 문제점을 파악할 수 있으며
사용자 인터뷰를 통해 개선방향에 대한 좀 더 실질적인 의견을 얻고자 한다.

6. 1.Introduction
참가자 프로파일
성별
남자 2명
여자 6명
연령
20대 5명
30대 3명
40대 0명
50대 이상 0명
스마트폰 숙련도
숙련도가 높은 경험자 8명
숙련도가 낮은 경험자 0명
서비스 사용경험
사용 경험이 있는 사용자 4명
사용 경험이 없는 사용자 4명
서비스명 알바천국
알바천국의 실질적인 사용자 연령층을 바탕으로 가장 많은 사용자 층이 되고 있는
20대를 위주로 설정하였다.
알바천국 서비스는 PC버전으로도 많이 사용되나, 이 테스트는 어플리케이션에 관
한 테스트이므로 어플을 주로 쓰는 사람들을 타겟으로 삼았다. 즉 스마트폰에 익숙
하지 않은 사용자가 아닌 숙련도가 보통 이상인 사용자층을 뽑아 테스트하였다.
신규사용자, 기존 사용자 모두 테스트하기 위해 비슷한 비율로 뽑아 테스트를 진행
하였다.
※ 스마트폰 숙련도 기준 (예 / 아니오 대답)
1. 스마트폰을 끄고 킬 수 있다.
2. 스마트폰에서 원하는 앱 프로그램을 찾아 설치, 삭제가 가능하다.
3. 스마트폰 작동이 안 될 때 스스로 장애 문제를 해결할 수 있다.
4. 스마트폰에서 다운받은 파일을 찾아 열 수 있다.
5. 스마트폰을 초기화 시킬 수 있다.

7. 한수아 여 20대 높음 있음 iOS
박진주 여 20대 높음 없음 Android
김성실 여 30대 높음 없음 Android
장윤제 여 30대 높음 있음 iOS
이은탁 남 30대 높음 없음 Android
김세연 남 20대 높음 있음 Android
이소연 여 20대 높음 있음 Android
김세희 여 20대 높음 없음 iOS
이름 성별 연령대 스마트폰 숙련도 서비스 사용경험 사용 운영 체제
1.Introduction
참가자 프로파일
성별
여성 남성
연령대
20대 30대 40대 50대 이상
서비스 사용 경험
있음 없음
사용 운영 체제
Android iOS

8. 1.Introduction
테스트 환경

9. 1.Introduction
테스크 시나리오
1. 원하는 어플리케이션을 통하여 자신에게 맞는 시간과 장소의 알바를 구해보세요.
1. 당신은 알바천국 어플을 통하여 새로운 일을 구하려고 합니다. 서울시 마포구 서교동 지역에서 서빙 업무 관련 알바를 찾아보세요.
2. 당신은 학교 주변의 아르바이트를 구하고 싶지만 주소가 기억나지 않습니다. 어플리케이션에서 정확한 주소를 몰라도 지도를 이용해 알바 찾기가 가능합니다.
해당 기능을 찾아 계원예대 근처 알바를 구해주세요.
3. 당신은 드라마 보조출연 알바를 구하려고 합니다. 직종별 메뉴를 통하여 원하는 알바를 구해보세요. 지역 및 방송사의 조건은 상관 없습니다.
어플리케이션 첫 인상에 대한 테스크
‘알바천국’ , ‘알바몬’ UX/UI에 대한 테스크 사용자가 처음 선택한 어플리케이션부터 1~3까지.

10. INDEX
Introduction
1 Result
2 Recommendation
3
방법론 및 진행 프로세스
테스트 목적
참가자 프로파일
테스트 환경
테스크 시나리오
테스크별 수행시간, 접근경로
리얼보이스
사후인터뷰
시선추적(Eye Tracking)
문제점에 대한 해결방향

11. 2. Result
테스크별 수행시간, 접근경로
대부분의 경우 지역별 메뉴를 가장 먼저 선택하였으며, 후에 검색이나 상세 조건을 선택하였다.
1. 원하는 어플리케이션을 통하여 자신에게 맞는 시간과 장소의 알바를 구해보세요.
한수아(20대) 103초 메인 > 단기알바 > 상세조건검색 > 완료
박진주(20대) 65초 메인 > 맞춤알바(조건설정) > 검색 > 완료
김성실(30대) 60초 메인 > 지역별 > 상세조건검색 > 완료
장윤제(30대) 36초 메인 > 지역별 > 상세조건설정 > 검색 > 완료
이은탁(30대) 225초 메인 > 지역설정 > 맞춤알바(조건설정) > 검색(상세설정) > 완료
김세연(20대) 35초 메인 > 단기 알바 > 상세조건검색 > 완료
이소연(20대) 54초 메인 > 지역별 메뉴 > 지역 선택 > 직종 선택 > 완료
김세희(20대) 50초 지역별 > 검색조건설정 > 완료
이름 수행시간 접근경로
알바천국 선택
알바몬 선택
평균 78.5초

12. 2. Result
테스크별 수행시간, 접근경로
지역별 메뉴에서의 상세조건 설정에서 다소 어려움을 겪어 보다 많은 시간이 걸리는 것을 알 수 있었다.
2. 당신은 알바 어플을 통하여 새로운 일을 구하려고 합니다. 서울시 마포구 서교동 지역에서 서빙 업무 관련 알바를 찾아보세요.
한수아(20대) 68초 지역별 > 지역선택 > 완료
박진주(20대) 47초 메인 > 지역선택 > 직종선택 > 완료
김성실(30대) 50초 지역별 > 상세조건검색 > 완료
장윤제(30대) 118초
메인 > 지역별 > 상세조건설정 > 검색 > 상세조건검색 > 직종별 > 상세조건검
색 > 완료
이은탁(30대) 134초 지역별 > 상세설정 > 완료
김세연(20대) 56초 지역별 > 상세조건검색 > 완료
이소연(20대) 40초 메인 > 지역별메뉴 > 지역선택 > 직종선택 > 완료
김세희(20대) 152초
지역별 > 상세조건설정 > 업직종상세설정 > 재설정 > 지역검색 > 검색 > 재설
정 > 완료
이름 수행시간 접근경로
한수아(20대) 35초 지역별 > 지역상세설정 >완료
박진주(20대) 50초 메인 > 지역 설정 > 지역별 > 검색조건 설정 > 희망업직종 선택 > 완료
김성실(30대) 77초 지역별>상세설정>완료
장윤제(30대) 103초 메인>지역검색>지역알바>검색조건설정>완료
이은탁(30대) 62초 지역별 > 상세검색 > 검색조건설정>완료
김세연(20대) 75초 메인 > 지역검색 > 지역알바 > 검색조건설정 > 완료
이소연(20대) 62초
메인 > 지역알바 > 검색조건설정> 희망근무지 설정 > 서교동 > 검색조건설
정 > 직종검색 > 완료
김세희(20대) 58초 지역설정 > 검색조건설정 > 검색 > 완료
이름 수행시간 접근경로
평균 83.13초 평균 65.25초

13. 2. Result
테스크별 수행시간, 접근경로
여기에 결과값 설명 간단하게~
3. 당신은 학교 주변의 아르바이트를 구하고 싶지만 주소가 기억나지 않습니다. 어플리케이션에서 정확한 주소를 몰라도 지도를 이용해
알바 찾기가 가능합니다. 해당 기능을 찾아 계원예대 근처 알바를 구해주세요.
한수아(20대) 197초 마이메뉴편집 > 현위치(알바맵) > 검색 > 현위치(알바맵) > 완료
박진주(20대) 116초
메인 > 마이메뉴 설정 > 지역별 메뉴 > 핫플레이스 > 채용정보 홈 > 현위치 >
완료
김성실(30대) 68초 메인 > 직종별 > 지도내에서 검색 > 완료
장윤제(30대) 78초 메인 > 현위치(알바맵) > 위치 내 검색 > 지도스와이핑 > 완료
이은탁(30대) 66초 메인 > 현위치(알바맵) >완료
김세연(20대) 68초 직종별 > 지도에서 검색 > 완료
이소연(20대) 43초 메인 > 현위치 > 지역별 > 역세권 > 핫플레이스(실패)
김세희(20대) 210초 메인 > 지역별 > 핫플레이스 > 지역별 > 상세검색 > 실패
이름 수행시간 접근경로
한수아(20대) 60초 알바지도 > 위치선택 > 지도내에서 검색 > 완료
박진주(20대) 108초
메인 > 대학가 근처 > 검색 > 지역별 > 전체알바 > 검색조건서정 > 햄버거메
뉴 > 즐겨찾는 메뉴 편집 > 내 스팟 저장 > 근처알바찾기 > 완료
김성실(30대) 60초 지역별 > 알바지도 > 지도내에서 검색>완료
장윤제(30대) 157초
지역별 > 취소 > 단기알바 > 취소 > 마이메뉴 > 취소 > 검색 >취소>맞춤알
바 > 알바지도 > 지도스와이핑 > 완료
이은탁(30대) 134초 즐겨찾는메뉴 > 알바지도 > 소팅조건설정 > 지도스와이핑 > 완료
김세연(20대) 55초
알바지도 > 위치선택 > 지도내에서 검색 > 완료
이소연(20대) 30초 메인 > 지역별 > 알바지도 > 검색조건 설정 > 완료
김세희(20대) 144초 지역별 > 검색조건설정 > 업직종별 > 업직종선택 > 완료
이름 수행시간 접근경로
‘지도’ 메뉴의 위치가 눈에 띄지 않아 메뉴를 찾는 데에 어려움을 겪는 사용자가 다수였고, 메뉴 안의 기능 사용에도 어려움을 겪었다.
성공
실패
평균 105.37초 평균 93.5초

14. 2. Result
테스크별 수행시간, 접근경로
1차 직종 선택하는 부분에서 알바몬보다 많은 터치수와 긴 수행시간을 요하였다.
4. 당신은 드라마 보조출연 알바를 구하려고 합니다. 직종별 메뉴를 통하여 원하는 알바를 구해보세요.
지역 및 방송사의 조건은 상관 없습니다.
한수아(20대) 78초 직종별 > 조건상세검색 > 완료
박진주(20대) 99초 메인 > 직종별 > 1차 직종 선택 > 2차 직종 선택 > 지역 선택
김성실(30대) 93초 직종별 > 조건상세선택 > 완료
장윤제(30대) 74초 직종별 > 상세조건설정 > 조건재확인 > 재설정 > 완료
이은탁(30대) 70초 맞춤알바 > 단기알바 > 업/직종별 검색
김세연(20대) 70초 지역별 > 조건설정 > 완료
이소연(20대) 42초 메인 > 직종별 > 1차 직종 선택 > 2차 직종 선택 > 완료
김세희(20대) 69초 메인 > 직종별 > 1차 직종 선택 > 2차 직종 선택 > 완료
이름 수행시간 접근경로
한수아(20대) 70초 업직종별 > 상세검색(지역포함) > 완료
박진주(20대) 42초
메인 > 전체 알바 > 업직종별 > 희망 업직종 선택 > 검색조건설정 > 지역설
정 > 완료
김성실(30대) 70초 지역별 > 조건설정 > 완료
장윤제(30대) 302초
희망직종선택 > 업직종별 > 검색조건설정 > 업직종별 > 희망직종선택 > 직
종별 > 검색 > 직종 > 조건설정 > 직종선택 > 완료
이은탁(30대) 70초 지역별 > 조건설정>완료
김세연(20대) 99초
메인 > 직종별 > 1차 직종 선택 > 2차 직종 선택 > 지역 선택
이소연(20대) 39초 메인 > 업직종별 > 희망 업직종 선택 > 완료
김세희(20대) 32초 메인 > 업직종별 > 희망 업직종 선택 > 검색조건 설정 > 완료
이름 수행시간 접근경로
평균 74.38초 평균 60.28초 장윤제씨의 자료는 비정상범위 자료로 처리.

15. 2. Result
리얼 보이스
‘지도’가 나오는 메뉴를 찾지 못 해 혼란스러워하는 사용자가 많았고, ‘지도’ 서비스가 지역별 메뉴 안에 있을 것이라 생각하는 사용자가 다수 있었다.
한수아(20대) 지도를...? 아마도? 지역별. / 드라마 보조출연. 드라마. 드라마가 뭐야? 내가 보기에 드라마는... 서비스야.
박진주(20대) 지도가... 지도가 있단 말이죠? 정말로죠? 정말로. 핫플레이스 이건가?
김성실(30대) 지도를 이용해서 꼭 찾아야 하는 거예요?
장윤제(30대) 그냥 검색으로 하면 안되나?
이은탁(30대) 요즘 알바 구하기도 힘들구나. 지도가 어디 있는지 모르겠는데. ...현위치.
김세연(20대) 지역 다시 설정해야 하나?
이소연(20대) 아, 불편해. 어, 아까 찾았는데. / 지도가 없는데요. 이거는 못 찾겠어요.
김세희(20대) 지도가 어딨어? 지도가 없어. 지도 어딨는거야. 못찾겠네. 없어, 지도. 뭐야. 있어? 이거 포기하면 안 돼요? 알바몬은 딱 보였는데. / 보조출연자가 서비스인가요?
이름 리얼 보이스
알바천국 앱 서비스 사용 시

16. 2. Result
사후 인터뷰
‘현위치’ 레이블링 및 메뉴 위치 지적이 많았으며 카테고리 분류의 직관성이 부족하여 탐색에 어려움을 겪은 사용자가 많았다.
한수아(20대) 알바몬의 직종 분류 직관성이 더 명확함. 현위치 레이블링이 기능 인지에 어려움을 줌. 현위치 메뉴의 스크롤 정보 제공 UI가 부족.
박진주(20대) 1차 직종 분류의 기본 선택이 삭제되지 않아 불편을 겪음. 현위치 핀 위치 이동이 가능할 것이라 예상했으나 불가능하여 어려움을 겪음.
김성실(30대) 메뉴 위치의 변경이 필요, 채용 관련 카테고리 분류가 예측이 안되어 찾기 어려움. 보기 쉬운 정렬 기준으로 제공 필요.
장윤제(30대) 검색을 많이 활용 하는 편, 검색 이용이 더 신속하다 느낌. 알바몬은 텍스트가 눈에 띄지 않아 어려움.
이은탁(30대) 햄버거 메뉴 자주 이용. 카테고리 분류의 직관성이 부족하며 메뉴가 다양하여 찾는데 어려움을 겪음.
김세연(20대) 현위치 메뉴명의 예측이 어려움. 알바몬 화면이 큼직큼직해서 보기 편했음.
이소연(20대) 알바몬이 사용하기 편하고 정보 제공 양이 많음. 레이블링의 직관성이 부족하며 로그인 시 맞춤 소팅 제공 원함.
김세희(20대) 현위치 레이블링이 알바맵에 비하여 인지하기 어려움. 보조출연자는 IT 계열이라고 생각하여 헤맴.
이름 인터뷰 내용
알바천국과 알바몬 비교 인터뷰

17. 2. Result
시선추적(Eye Tracking)
시선 추적(Eye tracking)이란?
Usability Test를 진행하면서 사용자의 시선을 추적하여 사용자가 화면에서 중점적으로 보는 부분, 시선의 진행 순서를 알 수 있는 방법이다.
사용자에게 각 화면의 구성이 어느 정도의 주목도를 가지는지, 얼마나 사용자의 시선을 잡아 둘 수 있는지의 여부를 체크할 수 있다.
헤딩 데이터를 통해 현재 메뉴의 위치나 디자인의 변경 등을 고려해 볼 수 있다.
데이터 보는 방법 :
화면에 도달했을 때 숫자 표기를 통해 사용자의 시선 경로를 알 수 있으며,
원이 커질수록 사용자가 오래 시선을 둔 부분이라는 의미이다.
알바천국 어플리케이션의 Eye Tracking 진행 화면 ▶

18. 2. Result
시선추적(Eye Tracking)
▲ 알바천국 현위치 ▲ 알바몬 알바지도

19. 2. Result
시선추적(Eye Tracking)
알바천국 메인 화면에서는 주로 글로벌 네비게이션을 통해
메뉴로 진입하는 사용자가 많았고, 시선도 네비게이션에 주로 머물렀다.
(but, 네비게이션 내에서 시선분산이 심한편임)
▲ 알바천국 메인화면 ▲ 알바몬 햄버거메뉴
알바몬에서는 햄버거 메뉴를 통해 메뉴로 진입하는 사용자가 많았으며,
아이콘으로 이루어진 ‘즐겨찾는 메뉴’에 시선이 가장 먼저 가면서
오래 머무르고, 순차적으로 내려갔다.
주요 메뉴를 아이콘으로 구성한다면 메뉴간의
중요도(시선유도) 차이를 둘 수 있음.

20. 2. Result
시선추적(Eye Tracking)
▲ 알바몬 햄버거메뉴 ▲ 알바몬 채용정보
햄버거 메뉴내의 아이콘으로 이루어진 ‘즐겨찾는 메뉴’에 시선이 가장
먼저 가면서 오래 머무르고, 순차적으로 내려갔다.
알바몬 채용정보 화면에서도 이와 비슷하게아이콘으로 이루어진 정보
요약에 가장 먼저 시선이 쏠리는 것을 볼 수 있다.
정보를 볼 때, 글만 있는 것 보다 아이콘과 함께 있는부분에 더 짧은 시
간동안 시선이 머무른 것을 보아 아이콘이 쉽고 빠르게 정보를 인지할
수 있음을 알 수 있다.
정보를 빨리 읽도록 해주기 위해서는
아이콘과 함께 있는 것이 좋음.

21. INDEX
Introduction
1 Result
2 Recommendation
3
방법론 및 진행 프로세스
테스트 목적
참가자 프로파일
테스트 환경
테스크 시나리오
테스크별 수행시간, 접근경로
리얼보이스
사후인터뷰
시선추적(Eye Tracking)
시사점 도출
앞으로의 개선방향

22. 3. Recommendation
시사점 도출
지역에 관한
사용자 니즈가 많음
‘현위치’메뉴
인지도/직관성 부족
애매한
직종 분류 기준,
그로 인한 사용성 저하

23. 3. Recommendation
앞으로의 개선방향
지역에 관한
사용자 니즈가
많음
‘현위치’메뉴
인지도 / 직관성
부족
애매한
직종 분류 기준,
그로 인한
사용성 저하
지역에 관한 서비스 강화
(현위치, 핫플레이스 등)
현위치 메뉴 위치변경
레이블링 변경
-
직종별 메뉴
레이아웃 및 UI 변경

24. Usability Test Report
계원예술대학교 디지털미디어디자인과
박채원, 조영지, 김윤신, 안가은
알바천국 어플리케이션 사용성테스트
2016.11.28 Ver 2.0