that syncing feeling early user experiences with the cloud

That Syncing Feeling: Early User Experiences with the Cloud+ DIS 2012-Cathy Marshall, John C. Tang/임하진x 2013 Autumn

Wednesday, October 16, 13

http://ux.snu.ac.kr

http://ux.snu.ac.kr

http://ux.snu.ac.kr

http://ux.snu.ac.kr

http://ux.snu.ac.kr

http://ux.snu.ac.kr

20131016

That Syncing Feeling: Early User Experiences with the Cloud

임하진


Cathy. Marshall John.C.Tang

Microsoft Research Center in Silicon Valley

DIS 2012Designing Interactive Systems

저자들


✤ Early-Adopter 군에 속하는 사용자들이 File sync와 File Sharing 시스템을 어떻게 사용하고 있고, Cloud와의 인터렉션을 어떤 식으로 개념화 하는지 알아보기 위한 연구

✤ 연구방법

✤ 106명을 대상으로한 Survey

✤ 19명을 대상으로한 In-depth Interview

✤ 이를 통해 도출된 Use cases를 통해 사람들이 클라우드 서비스를 활용하는 방식에 대한 5개의 Pivot Concept를 도출

✤ Personal file repository

✤ Shared file repository

✤ Personal replicated file store

✤ Shared replicated file store

✤ Synchronization mechanism

✤ 결과적으로 강력한 Cloud Service를 위한 “Process Transparency” 와 “Interface Scaffolding” 등 을 제안

Overview


연구의 필요성✤ Cloud Computing의 인기와, 성장세

✤ 기존 연구들은 technical infrastructure (e.g. optimizing throughput, scaling up in capacity, maximizing uptime) 등에 집중하는 경향

✤ 클라우드 컴퓨팅이 End-user 레벨에서 더욱 많은 서비스를 제공하는 추세 → 실제 사용자들이 클라우드를 어떻게 사용하고, 어떻게 받아들이고 있는지 연구해볼 필요가 있음

Exemplars


A) Early Adopter들이 어떤 식으로 Cloud file sync / Sharing Service를 사용하고 있는가?

B)사용자들이 이러한 서비스들을 더욱 더 사용하게 하는 / 혹은 그를 막는 Conceptualization과 Misconception들은 무엇인가?

C)클라우드 서비스의 전반에 대한 사용자들의 이해를 형성하고 적절히 사용하게 하기 위한 Interaction Design Implication은 무엇인가?

연구 문제


연구방법론

1) 파일럿 스터디

2) 심층 인터뷰 (Skype 인터뷰 + 클라우드 폴더를 보여줌)

Our interview data were first open-coded for

recurring themes, then analyzed by comparing specific instances of those themes across participants. Our analysis focused on how they used syncing and sharing services, and on the conceptual models they were forming through their usage.

Coding + Analyze


Participants

internet. But Rader’s study of group information repositories [14] showed that people manage files in a shared repository differently than in their own file directories, indicating some conflicting conceptual models of how to share files. People were reluctant to delete files that they did not own, but disliked the resulting clutter which diminished the shared repository’s value for everyone. These studies raise some of the interface complexities around file sharing.

These user needs identified by prior research are being met by recently developed cloud-based file sync and sharing services. While Dropbox and Google Docs are two of the most popular, they compete with a wide range of services with different features and cost structures. But, as Bowers points out [5], it is not just the technology but the work practices that develop around it that shape what users can actually accomplish. We set out to study the early use of these services to understand the models users were developing as they interacted with the cloud. STUDYING FILE SYNCING AND SHARING We conducted a two-phase study of cloud-mediated file syncing and sharing. First we piloted and administered a 106-person survey to gather background data and identify prospective participants for the second part of the study, which consisted of 19 in-depth interviews. The survey included 15 questions about respondents’ use of syncing and sharing software and services and six demographic questions, and took about fifteen minutes to complete. We recruited respondents for voluntary participation via posts in Facebook, Twitter, and email groups that spread beyond our personal contacts. Respondents ranged from computer

research professionals to moms using shared files to coordinate school volunteer tasks.

For the interviews, we selected 19 of the 106 survey respondents for a balance of characteristics such as age, gender, software used, level of technical sophistication, satisfaction with their syncing and sharing solutions, and apparent extent of the demands they placed on the cloud. Semi-structured, open-ended interviews were conducted over Skype to reach participants in their usual computing environments so they could access their file syncing and sharing services. To ground the interviews, we asked the participants to view their synced folder or cloud document repository. Interviews lasted about an hour and were audio-recorded for later review and transcription. Participants received a $25 gift card for their time.

Our interview data were first open-coded for recurring themes, then analyzed by comparing specific instances of those themes across participants [1]. Our analysis focused on how they used syncing and sharing services, and on the conceptual models they were forming through their usage.

Table 1 summarizes the characteristics of the interview participants from their survey responses. Participant IDs assigned based on the survey responses are used to identify quotations and stories from their interviews. Survey Results The 106 completed surveys provided background information about respondents’ current use of syncing and sharing services. Of the respondents, 60% were male, 37% were female. Many were in the 20-35 yr. range (39%), but several were under 20 (3%) and over 65 (2%). Each

ID Gender Age group

Technical level

# of devices

Syncing Satisfaction

Extent of sharing

Sharing Satisfaction

S006 F 51-65 low 2 4 2-5 groups 6 S007 M 36-50 medium 2 2 >5 groups 2 S012 F 51-65 medium 3 2 2-5 groups 6 S014 M 20-35 high 3 6 2-5 groups 3 S017 M 20-35 high 6 6 2-5 groups 5 S018 F 36-50 low 6 3 2-5 groups 6 S032 M 36-50 medium 5 7 2-5 groups 7 S038 M 20-35 medium 4 5 2-5 groups 4 S039 F 51-65 medium 6 7 none 7 S051 F 36-50 low 3 4 >5 groups 4 S052 M 51-65 high 6 6 2-5 groups 5 S055 M 36-50 medium 4 6 2-5 groups 5 S058 F 20-35 low 8 7 2-5 groups 7 S062 F 20-35 low 3 4 2-5 groups 5 S065 M 20-35 high 4 2 2-5 groups 4 S078 M 36-50 high 3 7 2-5 groups 7 S092 M 20-35 high 4 5 >5 groups 5 S102 F 51-65 medium 4 2 1 main group 5 S106 M 36-50 high 6 6 2-5 groups 5

Table 1. Interview participant characteristics.

DIS 2012 • In the Wild June 11–15, 2012 • Newcastle, UK

545

age/ gender/ software used/ level of technical sophistication/ satisfaction /


A) USES OF SYNC AND SHARING SERVICES

✤ 인터뷰를 통해 사용자들이 어떻게 cloud-based file sync / sharing services를 그들의 개인 및 공적 업무를 위해 사용하고 있는지 알아봄

1) Transfer Between Devices 2) Transfer among People

USB stick 처럼 이용하는 경우

(한 디바이스에서 다른 디바이스로 옮기기 위해)

E-mail 첨부파일 대신으로 이용하는 경우

(비교적 용량이 큰 파일을 다른 사람에게 보내주기 위해서 )

이들 Case는 특정한 사용자 Needs들을 충족 시키고 있지만

Cloud service에 특화된 기능을 사용하고, 배우는 데 도움이 되지 못함


A) USES OF SYNC AND SHARING SERVICES

C) Active File Backup

E) Syncing Files Among Personal Devices

D) Cloud-Based File Sharing

F) Using Synced Folders Collaboratively

만약에 경우를 대비해서 적극적으로 개인의 파일을 백업하는

용도로 사용

기기간 싱크 기능을 인지하고 있지 못하고, 웹 사이트 특정 계정/폴더 자체를 파일 공유 플랫폼으로 사용하는 경우

(주로 Long-term project에서 사용됨 - 가장 최신의 / 관련된 문서를 협업에 사용하기 위해서- Google Docs)

개인 기기간에 분산된 파일들을 관리하기 위해서

(어느 정도 기간 이상의 학습기간이 흐른 후에 인지되는 경우가 많음)

구성원들 간에 공유되어 싱크되는 공용폴더로써 사용 - 구성원 중 어느 한 사람

이 폴더에 변경을 가할 경우 모든 구성원에게 영향을 미침 (These concepts are tricky to understand and enact. If collaborators

had different models of how synced shared folders worked, surprising, even conflicting, behaviors often ensued. Beyond the negotiation of shared structure described in prior work, e.g., we focus on the propagation of changes and conflict resolution. )


B) UNDERSTANDING THE CLOUD - Conceptualization✤ Key Questions

✤ “당신의 기기가 인터넷에 연결되어 있지 않을 때 어떻게 파일에 접근하나요?”

✤ “만약 당신이 클라우드 폴더에 있는 파일을 지운다면 어떤 일이 생기나요?”

✤ “파일들의 싱크가 언제 이루어 진다고 생각하시나요?”

✤ 사용자들이 클라우드 서비스를 이해하고 사용하는데 가지고 있는 일종의 Mental-Model과 개념화 경향을 조사

use cases concepts user actions

cloud repository ubiquitous access

transfers files to the cloud and accesses them from any device

shared cloud repository

synchronous access

edits shared content in the cloud

personal replicated store

disconnected access

edits content on any device, even offline

shared replicated store

deletion understands how own actions affect content on others’ devices

synchronization mechanism

sync triggers; resolving conflict

Ensures sync completion, avoids conflicts

Table 2. Conceptual framework for user-facing cloud storage services

Sometimes the interviews themselves prompted participants to form a model of how the services work. S018 reflected:

I mean, as you’re asking this, I’m thinking, you know what, I’m really not using Dropbox to its full capacity! I actually download my entire Document folder onto a very large USB stick… and then I copy it onto my laptop before a long trip. And that ensures that I have every document up to date, because I have no idea what I’m going to end up needing to access while I’m traveling, especially if I’m gone for any length of time.

Thresholds in Conceptual Models The ability to use file sync and sharing tools is substantially shaped and constrained by users’ conceptual models of how these tools work. The role of models is even more important when sharing files, since each collaborator’s model will shape the participants’ collective use of the tools and services. The most sophisticated of the participants worked around their collaborators’ misconceptions. They also performed informal experiments on the services (e.g., what happens when you delete a Google Doc you do not own?) to confirm various theories about how they work.

The interviews identified five major use cases that contribute to fully understanding cloud-based syncing and sharing services. They are (in order of increasing complexity): personal cloud repository, shared cloud repository, personal replicated store, shared replicated store, and synchronization mechanism. We make a nuanced distinction between replicated storage—the idea that local folders (and, potentially, the cloud) hold identical copies of a set of files—and synchronization, the mechanism by which the replication takes place, versions are created, and conflicts are reconciled (or reflected to the users).

These use cases identify a basic conceptual framework, shown in Table 2. Assimilating the elements of this framework enables a user to have a truly robust understanding of file sync and sharing tools, and the confidence to use them in the face of imperfect bandwidth

availability, storage limitations, and collaborators with less complete understandings of the underlying processes.

For each use case, we have identified example concepts and indicative user actions from the interview data: concepts are the underlying principles that participants must understand about the use case and user actions demonstrate that they know how to apply them. For example, if participants understand ubiquitous access they will be able to maintain a persistent store in the cloud, and will be able to transfer files among devices. Each successive concept represents an increasingly complex threshold of understanding. We populate each level of this framework with specific examples that arose during the interviews, illustrating the increasing levels of complexity and nuance. Cloud Repository To illustrate this level, we look at a participant who has a fairly good understanding of the role a cloud repository might play for file transfer and manual backup, but does not understand file synchronization. S051 is an accountant who uses a service called FilesAnywhere to transfer files to a colleague (but not vice-versa), to back up important work-related files, and for ubiquitous access. She adopted the service because she thought a paid service would give her better security, because her Quickbooks files were getting too large to mail to her colleague, and because it was easier to use a cloud store than a USB stick. When prompted to tell us how FilesAnywhere works, S051 said:

I’ll save the backup file, and then copy it from my laptop over to them… And then pretty much I can sign in from anywhere I want to. Anywhere I can get a browser…Then I can create a link that I can send it to anybody…and that link will last for however many days I set it.

Shared Cloud Repository All participants understood the idea of synchronous access to a shared cloud repository, e.g., Google Docs, as long as they used the Google Docs applications to access the files. Far fewer participants understood Google Docs as a more general cloud repository where they could upload and store other file types. This frequently led to Google Docs being used in task-driven way: “it’s almost in the moment, as soon as that day is gone or that moment is gone, I don’t care about the files anymore.” [S014]

Concurrent access helped participants understand shared cloud repositories; many of them had witnessed collaborators’ keystrokes as they concurrently updated a file (although the synchronous access had a bit of a magic quality to it). S006 said, “I just assume that the version of the file that’s being maintained by Google gets updated and saved and that becomes the new document that everybody’s working from.… I’ve actually been on a Google Doc when I can actually see somebody typing something. So, it happens in real time, but I don’t know how they make that work.”


548


B) UNDERSTANDING THE CLOUD - Conceptualization





synchronous access



disconnected access



















548

Complexity

Replicated storage—the idea that local folders (and, potentially, the cloud) hold identical copies of a set of files

Synchronization mechanism- by which the replication takes place, versions are created, and conflicts are reconciled (or reflected to the users).







synchronous access



disconnected access



















548

✤ Cloud Repository

✤ 파일 전송과 Manual 백업에 대한 개념은 알고 있으나 Sync에 대해 이해하지 못한 상태

✤ Shared Cloud Repository

✤ 주로 Google Docs에서 이루어 지는 Concurrent한 작업으로 Cloud를 접한 User군

✤ 실시간으로 업데이트되는 파일로서 이해

✤ (X) "구글닥스 스프레드 시트에 계획을 올려놓고 그를 다시 이메일로 보내주는 경우 "







synchronous access



disconnected access



















548

✤ Personal replicated store

✤ 클라우드 상의 파일은 복제되고, Offline상황에서도 접근이 가능하다는 것을 인지하고 있는 상태

✤ (X) "인터넷이 연결되지 않으면 클라우드 상에 파일에 접근할 수 없다고 생각하는 경우"

✤ (X) "어떤 다바이스에서 클라우드 상의 특정 파일을 지우고 다른 디바이스에서 그 파일을 다시 찾아보는 경우"

✤ Shared replicated store

✤ 공용 클라우드 상에 올리는 파일들은 구성원들의 기기에도 복제될 것이라는 것을 인지하고 있는 상태

✤ 공용 클라우드 폴더에 가하는 모든 변화들이 다른 구성원에게 영향을 미칠 것이라는 것을 이해하고 있는 상태

✤ (X) "다른 구성원과 상의 없이 PM이 해당 폴더를 cleanup해버린 경우"







synchronous access



disconnected access



















548

✤ Synchronization Mechanism

✤ Version관리의 원리

✤ Delete의 의미

✤ Selective Sync 기능

✤ When does a file sync?

✤ Does it sync at regular intervals? Is it triggered by a specific action (e.g., closing a file or saving it)?

✤ Can you ever just shut your laptop and trust that the files are in a consistent state?

✤ 어떤 사용자들은 자신의 컨셉 모델을 stable하게 만들기 위해 실험을 하기도 함 / 혹은 경험에서 배워감



✤ Security & Privacy Issue ✤ 참가자들에게 "만약 당신의 Desktop 전체를 클라우드 서버 상에 올리게 된다면 어떨 것 같은가요?"라고 물음

✤ → 어떤 종류의 파일/폴더를 클라우드에 올릴 것인가 ? (올리고 있는가?)

✤ 사람의 태도에 따라 천차만별 (Convenience vs. abstract notions of vulnerability)

✤ → 어떤 종류의 파일/폴더를 클라우드에 절대 올리지 않을 것인가 ? (올리지 않고 있는가?)

✤ 재무 정보, 성적, 기밀 자료, 인적사항이 들어가 있는 자료

✤ 또한

✤ 회사의 Name Value [Google vs. Dropbox vs. FileAnywhere vs. SkyDrive]

✤ 무료/유료 옵션

✤ 광고의 유무 등이 Security와 Privacy 인식에 영향을 미침

Security/Privacy 인식이 각각의 사용자의 Concept model에 영향을 미치진 않지만,

특정 클라우드 서비스를 사용하는 방식 및 Adoption에 영향을 미침


DESIGN IMPLICATIONS

✤ "어떻게 하면 사용자들에게 좀 더 나은 Concept Model을 형성할 수 있도록 할까?",

✤ "클라우드 서비스의 다양한 기능을 최대한 잘 활용할 수 있게 하려면 어떻게 해야할까?"

✤ 등의 물음에 답을 하기 위한 3가지 Design Implication이 도출됨

✤ a) 과정의 투명성 (Process Transparency)

✤ b) Interface 재 구조화 (Interface Scaffolding)

✤ c) 사용자 Concept Model의 재구축 (Reconciling Conceptual Model)


DESIGN IMPLICATIONS - a) Process Transparency

✤ Sync 과정에 대한 Cue가 부족하다는 점이 시적됨

✤ 다른 사람이 특정 파일을 추가 혹은 update했다는 Notification + Sync의 시작과 완료 했다는 Notification 이 이루어 져야 함

✤ → 싱크가 일어나는 중간에 Offline으로 변경할 경우 싱크가 완료 되지 못했다는 warning/alert를 줄 필요가 있음

✤ 공용폴더 상에서 매번 각각의 사용자가 어떤 파일을 열어보거나/ 변경을 했을 때 어떤 유저가, 어떤 파일을, 어떤 디바이스를 통해, 언제 접근/변경되었는지 알려줄 필요가 있음

✤ → 이는 사용자가 접근하기 원하는 가장 최신의 파일에 접근할 수 있게 해주며, 어떤 이가 동시에 한 파일을 통해 일하고 있는 경우 생길 수 있는 문제 들을 방지해 줄 수 있음

✤ Network 연결 표시창 처럼 sync 상태를 알려주는 Indicator가 필요함

→ 대부분 개선됨 (특히 Dropbox에서)


DESIGN IMPLICATIONS - b) Interface Scaffolding

✤ Google Docs에 있는 공용 문서를 지우면 어떻게 될 것 같아요?

✤ “I would assume, if I’m the owner, it’s deleted, but if I’m not the owner, it stays”.

✤ 내가 Owner인 문서를 지울 때 :

✤ 내가 Owner가 아닌 경우 문서를 지울 때 :

✤ Dropbox에 있는 공용 문서를 지웠을 때는 어떨 것 같아요?

✤ 파일을 지웠을 때 그저 '지워졌다'는 결과만 보여짐

✤ 공용 폴더에서 Drag out은 'copy'가 아니라 'move'로 동작함

Remove from my document list ? YES ----- NO

Trash for everyone -- Choose new owner -- Cancel


DESIGN IMPLICATIONS - c) Reconciling Conceptual Models

✤ 대부분의 주요 클라우드 서비스 업체들은 '친숙한 컨셉'(local file storage)을 최대한 대로 유지하려고 함

✤ 하지만 이는 Cloud Computing이라는 새로운 컨셉과 충돌하는 경우가 생길 수 밖에 없음

✤ 친숙한 컨셉을 유지 하는 것의 장점은 분명 존재하지만, 이는 사용자들의 정확한 컨셉 모델을 발전시키는 데 저해하는 요소일 수도 있음

✤ Dropbox의 경우 친숙한 컨셉을 잘 활용하고 있으나 그만큼 많은 confusion을 발생시키고 있음 (5가지의 컨셉 모델의 이해 필요)

✤ GoogleDocs의 경우 Web-based의 컨셉 모델을 받아들여 cloud의 sync기능을 자연스럽게 받아 들일 수 있도록 하게 하였으나, 다른 확장된 기능에 대해 사용자들이 인지하지 못하는 경우가 많았음 (2가지 컨셉 모델의 이해 필요)

✤ Apple iCloud의 경우 Sync 기능을 전면으로 내세우지 않고 어플리케이션 단위에서 진행시킴으로써 충돌을 최소화 하려 하고 있으나 해당 어플리케이션을 벗어나 사용하려는 경우나, 다른 사람과 공유하려고 할 때 기능적인 한계가 발생함.


Conclusion, Contribution

✤ 사용자의 관점에서 Cloud Sync/File Sharing 서비스가 어떤 방향으로 발전되어야하는지 밝혀 냄

✤ 사용자에 따라 잘 못 설정된 혹은 충분치 못하게 설정된 '컨셉 모델'은 사용자들에게 혼란을 줄 뿐만 아니라 기능을 제대로 사용하지 못하는 결과를 초래할 수 있음

✤ 3가지의 Design Implication 제안

✤ 이는 End-user을 대상으로 한 다른 Cloud 기반 서비스 개발에도 적용 될 수 있을 것


Lessons

✤ 퍼스널 클라우드 파일 스토리지 서비스에 대한 관심....

✤ Design Implication에서 나온 개선사항들을 실제로 구현해 보고 싶음

✤ 앞으로 더 확대되어갈 분야....

✤ 앞단의 연구 방법에 대해 배울 부분이 많은 것 같음


Turbulence in the Clouds: Challenges of Cloud-Based Information WorkAmy Voida, Judith S. Olson & Gary M. OlsonCHI 2013

ABSTRACTWe report on a qualitative study of the user experience of cloud-based information work. We characterize the information work practices and challenges that exist largely at the different intersections of three constructs—cloud- based services, collaborations, and digital identifiers. We also demonstrate how the misalignment of

these three constructs is experienced as a “losing battle” that has led to miscommunication among collaborators, the abandonment of cloud-based services, and the irreparable blurring of digital identities.

Following Studies


Thank you :p


that syncing feeling early user experiences with the cloud

Technology