Riset pengguna adalah dasar pengembangan produk di Semantic Scholar, dan telah membantu kami mendapatkan pemahaman yang mendalam tentang cendekiawan kami, bagaimana mereka berinteraksi dengan literatur ilmiah, dan hubungan mereka dalam komunitas.

Evie Cheng adalah Peneliti UX Senior untuk Semantic Scholar di Allen Institute for AI.

Di Semantic Scholar, kami bertujuan untuk mempercepat terobosan ilmiah dengan membangun cara yang lebih baik untuk mencari dan menemukan pengetahuan ilmiah menggunakan model AI kami yang canggih. Namun, untuk membantu para sarjana melakukan penelitian yang berdampak, dibutuhkan lebih dari sekadar teknologi.

Kami peduli dengan pengguna kami, dan sangat penting bagi kami untuk mendapatkan pemahaman yang mendalam tentang cendekiawan, bagaimana mereka berinteraksi dengan literatur ilmiah, dan hubungan dalam komunitas.

Riset pengguna adalah dasar dari pengembangan produk di Semantic Scholar. Kami melakukan berbagai jenis penelitian untuk memahami motivasi, tujuan, masalah, dan kebutuhan yang belum terpenuhi dari para sarjana, dan menggunakan pembelajaran kami untuk menginformasikan keputusan di seluruh tim kami dan menciptakan pengalaman yang bermakna.

Pendekatan Penelitian Kami

Penelitian eksplorasi

Membangun pemahaman bersama tentang pengguna yang mewakili luasnya dan keragaman basis pengguna kami telah menjadi tantangan utama bagi penelitian pengguna sejak hari pertama. Anggota tim kami memiliki berbagai tingkat pengalaman dengan produk kami, mulai dari cendekiawan terkemuka yang telah menulis makalah ilmiah selama bertahun-tahun, hingga mereka yang belum pernah mencari makalah akademis sebelum bergabung dengan tim.

Mengingat dinamika ini, kami berusaha melakukan penelitian yang akan memberikan pemahaman yang sama kepada semua orang tentang pengguna kami yang sebenarnya dan masalah mereka. Kami melakukan studi buku harian 10 hari dengan 15 sarjana di seluruh dunia dalam berbagai tahapan karir dan bidang penelitian. Melalui entri buku harian dalam konteks dan refleksi ekologis sesaat, kami dapat memahami interaksi sehari-hari mereka dengan literatur ilmiah, mendapatkan pemahaman yang lebih luas tentang lingkungan sekitar tempat penelitian dilakukan, dan menerjemahkan wawasan ke dalam persona pengguna yang kemudian menjadi aset yang kuat. bagi kami untuk membuat keputusan produk yang tepat dan memberikan dampak terbesar.

“Kami ingin memahami mengapa pengguna mencoba menyelesaikan tugas tertentu, di mana tugas tersebut termasuk dalam perjalanan penelitian mereka, dan alat serta alur kerja apa yang dilakukan pengguna kami.”

Kami selalu melihat ke luar untuk mengidentifikasi peluang baru dan menjelajahi ruang yang dapat kami pengaruhi. Baru-baru ini, kami melakukan studi eksplorasi untuk lebih memahami bagaimana perangkat seluler digunakan dalam alur kerja penelitian harian seorang sarjana. Di dunia yang sangat mobile, perangkat utama untuk penelitian ilmiah tetap didominasi oleh komputer desktop dan laptop, dan kami ingin memahami alasannya.

Meskipun komputer adalah perangkat penelitian utama untuk pekerjaan yang terfokus dan mendalam, pengguna memeriksa penelitian baru, makalah skim, dan memikirkan ide sepanjang waktu di perangkat seluler. Dengan hambatan seperti format bacaan seluler yang tidak ramah dan akses terbatas ke literatur, pengguna mengembangkan solusi untuk mengingat kertas untuk dibaca atau hal-hal yang harus dilakukan saat berpindah perangkat. Namun, mereka memakan waktu dan masih membutuhkan beban kognitif yang berat.

“Saya menghabiskan banyak waktu berjalan-jalan dengan anjing saya. Saya membawanya ke taman anjing hampir setiap hari, dan saya menemukan diri saya menelusuri Twitter. Saya akan menemukan makalah, dan kemudian saya akan mulai memikirkan hal-hal dan menemukan kutipan. — Peserta

“Mungkin ada seribu bookmark. Cara saya menggunakan bookmark adalah dengan membangkitkan ingatan saya untuk nanti. Daftarnya sangat panjang, bahkan aku bingung.” — Peserta

Kami bertanya pada diri sendiri, “Bagaimana kami dapat membuat penelitian menjadi lebih mudah bagi pengguna untuk dikonsumsi di perangkat seluler? Bagaimana kami dapat mempermudah pengguna untuk mengambil kertas dan tugas yang mereka tinggalkan saat berpindah perangkat?” Hal ini memungkinkan kami mengungkap wawasan perilaku yang akan terlewatkan jika kami hanya berfokus pada praktik yang ada, dan memungkinkan kami menyesuaikan produk kami dengan skenario dan momen mikro yang sedang berjalan.

“Memiliki sesuatu yang lebih terpusat yang melakukan semua ini tanpa saya harus melakukannya secara manual, kirim email dan ambil, lalu tempel di sini, lalu lakukan ini, dan simpan informasi ini di sana. Itu akan menghemat banyak waktu.” — Peserta

Skala empati

Kami juga telah membuat program penelitian "Obrolan Pengguna" berulang untuk mendekatkan tim dengan pengguna kami. Kami mengundang pengguna setiap minggu untuk mengobrol dengan kami selama 45 menit tentang alur kerja penelitian mereka saat ini, masalah, dan kebutuhan. Memfasilitasi dan meninjau wawancara pengguna mungkin terdengar memakan waktu dan menakutkan, jadi kami sengaja merancang program ini agar ringan dan mudah dilakukan. Anggota tim dapat mengajukan pertanyaan apa pun yang mereka miliki untuk pengguna, atau sekadar mendengarkan secangkir kopi. Hal ini secara efektif membangun kredibilitas, meningkatkan minat tim untuk riset pengguna, dan membuka diskusi yang bermanfaat seputar apa yang penting bagi pengguna kami di seluruh tim.

Penelitian Inklusif

Untuk nilai inti kami dalam mempromosikan akses yang setara ke sains, kami memulai perjalanan penelitian inklusif kami dengan berbicara dengan cendekiawan tunanetra atau tunanetra untuk memahami tantangan yang mereka hadapi saat berinteraksi dengan literatur dan mengidentifikasi celah dan peluang aksesibilitas yang dapat kami pengaruhi. Percakapan tersebut menginformasikan kesadaran dan prioritas tim untuk audiens yang kurang terlayani. Sejak saat itu, kami terus menyertakan beragam suara dalam penelitian pengguna kami dan membangun inklusivitas di panel pengguna kami. Baca selengkapnya tentang pekerjaan aksesibilitas kami di sini .

Penelitian Evaluatif

Kami bermitra dengan pengguna kami untuk menyertakan perspektif mereka selama semua tahapan proses desain kami. Kami melakukan sesi desain bersama, wawancara, uji kegunaan, dan survei untuk bertukar pikiran, menyempurnakan, dan mengulang. Ini memastikan pengalaman pengguna menyenangkan, dan paling memenuhi kebutuhan pengguna kami.

Ambil salah satu fitur pembeda inti kami, Research Feeds , sebagai contoh. Saat kami pertama kali meluncurkan Umpan Riset dan Perpustakaan, keduanya merupakan fitur terpisah untuk penemuan dan pengaturan. Berdasarkan apa yang kami dengar selama sesi penelitian, kami mengidentifikasi kebutuhan untuk mengintegrasikannya ke dalam hub agar pengguna tetap mendapatkan informasi terbaru. Sekarang cendekiawan dapat menerima rekomendasi yang dipersonalisasi berdasarkan apa yang telah mereka simpan ke perpustakaan mereka.

“Itu sebagian besar alasan mengapa saya datang ke Semantic Scholar. Untuk melihat rekomendasi tersebut, makalah baru yang saya pedulikan karena mereka menyebutkan topik yang saya minati.” — Peserta

Contoh lainnya adalah versi baru dari fitur Pengaruh Penulis kami yang akan segera diluncurkan. Hubungan penulis adalah komponen kunci bagaimana para ilmuwan menemukan penelitian yang relevan, memahami bidang studi mereka, dan menyimpulkan dampak penelitian mereka sendiri. Hal ini memotivasi kami untuk berpikir tentang cara terbaik menampilkan informasi tersebut untuk mendukung penemuan dan kolaborasi.

“Penelitian semakin kolaboratif dan berlingkup global. Jaringan kolaborasi semacam ini bermanfaat dan mutakhir. Untuk melihat kolaborasi dengan cara yang berbeda tanpa secara eksplisit terikat pada keluaran yang ditinjau oleh rekan sejawat, akan sangat, sangat mengakui bahwa banyak hal sedang berubah. -Peserta

Dengan melakukan wawancara, kami dapat memahami bagaimana pengguna membangun model mental jaringan kepengarangan, bagaimana informasi ini digunakan oleh para sarjana di berbagai tahap karir mereka, bagaimana pengguna menavigasi visualisasi, serta kekhawatiran dan kekhawatiran mereka. Kami akan memublikasikan postingan blog lain untuk membagikan proses dan wawasan kami saat kami membuat fitur ini.

Melihat ke masa depan

Kami telah membuat banyak kemajuan, tetapi masih banyak yang harus dilakukan. Kami terus meningkatkan untuk menjadikan Semantic Scholar alat yang lebih baik untuk semua sarjana. Jika Anda tertarik untuk berbagi umpan balik dan membantu membentuk masa depan penelitian ilmiah, silakan mendaftar untuk program beta kami !

Ikuti @allen_ai dan @semanticscholar di Twitter, dan berlangganan Buletin AI2 untuk tetap mengikuti berita dan penelitian yang keluar dari AI2.