Nhận thức và bóng đá số câu chuyện bằng hình ảnh
Chúng tôi đã phát triển một khung lý thuyết để giải thích mối liên hệ giữa nhận thức về cảnh và sự kiện với việc bóng đá số các câu chuyện bằng hình ảnh (ví dụ: truyện tranh và phim). Nó được gọi làLý thuyết nhận thức cảnh và bóng đá số sự kiện (SPECT). Để tìm bóng đá số thêm về vấn đề này, hãy xemLoschky, Larson, Smith và Magliano (2020) vàLoschky, Hutson, Smith, Smith và Magliano (2018).
bóng đá số phim và chuyển động của mắt
Khi xem phim, người xem phim thường không biết họ hiểu cốt truyện như thế nào và hiểu được các sự kiện đang diễn ra. Nếu không nhận ra điều đó, người xem phải tạo ra các kết nối và suy luận theo từng thời điểm cũng như giữa các cảnh và cảnh quay khác nhau. Để hiểu nhân vật đang nghĩ gì hoặc cảm thấy gì, họ phải diễn giải hành động, ngôn ngữ cơ thể và nét mặt của họ. Rất nhiều nỗ lực vô thức được dồn bóng đá sốo việc tạo ra mô hình tinh thần của một bộ phim đang chiếu, nhưng kinh nghiệm khiến nhiệm vụ này trở nên dễ dàng hơn, vì nhiều người được làm quen với truyền hình từ khi còn nhỏ và lớn lên xem phim và học cách hiểu chúng. Nghiên cứu về khả năng hiểu câu chuyện phim là một lĩnh vực tương đối mới trong tâm lý học. Tuy nhiên, một số nghiên cứu cơ bản trong lĩnh vực này, cùng với lý thuyết và thực tiễn kéo dài hàng thập kỷ trong cộng đồng điện ảnh, đã đặt nền móng cho việc đặt ra câu hỏi cơ bản:Chúng ta bóng đá số phim như thế nào?
Nghiên cứu chuyển động của mắt trong phim đã ghi lại hiện tượng đồng bộ chú ý, xảy ra khi nhiều người xem nhìn bóng đá sốo cùng một thứ cùng một lúc (Smith & Mital, 2013; Dorr và cộng sự, 2010; Hasson và cộng sự, 2008)(Để minh họa về đồng bộ chú ý của Tim Smith:https://www.youtube.com/watch?v=iDQlMrhyjtw). Sự đồng bộ về chú ý được cho là xảy ra do chuyển động vật lý của các diễn viên và đồ vật trong phim (Mital và cộng sự, 2012), cũng như các yếu tố đặc trưng của phim; đáng chú ý nhất là cách chỉnh sửa được sử dụng và cách đóng khung các bức ảnh (Cutting et al., 2011). Đối lập với sự đồng bộ chú ý giữa các người xem, sẽ hợp lý khi một người xem phim có thể hướng sự chú ý của họ đến các khu vực của cảnh mà họ quan tâm dựa trên mức độ hiểu câu chuyện của cá nhân họ, có thể khác với những người khác. Ví dụ: khi bạn cùng người yêu của mình ngồi trên ghế dài để xem phim và cùng xem ở giữa phim, mặc dù cả hai đều đang xem cùng một bộ phim, nhưng cách hiểu của bạn có thể khác với người ấy, ít nhất là ở thời điểm đầu. Liệu sự khác biệt về hiểu biết đó có tạo ra sự khác biệt trong cách nhìn của mỗi người không? Có rất nhiều bằng chứng cho thấy khi mọi người nhìn bóng đá sốo các bức tranh, họ hướng sự chú ý của mình dựa trên nhiệm vụ họ thực hiện (Yarbus, 1967; DeAngelus & Pelz, 2009) và khi họ đọc (Rayner, 1998), họ hướng sự chú ý của mình dựa trên sự hiểu biết về văn bản. Tuy nhiên, khả năng hiểu hướng dẫn sự chú ý trong phim có thể rất khác so với hướng dẫn sự chú ý khi xem tranh và trong khi đọc. Đáng chú ý nhất là chất lượng phim được thúc đẩy bởi kích thích tạo ra sự đồng bộ chú ý giữa những người xem khác nhau có thể khiến người xem ít điều khiển chuyển động của mắt dựa trên khả năng hiểu của họ.
Dự án nghiên cứu
Hai dự án trong phòng thí nghiệm nhận thức thị giác đã kiểm tra mối quan hệ giữa chuyển động của mắt và khả năng bóng đá số trong phim tường thuật (Loschky, Larson, Magliano, & Smith, 2015; Hutson, Smith, Magliano, & Loschky, 2017).
A bài giảng được ghi video tại Đại học Kyotomô tả cả hai nghiên cứu này.
Các giả thuyết cạnh tranh được thử nghiệm bóng đá số các thử nghiệm này là:
Giả thuyết mô bóng đá số tư duy: Quá trình từ trên xuống (liên quan đến việc bóng đá số) sẽ hướng dẫn sự chú ý của người xem, tạo ra sự đồng bộ chú ý thấp giữa những người xem có cách bóng đá số khác nhau về câu chuyện.
Sự chuyên chế của giả thuyết bóng đá số: Các tính năng từ dưới lên sẽ hướng sự chú ý và loại bỏ mọi khác biệt dựa trên mức độ bóng đá số giữa người xem.
Trong cả hai nghiên cứu, bước đầu tiên để kiểm tra các giả thuyết là thao túng khả năng bóng đá số của người tham gia về bộ phim họ đang xem. Việc này được thực hiện bằng cách sử dụngnhảy bóng đá sốo giữamô hình. Mô hình này sử dụng trải nghiệm phổ biến khi xem phim sau khi phim đã bắt đầu, chẳng hạn như khi đang xem TV và gặp khó khăn trong việc hiểu phim trong bóng đá sối giây hoặc phút đầu tiên. đặc biệt là so với người đã xem phim ngay từ đầu. Đối với các thí nghiệm được trình bày dưới đây, có hai điều kiện:Điều kiện ngữ cảnhnơi khán giả xem toàn bộ clip bóng đá số vàĐiều kiện không có ngữ cảnhnơi người xem không nhìn thấy phần đầu của đoạn phim. Trong cả hai nghiên cứu, đều có một loạt biện pháp đo lường mức độ bóng đá số bao gồm đưa ra suy luận mang tính dự đoán ở cuối clip và việc theo dõi bằng mắt được sử dụng để kiểm tra xem liệu sự khác biệt về mức độ bóng đá số có thay đổi khi người tham gia nhìn hay không.
bóng đá sốNghiên cứu 1, đoạn bóng đá số dài 6 cảnh trong bóng đá số James BondMoonraker(được mô tả bên dưới) đã được sử dụng (Loschky và cộng sự, 2015). Hình vẽ cho thấy nhân vật Jaws rơi trong không khí và cố gắng mở chiếc dù của mình (Cảnh 1), nhận ra rằng nó sẽ không triển khai (Cảnh 2-3) và một bóng đá sối cảnh quay lều xiếc (Cảnh 4 và 6), trong đó Jaws vỗ tay cố gắng bay bóng đá sốo giữa chúng (Ảnh 5). Trong điều kiện Bối cảnh, người tham gia đã xem 3 phút dẫn đến chuỗi sáu cảnh quay quan trọng bên dưới, trong khi ở Không có bối cảnh, họ chỉ thấy chuỗi sáu cảnh quay.
bóng đá sốNghiên cứu 2 (Hutson và cộng sự, 2017) cảnh quay liên tục dài ba phút (tức là không chỉnh sửa) từ cảnh mở đầu bóng đá số Orson Welles'Cảm giác bóng đá số cái ácđã được sử dụng (được mô tả bên dưới). Đoạn clip bắt đầu bằng cận cảnh một quả bom sau đó được đặt trong ô tô. Sau khi quả bom được đặt trong xe và kẻ thủ ác bỏ chạy, một cặp vợ chồng không hề hay biết về quả bom đã lên xe và bắt đầu lái xe xuống những con phố đông đúc ra bóng đá sốo nơi nổ súng. Nửa đoạn clip, một cặp đôi đi dạo được giới thiệu là nhân vật chính mới khi máy quay bắt đầu theo dõi họ. Đến cuối clip, cặp đôi đi bộ và cặp đôi ngồi trên ô tô đến trạm kiểm soát biên giới. Sau một thời gian ở trạm kiểm soát, cặp đôi đi bộ đi qua, đoạn clip kết thúc khi cặp đôi đi bộ hôn nhau cận cảnh. Hai bộ thử nghiệm đã được thực hiện cho clip Touch of Evil. Điều kiện Không có ngữ cảnh cho Bộ thí nghiệm 1 bắt đầu ngay sau khi quả bom được đặt trong ô tô, khi cặp đôi bước lên ô tô. Trong Tập 2, nhóm Không có bối cảnh bắt đầu xem phim trong khi cặp đôi đang đi dạo trên màn hình nhưng chiếc xe lại ở ngoài màn hình. Do đó, trong Bộ 1, kiến thức về quả bom đã bị thao túng, còn trong Bộ 2, kiến thức về quả bom và các nhân vật chính được cho là (cặp đôi trong ô tô hoặc cặp đôi đi dạo) đã bị thao túng.
Nhìn chung, trong cả hai nghiên cứu, những người tham gia đều cho thấy sự khác biệt lớn về khả năng hiểu do mô hình nhảy bóng đá sốo giữa và được đo lường dựa trên khả năng đưa ra suy luận mang tính dự đoán ở cuối clip. Trong thí nghiệm James Bond, những người tham gia trong điều kiện Bối cảnh có nhiều khả năng suy luận hơn về việc nhân vật rơi xuống lều. Trong thí nghiệm Touch of Evil, những người tham gia có nhiều khả năng suy luận rằng quả bom sẽ phát nổ. Tuy nhiên, trong hầu hết các thí nghiệm được tiến hành, những khác biệt về khả năng hiểu này không ảnh hưởng đến chuyển động của mắt. Chỉ ở những thời điểm cụ thể trong mỗi clip, người ta mới tìm thấy những khác biệt nhỏ trong chuyển động của mắt. Sự thiếu hiệu quả này khi đối mặt với sự khác biệt lớn về nhận thức như vậy đã được mệnh danh là sự chuyên chế của điện ảnh (Loschky, Larson, Magliano, & Smith, 2015).
Nghiên cứu này cho thấy sức mạnh của sự đồng bộ chú ý và sự chuyên chế của phim gần như có thể loại bỏ sự khác biệt của từng cá nhân trong chuyển động của mắt và sự chú ý do sự khác biệt trong cách hiểu phim. Tuy nhiên, một số biến thể tinh tế trong chuyển động của mắt vẫn có thể bộc lộ sự khác biệt giữa người xem tùy thuộc bóng đá sốo mức độ hiểu biết của họ về bộ phim. Chúng tôi đang tiến hành nghiên cứu sâu hơn để hiểu mối quan hệ giữa khả năng kiểm soát sự chú ý với nhận thức và hiểu phim.
Công việc trong tương lai trong lĩnh vực này sẽ tiếp tục kiểm tra khả năng hiểu vai trò trong việc hướng dẫn chuyển động của mắt trong các câu chuyện bằng hình ảnh bằng cách sử dụng các câu chuyện bằng hình ảnh và các video khác để mở rộng kiến thức của chúng ta trong lĩnh vực nghiên cứu cơ bản này, kiểm tra vai trò của các quy trình từ trên xuống trong việc hướng dẫn sự chú ý bằng thị giác. Để nhấn mạnh bóng đá sốo tính ứng dụng hơn, công việc này cũng có thể được mở rộng sang lĩnh vực giáo dục, nơi việc hiểu là mục tiêu và video cũng như đồ họa thường được sử dụng để hỗ trợ việc hiểu.
Nếu bạn quan tâm, bạn có thể tìm thấy tài liệu chi tiết hơn về nghiên cứu này bóng đá số các liên kết ở cuối trang này tới các bài báo và thuyết trình hội nghị.
Video buổi nói chuyệnbóng đá số Nghiên cứu 2được đưa ra tại Hội nghị châu Âu về chuyển động bóng đá số mắt (ECEM) năm 2015tại đây.
bóng đá số tường thuật bằng hình ảnh: Vẽ các suy luận bắc cầu
Làm cách nào để chúng ta hiểu các câu chuyện bằng hình ảnh, chẳng hạn như phim, truyện tranh, truyện tranh hoặc các câu chuyện bằng hình ảnh khác? Một phần thú vị của câu đố liên quan đến cách chúng ta rút ra những suy luận bắc cầu để lấp đầy những khoảng trống trong một câu chuyện bằng hình ảnh. Ví dụ: nếu bạn nhìn bóng đá sốo những hình ảnh từ câu chuyện tranh dành cho trẻ em dưới đây (từ cuốn sách "Ếch, bạn ở đâu?") của Mercer Mayer, bạn sẽ không gặp vấn đề gì trong việc hiểu các sự kiện được miêu tả trong đó. Tuy nhiên, trong một phiên bản, nó hiển thị ba hình ảnh, hiển thị trạng thái bắt đầu, sự kiện bắc cầu và trạng thái kết thúc, trong khi ở phiên bản khác, nó chỉ hiển thị hai trong số các hình ảnh--thiếu sự kiện bắc cầu:
Trong phiên bản sự kiện bắc cầu bị thiếu, bạn phải suy luận rằng cậu bé bị vấp ngã. Điều đó giúp giải thích điều gì đã xảy ra trong hình ảnh ở trạng thái cuối, cụ thể là cậu bé bị ngã xuống ao. Đây dường như là một suy luận rất đơn giản và khi xem các câu chuyện bằng hình ảnh, chúng ta luôn làm điều này mà không cần suy nghĩ về nó. Nhưng nghiên cứu cho thấy rằng việc đưa ra những suy luận bắc cầu như vậy đòi hỏi trí nhớ làm việc tốt. Ví dụ: nếu bạn không mong đợi cậu bé sẽ rơi xuống nước sau khi nhìn thấy cậu bé chạy xuống đồi trong hình ảnh trước đó, thì khi bạn nhìn thấy cậu bé đầu trong nước và chân trên không, bạn cần giải thích điều đó để duy trì sự bóng đá số biết mạch lạc về câu chuyện. Để giải thích điều đó, giả sử bạn cần phải nhớ rằng trong hình ảnh trước, cậu bé đang chạy xuống đồi (từ trí nhớ ngắn hạn) và truy xuất thông tin liên quan từ trí nhớ dài hạn về mối liên hệ giữa việc chạy xuống đồi và té ngã--ví dụ như bị vấp ngã. Các quá trình này được cho là sẽ xảy ra trong bộ nhớ làm việc. Nếu vậy thì loại trí nhớ làm việc nào liên quan đến việc tạo ra những suy luận như vậy trong khi bóng đá số các câu chuyện bằng hình ảnh? Đó có phải là trí nhớ làm việc trực quan không gian (vì phương tiện của câu chuyện có bản chất là hình ảnh và không gian) hay trí nhớ làm việc bằng lời nói (vì nó là một câu chuyện, giống như ngôn ngữ, bao gồm thông tin được sắp xếp theo thứ tự), hay là sự kết hợp của cả hai? Trong một nghiên cứu gần đây (Magliano, Larson, Higgs & Loschky, 2015), chúng tôi đã điều tra những câu hỏi này. Kết quả bóng đá số chúng tôi cho thấy rằng cả trí nhớ thị giác không gian và ngôn ngữ đều có liên quan, nhưng quá trình xử lý giọng nói phụ (kể lại câu chuyện bằng lời nói trong đầu bạn) thì không. Để biết thêm chi tiết, hãy xemMagliano, Larson, Higgs và Loschky (2015).
Chúng tôi cũng đã nghiên cứu cách chuyển động mắt bóng đá số người xem giúp họ tạo ra các suy luận bắc cầu trong khi đọc truyện bằng tranh (Hutson, Magliano & Loschky, 2018). Chúng tôi nhận thấy rằng khi người xem cần đưa ra những suy luận bắc cầu như vậy, họ sẽ nhìn bóng đá sốo bức tranh lâu hơn. Hơn nữa, bằng cách sử dụng tính năng theo dõi bằng mắt, chúng tôi nhận thấy rằng lý do khiến họ nhìn lâu hơn là vì người xem chú ý nhiều hơn khoảng 20% trong thời gian đó. Chúng tôi đưa ra giả thuyết rằng điều này là do họ cần thêm thông tin để đưa ra suy luận bắc cầu. Nếu vậy, thì chúng tôi sẽ hỏi liệu những thông tin cố định bổ sung đó có được gửi đến các phần của bức tranh mang lại thông tin đặc biệt để đưa ra suy luận hay không. Để trả lời câu hỏi đó, chúng tôi đã yêu cầu một nhóm người xem khác nhấp bóng đá sốo các khu vực của hình ảnh mục tiêu mà họ cho rằng sẽ giúp ai đó đưa ra những suy luận bắc cầu đó. Chúng tôi nhận thấy rằng những người xem cần đưa ra suy luận bắc cầu có nhiều khả năng xem xét những lĩnh vực được xác định là giúp đưa ra suy luận bắc cầu. Vì vậy, điều này cho thấy rằng khi người xem đọc một câu chuyện bằng tranh, sự hiểu biết của họ về câu chuyện theo từng thời điểm sẽ hướng dẫn họ nhìn bóng đá sốo đâu.
Cuối cùng, tất cả các nghiên cứu này về khả năng nhận thức và bóng đá số câu chuyện bằng hình ảnh được thực hiện để kiểm tra các giả thuyết doLý thuyết bóng đá số cảnh và bóng đá số sự kiện (SPECT). Nếu bạn muốn biết về lý thuyết đó, chúng tôi có hai bài viết mô tả nó (Loschky, Larson, Smith và Magliano, 2020; Loschky, Hutson, Smith, Smith và Magliano, 2018).
Ấn phẩm liên quan [Tên học sinh hiện tại hoặc cựu học sinh in nghiêng]
Bài thuyết trình tại hội nghị liên quan [Tên học sinh in nghiêng]
Hutson, J., Smith, T., Magliano, J., & Loschky, L. (2016, tháng 7). Điều gì hướng dẫn chuyển động của mắt trong phim? Sự khác biệt trong tác động của sự bóng đá số biết và thao tác nhiệm vụ. Áp phích được trình bày tại cuộc họp hai năm một lần của Hiệp hội Nghiên cứu Thực nghiệm Văn học (IGEL), Chicago, IL.
Hutson, J.,Smith, T., Magliano, J. P.,Heidebrecht, G., Hinkel, T., Tang, J.-L.,& Loschky, L.C. (2015, tháng 6). Sự phân ly chung về chuyển động của mắt và khả năng bóng đá số trong tác phẩm “Touch of Evil” của Orson Welles: Vai trò của bối cảnh và nhân vật chính trong việc xem phim tường thuật. Áp phích được trình bày tại cuộc họp thường niên của Hiệp hội nghiên cứu nhận thức về hình ảnh chuyển động, London, Vương quốc Anh.
Loschky, L. C., Smith, T., Magliano, J. P., (2015, tháng 6). Một khuôn khổ tích hợp cho nhận thức và bóng đá số tường thuật trực quan. Bài nói chuyện được trình bày tại cuộc họp thường niên của Hiệp hội nghiên cứu nhận thức về hình ảnh chuyển động, London, Vương quốc Anh.
Magliano, J. P., Larson, A. M.,Higgs, K., & Loschky, L. C.(2015, tháng 5).Tạo các suy luận bắc cầu trong khi xem tường thuật bằng hình ảnh. Áp phích được trình bày tại Hội nghị thường niên bóng đá số Hiệp hội Khoa học Thị giác, St. Pete Beach, FL.
Hutson, J.,Smith, T., Magliano, J., & Loschky, L. C. (2014, tháng 11). Điều gì thúc đẩy chuyển động của mắt khi xem phim tường thuật? Vai trò của kích thích phim so với khả năng bóng đá số ở cấp độ cao hơn. Áp phích được trình bày tại Hội nghị thường niên năm 2014 của Hiệp hội Tâm lý học, Long Beach, CA.
Loschky, L. C.,Hutson, J., Magliano, J. P., Larson, A. M., & Smith, T. (2014, tháng 6). Giải thích Mối quan hệ bóng đá số/chú ý về phim với Lý thuyết nhận thức cảnh và bóng đá số sự kiện (SPECT). Bài nói chuyện được trình bày tại cuộc họp thường niên của Hiệp hội nghiên cứu nhận thức về hình ảnh chuyển động, Lancaster, PA.
Hutson, J.,Smith, T., Magliano, J., & Loschky, L. C. (2014, tháng 6). Sự chuyên chế của phim: Tìm bóng đá số mối quan hệ giữa chuyển động của mắt/sự bóng đá số biết trong “Touch of Evil” của Orson Welles. Áp phích được trình bày tại cuộc họp thường niên của Hiệp hội nghiên cứu nhận thức về hình ảnh chuyển động, Lancaster, PA.
Loschky, L.C., Larson, A.M., Magliano, J.P., & Smith, T.J. (2013, tháng 11) Jaws sẽ làm gì? Điều tra các chuyển động của mắt và mối quan hệ bóng đá số phim. Bài nói chuyện được trình bày tại Hội nghị thường niên năm 2013 của Hiệp hội Tâm lý học, Toronto, Canada.
