Development of a more powerful unspecified 2-AFC method using variants of constant-reference duo-trio methods

Abstract

차이식별검사의 제품간 차이는 발전된 측정 방법인 Signal Detection Theory와 Thurstonian model에 근거하여 d' 이라는 지표로 나타낼 수 있다. 올바른 결과를 도출하기 위해서는 평가원이 사용한 인지 결정 전략에 적합한 분석모델을 사용해야 하며, 이를 위해 평가원의 인지 결정 전략에 대한 이해가 필요하다. 소비자들은 훈련 받지 않은 평가원이기 때문에 상황에 따라 인지 결정 전략을 다르게 사용할 수 있으므로, 소비자들이 보다 안정적이고 효과적으로 진행할 수 있도록 검사방법의 표준화가 필요하다. 이전 연구들에 의하면, 일반적인 일-이점 검사(duo-trio test with balanced-reference)는 ‘거리 비교 전략’(comparison of distance; COD)을 사용하는 것으로 연구되었다. 하지만, 고정된 하나의 시료를 사용한 고정시료 일-이점 검사(duo-trio with constant-reference)는 보다 효율적인 2-AFC 전략을 사용 할 수 있다는 것이 연구되었다. 이러한 연구들은 훈련된 평가원들에 대한 결과였지만, 종합적 사점 한벌 검사(unspecified tetrad test)와 같은 비교 반복 시음 친숙화를 통해, 소비자 평가원 또한 2-AFC 전략을 사용할 수 있다고 밝혀졌다. 이것은 적절한 친숙화 과정을 실시하고 검사를 진행 했을 때, 일-이점 검사가 2-AFC만큼 효율적인 방법으로 사용될 수 있음을 보여준다. 따라서, 본 연구에서는 훈련 받지 않은 소비자를 대상으로 정확하고 안정적이고 효율적인 차이식별 검사를 진행 할 수 있도록 고정 기준시료 일-이점 검사(DTF와 DTFM)를 사용하여 2-AFC 전략을 사용할 수 있는 검사방법을 개발하고자 하였다. 실험에는 친숙화, 세션 디자인 그리고 실험 설명을 달리한 다섯 가지 일-이점 검사를 사용하였다. 본 연구에서는 네 종류의 아이스 티가 실험에 사용되었으며, 세 개의 검사시료와 하나의 고정 기준시료로 사용되었다. 263명의 소비자 평가원이 참여했으며, 실험은 pre-test와 main-test로 나누어 진행되었다. pre-test에서는 모든 평가원이 일반적인 일-이점 검사를 실시하였고, 이 결과를 바탕으로 검사 예민도가 동일한 다섯 그룹으로 나뉘었다. 그리고 일주일 후, main-test에서 각 그룹은 친숙화와 세션 디자인을 달리한 다섯 평가방법 중 한가지를 실시하였다. 평가 결과는 Signal Detection Theory와 Thurstonian model에 근거하여 d' 지표로 나타냈다. 대조 군으로 사용된 pre-test는 일반적으로 거리 비교 전략(COD)을 사용하므로, duo-trio 모델을 적용하여 분석하였다. 그리고, main-test의 다섯 평가방법은 거리 비교 전략(COD) 또는 보다 효율적인 전략(2-AFC strategy)을 사용하는지 확인하기 위해, duo-trio 모델과 2-AFC 모델을 사용하여 분석하였고, 대조 군의 결과와 비교하였다. 연구 결과, 특성 사점 한벌 검사(specified tetrad test)를 친숙화로 실시 한 후 일-이점검사(DTF)를 실시한 검사법과 기준시료를 두 번 먹는 친숙화를 실시 한 후, 두 기준시료-중간 일-이점검사(DTFM)를 실시한 평가방법에서 가장 효과적으로 2-AFC 전략을 사용하는 것으로 밝혀졌다. 본 연구를 통해, 많은 훈련과정 없이 일시적인 친숙화 과정만으로 효율적으로 사용할 수 있는 고정 기준시료 일-이점 검사(duo-trio with constant-reference) 방법이 표준화되었다. 이것은 제시 순서에 의한 편견(bias)의 영향이 적어, 널리 사용되는 삼점검사(triangle)나 사점 한 벌 검사(tetrad)를 대체하는 검사법으로 산업체에서 소비자대상 차이식별검사로 사용한다면, 보다 효율적인 방법으로 실시할 수 있을 것이다.;In the context of signal detection theory (SDT) and Thurstonian analysis, it has been possible in the food industry to make various business decisions such as reformulations and cost reductions based on the degree of consumer sensory discriminability by using both equivalence and difference testing. To achieve more efficient decision-making, it is important to investigate a theoretically and operationally more powerful consumer discrimination test method. In signal detection theory/Thurstonian modelling, cognitive decision strategies used for discrimination tests largely determine relative test power and thus are of theoretical and practical significance. The duo-trio test, using a constant-ref., is procedurally equivalent to the 2-AFC with reminder (2-AFCR) test for which either the powerful 2-AFC β/τ-strategy or the equally powerful 2-AFCR τ-strategy are possible. Although previously the constant-ref. duo-trio design showed operational superiority to other unspecified test methods, the ‘comparison of distance’ (COD) strategy which is conventionally assumed for the duo-trio, lacks theorized power. This showed that a familiarization procedure preceding the duo-trio test, that uses comparative repeated tastings of the samples to be discriminated (as in the tetrad test), can act to enhance the unspecified duo-trio test making this test as powerful as the specified 2-AFC test. The goal of this study was to investigate test procedures using a constant-ref. scheme that enable untrained/naïve subjects to use a 2-AFC strategy for the duo-trio with a reference presented first (DTF) as well as DTFM. The tested variables included two versions of duo-trio design, different familiarizations, instructions and experimental session designs. Three different iced tea samples were discriminated from a reference by 263 untrained/naïve subjects using 5 different duo-trio test procedures. Results showed that untrained/naïve subjects were able to perform the duo-trio with the reference presented twice, first and middle (DTFM) as a 2-AFC procedure, even with multiple pairs in a block design, after only two reference tastings. The duo-trio preceded by specified tetrad tests also showed potential as another efficient two-sequence test design. These results suggest that such constant-ref. duo-trio protocols using a 2-AFC strategy can be an alternative to the unspecified triangle and tetrad test.