网络图像检索提问式调整行为研究.docx

网络图像检索提问式调整行为研究 摘要：通过网络图像检索实验，采集用户进行图像搜索任务时的提问式及其变化序列，并进行小规模实证通过内容编码和统计分析发现：①图像检索提问调整绝大多数与内容调整有关，缩检、扩检、平移和跟随系统相关搜索词是发生最频繁的四类主要提问调整行为，用户在图像检索时表现出从宽泛检索入手，逐步缩小范围的行为趋向；②就图像提问调整模式而言，有四种基本模式和四种混合模式，各有特点；③网络图像检索的演进性偏于一种自演进，而现有图像检索系统对交互式演进的支持明显不足参考文献7关键词：图像检索，提问式，检索需求，用户行为1 引言网络信息搜索过程是一个重复迭代的过程，虽然用户竭力选择合适的检索提问词，但未必能够获得理想结果在网络图像检索情境中，由于图像理解和表达的模糊性和多维性，图像检索需求表达的障碍可能更大，发生在图像检索过程中提问式的调整则更为频繁针对检索过程中提问式的调整和变换行为开展研究，有助于揭示图像检索需求表达的行为特征，探索图像检索过程的演进机制，发现图像检索的行为模式或规律基于此，本文设计了网络图像检索的用户实验来探索图像检索提问调整中的行为模式和相关规律具体做法是：随机征集30名日常生活中有网络图像检索体验的大学生作为被试，专业分布广泛；在某大学的网络实验室环境下，要求被试完成三个不同类型的网络图像检索任务，不限定搜索任务完成时间，搜索过程利用“屏幕录像专家”软件录制成视频[1]。

实验开始前，进行10分钟关于视频软件使用的培训；研究人员帮助并确保每个被试正确设置了相应技术参数和保存路径；清空IE浏览器的历史记录和收藏夹，以避免受前一位搜索者行为的影响实验结束后，对被试进行问卷调查和访谈访谈主要是针对完成任务特别快(小于5分钟)和特别慢(大于15分钟)的两类被试，访谈问题是“您为什么选择提问式”最终通过人工对视频样本逐一进行内容采集，共采集到88个行为样本中的图像检索提问式648个，同时记录下这些检索提问式的时间先后次序及各时间点数据分析阶段主要是提问式编码和统计分析为了降低提问式编码的主观误差，研究者基于统一的编码框架，隔了一个月后对所有提问式调整行为样本又进行了一次编码，对照两次编码结果，对不一致的编码进行必要的重新分析，并对编码框架进行了必要的合并和调整，提高编码的一致性和客观性统计分析主要采用描述性统计和基于案例的归纳实验后问卷调查的数据将用于后续研究中关于网络图像检索行为影响因素的分析，本文暂未触及2 图像检索提问式调整的分析框架国内外相关研究给出了一些关于信息搜索提问调整分析的框架案例：Jrgensen等分析图像搜索的提问式调整时，重点考察了三类调整行为[2]：增加提问词、减少提问词、改变提问词。

改变提问词包括诸多情况，如转移到相关提问词、单复数改变、反义词调整、顺序调整等Rieh和Xie在以Excite搜索引擎2000年9月搜索日志为数据样本分析提问式调整模式时，提出了关于文本检索提问式调整行为分析的三大类九小类分析框架[3]三大类分为：内容类调整、格式类调整和资源类调整其中内容类调整包括：缩检、扩检、同义词替换、平移四个子类；格式类调整包括术语调整、操作符运用、错误纠正三个子类；资源类调整包括资源类型限定和网站域名限定两个子类Yoon在关于图像检索不同阶段提问式调整规律的研究中[4]，借鉴了Rieh和Xie的分析框架，将图像搜索提问式的调整行为分为两大类：内容类和格式类内容类的子类又分为缩检、扩检、同义词替换、增加同义词、平移、要求额外结果、中断、重复使用已用过的提问式等8个子类我国学者赖茂生等在分析网络用户的文本查询与点击行为时[5]，数据分析过程中一共识别出7种调整提问式的方法：改换检索工具、句法调整、扩检、缩检、点击提示词、新检索、修改与调整其中涉及检索工具调整1种、句法调整1种和语义调整5种借鉴文本检索提问式研究的经验，并结合图像搜索过程自身的特点，我们共识别出三大类12个子类的图像提问式调整类型，并进行相应编码(见表1)。

表1 图像检索提问式调整类型调整类别子类编码示例内容调整缩检，提问式改变的效果缩小了检索结果的范围方式有增加提问词，或者用内涵更窄的词来替换S老虎 华南虎运动 体育运动扩检，提问式改变的效果扩大了检索结果的范围方式有减少提问词，或者用内涵更宽泛的词来替换G两只老虎 老虎一樽还酹江月 江月同义词替换，用同义词替换先前的词Y老虎打架 老虎打斗平移，提问式有明显调整，含义上没有缩小或扩大，调整前后的提问词含义上有部分重叠，或反映不同侧面，或在不同提问要素之间平移也可以是明显不同的新检索P老虎打架 老虎嬉戏老虎 打斗 老虎 草原 排球 海报 排球 手绘画中断恢复，在并行多页面搜索中，回到先前搜索界面时提问式继续翻页方式有切换检索窗口，或采用“后退”按钮回到原来检索界面I月亮 月光(新搜索页面)月亮(回到原页面)老虎 两只老虎 老虎(点“后退”按钮返回)内容调整重复先前提问，输入或点击先前尝试过的提问词U跟随系统相关搜索词，点击搜索结果页面底部的相关搜索词R月色 月色朦胧(系统相关词)语法和句法调整术语调整，改变提问式的句法格式，包括更换缩写、大小写、副词增删、介词增删、前后位置调整、中英文互换等。

T老虎 tiger人与球 人 球兄弟 虎 虎 兄弟使用操作符，使用AND/OR/NOT，“+”、“-”，空格，或者用“”来限定O兄弟虎 兄弟 虎资源范围调整更换检索入口重复检索，尝试某个提问式未果之后，换一个检索工具或用已使用过的提问式重复搜索E文件格式调整，对文件格式和尺寸大小等提出要求F念奴娇 赤壁怀古 ppt背景图图像范围限定，调整图像来源，或指定网站，或限定图像所在领域，如新闻图片、广告图片等D虎 虎 新闻图片对同一个提问式调整样本进行分析时，不排除同时编码为两种及以上的调整类型如，用户重复点击“可爱小老虎”的系统提示的相关搜索词，第一次行为编码为“跟随系统相关搜索词”，第二次则同时编码为“跟随系统相关搜索词”和“重复先前提问”两种类型再如，“老虎打架”“老虎嬉戏”，同时编码为“平移”和“术语调整”，因为其中涉及空格的增加另外，用户先后在不同检索入口采用相同的提问式进行查询，该类调整行为将同时编码为“更换检索工具重新检索”和“重复先前提问”两种类型3 图像检索提问式调整类型分布每个图像搜索过程排除初始提问式之外，共观测到提问式的调整行为560个，构成图像提问式调整模式分析的基础样本集。

不考虑系统相关搜索词的外部介入作用，实验共识别提问式调整类型610频次(有些调整行为同时编码为2—3个类型)3.1 图像检索提问式调整类型分布我们考察图像提问式调整行为中各种调整类型发生的可能性(见表2)，其中95.9%的调整都与内容调整有关；7.2%的调整与资源范围的改变有关；语法和格式类调整发生的可能性为6.1%与已有研究相比，结论有差异Yoon &Chung在考察图像查寻不同阶段提问调整类型时认为[4]，内容调整占80%，而格式类调整占20%，其中用户会不断使用操作符来调整提问方向；而Jrgensen等针对图像提问调整的研究也发现[2]，用户会不断使用NOT或AND运算符来缩小搜索结果列表可见，中文网络图像检索中，语法和格式调整所占比例要小得多，而用户对图像检索提问的调整更倾向于检索词本身的内容调整与Rieh & Xie关于文本搜索提问式调整的研究结果进行比较[3]，可以发现，在图像搜索过程中内容调整占据更大比例(95.9%：80.3%)，而语法和句法类调整的比例很少(6.1%：14.4%)，资源范围调整的比例更大一些(7.2%：2.8%)这些差异可能是由图像资源搜索本身的特点决定的。

首先，语法与句法类调整可能更适合文本，而不适合图像；图像理解和表达与一般的语法和句法并不密切相关；其次，用户图像需求的表达应该侧重在图像内容要素上；再次，图像库的选择、图像领域范围的限定对于图像搜索而言是可以尝试的策略之一对于各个子类在同类中的分布，在内容调整中，缩检的比例最大(35.1%)，而扩检和平移也经常性发生，上述三类调整是最主要的内容调整形式此外，用户还较多地选择“跟随系统相关搜索词”在语法和句法调整中，术语调整的比例要远高于操作符调整在资源范围调整中，更换检索入口(数据库)进行重新检索占据较大比例(60%)，其次是对文件格式的要求和限定，对图像所在领域和网站范围的要求并不多见表2 图像搜索提问式调整类型分布调整类别子类频次同类中百分比(%)内容调整(95.9%)缩检S18835.1扩检G12623.5同义词替换Y224.1平移P10519.6中断恢复I50.9重复先前提问U275.0跟随系统相关搜索词R6311.8合计536100语法和句法调整(6.1%)术语调整T2367.6使用操作符01132.4合计34100资源范围调整(7.2%)更换检索入口重复检索E2460.0文件格式调整F1025.0图像范围限定D615.0合计40100N=5603.2 四类主要提问式调整行为缩检、扩检、平移、跟随系统相关搜索词是发生较频繁的四类主要的提问式调整行为。

首先，缩检比扩检的比例要高很多，表明在图像搜索过程中，用户从宽泛提问不断缩小检索范围的行为模式更突出一些其次，提问式的平移变换发生较频繁，可能的原因在于对图像理解的多面性，图像呈现给用户是多个不同侧面，因此，发生在图像要素之间的平移非常有必要往往是在不同图像要素之间平移，如由对象平移到事件，由事件平移至地点环境，由形状平移至颜色等，如“老虎打斗”平移至“老虎草原”这一点在Yoon等的研究结论中也有体现，用户在搜索过程中，使用更多的内容平移策略和运用操作符来不断调整搜索方向[4]最后，有一定比例的调整行为属于用户的跟随性行为，用户会选择跟随系统提供的相关搜索词继续搜索3.3 系统相关搜索的反作用力我们认为，用户在搜索结果不理想的情况下，倾向于点击搜索结果页面下方的相关搜索词，而这明显会打断用户提问式构造和调整的正常行为模式系统提供的相关搜索词作为一种外部介入力量，可能会彻底改变用户图像搜索的方向为了考量系统提供的相关搜索词在用户提问式调整中的外部干预作用和方向，我们对涉及相关搜索词的提问式调整行为进行了专门分析对63个点击系统相关搜索词的提问式调整样本进行二次编码，结果显示：其中32个引导提问式“扩检”；22个引导提问式“缩检”；7个引导提问式“平移”；引导术语调整和同义词替换各1个。

根据我们的研究结果，现有图像搜索引擎在相关搜索词的引导上在三大基本类别的分布上是合理的，但是，在对“缩检”和“扩检”的支持方向上似乎与用户行为习惯有所背离(根据3.2研究结果，行为过程中缩检模式更为突出一些)，系统相关搜索功能可能存在一定的反作用力，这会在一定程度上中断用户正常的检索逻辑，干扰用户尝试提问式的方向，使搜索进程忽左忽右，方向摇摆，加大茫然和盲目程度4 图像检索提问式调整的行为模式分析图像检索过程中提问式调整的行为动作及其变换序列，同样可以归纳出提问式调整的行为模式，反映图像检索过程的状态转移规律Yoon和Chung在研究不同检索阶段用户如何调整他们的检索提问时[4]，除了考察图像查寻五个阶段提问式所属类别的分布规律之外，还归纳出了图像检索提问。