碰到“登录出错”这样的描述,代码里未必写着这四个字。研究团队在 Python、Go 等六种语言中构建文件检索任务,预先登记了包含 91 个仓库的测试池,同时保留原始查询与整理过的查询。
将问题补充为可能出现的函数名或变量名后,关键词方法在该研究的各个 Python 测试池中达到了向量检索的水平。切块方式和如何判定测试文件相关也会改变排名。同一查询究竟适合哪个检索器,研究团队尚未找到可靠的提前判断办法。
举一个检索上的区别:如果问题已经附上罕见的函数名,逐字查找往往能迅速缩小范围。如果问题只说“导出后日期偏了一天”,库里相关代码却只出现时区缩写,搜索器要先跨过这道词汇差距。论文对不同查询的拆分,正好允许读者把这两种情况分别观察。
