一个普通的搜索服务该怎么做?

2019-11-28 17:36:48 +08:00
 vjnjc

今天面试被问到一道题目,回来想了半天也没思路,求拍醒

问题: 假设你平时用 IDE 进行编码,IDE 会在启动的时候做一些索引。然后你整个项目搜索“String”会迅速定位到多个包含 String 关键字的代码。 请问由你来做这个功能,怎么才能让搜索执行效率高?

2009 次点击
所在节点    问与答
12 条回复
lhx2008
2019-11-28 17:41:08 +08:00
索引之后肯定是 O(logn) 以下了,所以是问怎么建立索引?
vjnjc
2019-11-28 17:44:14 +08:00
@lhx2008 嗯应该是问怎么建索引。
我一个粗糙的考虑是用 dictionary,比如“String” -> [“file1”, "file2", "file3"...], “Str” -> [“file1”, "file2", "file3"...], “S” -> [“file1”, "file2", "file3"...],这样的话查起来方便,但是空间效率利用太低了吧。。。
vjnjc
2019-11-28 17:46:45 +08:00
@lhx2008 还有一个 followup,火星文该怎么匹配?比如搜索我,能找到“涐”。这个就更加没有头绪了。。。
optional
2019-11-28 17:47:34 +08:00
无索引搜索可能问的是 BM 算法, 有索引问的应该是分词之后倒排索引。
lhx2008
2019-11-28 17:47:53 +08:00
@vjnjc 你这个示例,用一个前缀树做 key 的结构就行啊,而且 s 这种单词有没有搜索的价值。至于怎么解析代码就很复杂了。
jenschen
2019-11-28 17:48:54 +08:00
b+树吧
lhx2008
2019-11-28 17:49:12 +08:00
同意楼上,可能考的是只是字符串搜索
vjnjc
2019-11-28 18:00:01 +08:00
@optional 多谢指点迷津
vjnjc
2019-11-28 18:01:33 +08:00
@lhx2008 多谢。
这应该是个开放性题目,看我知识广度,感觉回答出 4#说的 2 种之一就好了,然而我都没看到过 0 0,说实话前缀树在做算法的时候自己还用过,忘得一干二净了
Vegetable
2019-11-28 18:02:12 +08:00
这场景怪怪的,ide 真的会做这个事情吗?
66450146
2019-11-28 18:50:53 +08:00
这个最合适的还是参考 Language Server Protocol ( https://microsoft.github.io/language-server-protocol/overview)

从这里倒推具体 language server 的实现,其实就是一个 tokeniser,生成 AST ( https://en.wikipedia.org/wiki/Abstract_syntax_tree) 分析就行了,大部分都是这么做的

字符串匹配不是不行,但是效果要差很多,对于关键字很多的语言更麻烦
vjnjc
2019-11-28 20:01:28 +08:00
@66450146 多谢神乃木,又有新线索了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/624048

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX