
本文同时发表在我的博客(http://blog.jobmet.com/entry.php?u=doudou&e_id=1250),有引用者,劳驾注明出处
新的一年又来了,本想在新年瑞雪之际,写一篇自己对这一年的工作总结,想想这一年到底做出了什么东西,哪些东西得到了用户的肯定和好评,哪些还相差很远,离自己当初设定的目标有多远......等等。同时,最近的一段时间了,也收到很多业内朋友的邮件,一起探讨了很多关于垂直搜索的问题,包括搜索技术的问题。很多刚进入这个行业的学生和开发人员也发邮件,希望能告诉他们一些如何开发搜索的知识。正在着手写文章之际,突然来了一个黑色的10天的调试,我的系统就遇到了由于访问量和数据量等问题,导致部分访问有查空的情况产生。痛定思痛,实实在在又用了近10天的时间,检查所有的内存分配,终于把系统升级。此时的我实在是感觉爽快啊!!!好东西大家分享,现在把原来想写的工作总结换为另一个主题:到底什么样的垂直搜索才算一个好的搜索引擎,这也是我一直思考的问题,同时也是回答一些朋友的问题吧。由于才疏学浅,不对之处或者文中提及网站不好之处,还请各位仁兄多指点,多包涵:)。
我大概总结了几个方面,主要是垂直搜索的应用领域、搜索引擎内核的稳定性、搜索的速度、搜索的准确性、搜索的查全性、是否有排序、收录的数据量、信息抽取或者格式化的质量、搜索内核的容错性、搜索的智能性和搜索的人性化等11个指标。本文先来探讨前5个指标。
1. 领域。
这是一个垂直搜索引擎的立足之本。选择一个好的领域,可以说,对一个垂直搜索引擎已经成功了40%。所谓一个好的应用领域,一定是需求很明确的一个搜索领域,也就是说,关注这个领域的用户很多,而且这个领域在网上有很多网站提供信息或者数据,信息比较分散,地理位置分布比较分散。现在可以回头看看,像房地产、招聘、吃喝玩乐、B2B等领域就有这样的特点,可惜的是已经有很多巨头、小巨头和无名的小头都开始在这里面厮杀。要是能选择一个更好的领域,那就从开始就已经战胜了对手!
2. 稳定。
这是一个网络服务的基本要求。垂直搜索引擎和其他互联网服务产品,例如博客、论坛、viki等一样,都要求系统能24*365的方式来运行(至少也是20*365,留四个小时让喘口气,呵呵:),要保证自己的一个服务器上的系统能抗得住每天几十万到百万的访问量。不能三天两头down机,仅有的一点用户也被搞烦了。
3. 速度。
这个是搜索引擎的本质要求。这里需要特别说明一下,最近很多朋友问我,他们化十几万买了国内某家所谓专业搜索引擎提供商的产品,为什么我看了之后却说那不是专业搜索引擎提供商提供的。这里面有几个原因,首先,很多所谓的专业搜索引擎提供商都是软件产品,是做软件的人开发的为互联网服务的产品,对于软件开发商而言,他们追求系统的易用性,简单安装,简单配置等。他们根本不管或者是不理解互联网产品的需求特殊之处,特别是对于搜索引擎。软件开发商可以简单的用优化后的数据库检索,来给他们的软件产品提供检索,因为用户一旦购买他们的软件后就没有别的选择了,无论搜索一个关键词是用了1秒还是10秒,都只能坐在那里等,顶多出去抽袋烟或者涂个口红。没想到,对于互联网用户,他有太多的选择了,在你这里搜一下,1秒出不来结果,那就拜拜了,谁还在那里傻等!所以,我后来告诉那位朋友,你买的只是一个软件,并不是一个搜索引擎,国内的这种骗子太多了,就是搞个华丽的安装界面,来骗取这些辛辛苦苦想在互联网淘金的兄弟们的银子!擦亮眼睛吧!
4. 准确。
这个指标是基本上每个搜索提供商都能做到的,当然也有部分自己宣称为搜索引擎的网站(大多是基于数据库的),在浏览网页的时候明明是看到有这样的信息,可是就是在搜索里面搜不到,唉。。。悲哀啊!其中像新浪、chinahr、zhaopin.com这种巨头,拿着用户的钱做着最差的事情。
5. 查全。
这其实是信息检索(Information Retrieval:IR)和NLP(Natrual Language Processing:NLP)等研究领域经常用到的一个评测指标,也叫召回率(Recall),也就是说:recall=实际检索结果中的正确检索结果数/测试数据中正确的检索结果数,在信息检索中通常可以采用top10或者top100中的检索结果做测试。这个指标,用户通常感觉不出来,我在这里拿几个网站的例子,大家就能感觉到了。
例一:在香港上市的某网B2B网站的搜索:供应信息搜索,点击它提示的关键词“摄像机”,看到第一台摄像机的信息,然后再输入框输入“ccd镜头 专业彩色防雨摄像机”,搜索结果为空。
例二:广州的某ui的招聘垂直搜索:输入“高级快速流通消费品销售经理”搜索结果为空。
例三:位于北京的中国三大网络招聘门户之一(广告词:....上班去了):找工作搜索:输入“java系统架构师”,搜索结果为空。
例四:最后再看看大名鼎鼎的,同样旗下有某全球专业搜索引擎的某B2B网站的搜索,点击“暖气片”关键字,可以看到很多这样的产品,然后在输入框输入:“钢铝复合暖气片 挂装”,搜索结果确为空,但是有一家叫山东邦泰散热器有限公司(该网站上的编号为:35198326)的公司该冤死了,他们在巴巴上发布的产品就是这样的产品,每年交好几万的年费,却被人找不到。要是我是一个真的买家,估计这个公司的人看到这篇文章该吐血了。这样的例子太多了。。。。。大家看看性能到底如何,擦亮眼睛选择使用或者购买产品吧,辛辛苦苦搞点钱不容易,不能被人这么糊弄了!!!
今天到此为止,不能写得太过了:),只是技术探讨,希望各位不要当真!
有空光顾我的网站:)
作者联系方式:zhaojian513@gmail.com
- 没有评论
当前位置: 