当前位置:380元网站建设 虎网站 > 建站知识 > 正文

关于搜索引擎中文搜索的研究

发布日期:2010-02-08

  目前的主要搜索引擎的模式都是,用户输入一些关键字或者句子,无论是那种,搜索引擎都会首先对用户的输入进行分词,这样可以增加搜索结果的准确性,这是和普通数据库搜索的不同点,然后搜索引擎去海量的索引库去查找这些和用户输入相关的信息,显示的结果会包含网页的相关摘要。

  中文搜索引擎相关的技术包含:中文分词、网络蜘蛛、索引库、网页摘要的提取、网页相似度、信息的分类。

  1、中文分词

  中文分词一直是中文搜索引擎的关键点,中文不同英文,英文每个单词是用空格分开,而中文一个句子往往是一些词的连结,没有分割符,人可以很容易的看懂句子的意思,但是计算机很难开懂。

  目前我了解的中文分词方法,几乎都是有自己的中文词典,分词时去词典匹配,达到分词目的,分词的好坏,和词典关系很大。

  2、网络蜘蛛

  网络蛛蛛是指对浩瀚网络抓取信息的程序,他们往往是多线程,不分昼夜的抓取网络信息,同时要防止对某个站点抓取过快,导致信息提供方服务器过载。

  网络蜘蛛的基本原理:先从一个起始页面开始抓取,获取此页面内容,摘要,然后提取页面所有连接,蜘蛛接着抓取这些连接,一直源源不断的抓取。这些只是基本原理,实际应用要复杂很多,你可以试着自己写一个蜘蛛,我曾经用PHP写过。

  3、索引库

  搜索引擎都不会用已经成型的数据库系统,他们是自己开发的类似数据库功能的东西。

  搜索引擎需要保存大量网页信息,快照,关键字索引,所以数据量特别大。

  4、网页摘要的提取

  网页摘要是指对某个网页信息的总结,搜索引擎搜索结果里,往往会有网页标题下面,会有些介绍,让搜索者很容易的发现此文章是不是想要的信息。

  5、网页相似度

  网上经常有很多内容一样的网站,比如说同一条新闻,各大门户网站都会发布,它们的新闻内容都是一样的。还有一些个人网站,尤其是偷别人网站资料的网站,和别人网站搞的一模一样,这样的网站毫无意义,搜索引擎会自动区分,降低其权值。

  目前我研究的计算网页相似度的几种方法如下:

  1)根据网页摘要来比较,如果多个网页摘要的md5值一样,证明这些网页有很高的相似性。

  2)根据网页出现关键词,按照词频排序,可以取N个词频高的,如果md5值一样,证明这些网页有很高的相似性。

  6、信息的自动分类

  网络的信息实在是太庞大了,如何对其进行分类,是搜索引擎面临的难题。要让计算机对数据自动分类,先要对计算机程序进行培训。

 

网页设计分析怎样针对用户来展开

    网页设计从来都不是容易的事情,靠得住的网页一般需要借助对客户行为的深入分析,而后有针对的精心策划。可是随着新的技术和交互模式的不断涌现,事情就变成不是那么简单了,那么对于企业来说网页设计分析怎样针对用户来展开呢? 网页设计分析怎样针对用户来展开   每个企业对待产品的角度都是不同的,设计人员的偏重点要放在客户实际使用体验的角度上。设计人员应针对不同类型产品,梳理出对产品的分析。针对企业的业务流程,...

       郑州惠济江山冶金矿产跟虎网站签下网站建设条款 江山在郑州市惠济区南阳路154号。江山选用虎网站经济型入门级网站案例,其功能比较简单的程序,广告单图(无动漫),页面较简单,适合小微企业产品展示型网站。江山是经郑州市惠济区工商局审核的正规企业,统一社会信用代码:未知。   江山磨料有限公司成立于2013年。我们为客户提供磨料、磨具及耐磨材料的生产、销售及研发服务,包括棕刚玉,白刚玉,锆刚玉,单晶刚玉和碳化硅其系列产品作为机械、电子与信息、航空、航...

       为什么行业网站也需要做网站优化 很多人认为行业网站做网站优化没用,其实大错特错,行业网站的网站 关键词优化 是特别重要的,可以简单总结四个理由: 1、SEO让行业网站不会在将来因为当初没有SEO而损失惨重。 微信营销大量的大型网站在建站初期是没有优化的,包括中国的亚马逊(卓越网),而当他们做到那个程度竟没有优化,他们每年是按千万级在损失。喜欢在百度搜索产品的网民或许会知道百度每天为淘宝带去多少流量,现在是SEO的时代,没有经过...

       浅谈万网四次备案经历 现在做网站,估计最烦的就是备案了,很多朋友等不了的,就直接搞个国外空间和香港空间了,但是还是不稳定,到时候想换回国内空间的时候,很麻烦,所以我自己就选择了先备案,没有想到一备案备案了4次,前3次都没有成功,这次不知道会成功不,总之感觉就是管局一会一个政策,而且万网的工作人员本事对政策也了解的不是很清楚,下面徐国祥具体谈谈万网的备案流程和自己备案的经历,给需要备案的朋友一个参考:   一:万网备案流...

       电子商城商务网站建设与营销建议 随着网络的发展,电子商务行业更是在近一两年愈显朝气。对于电子商务网络商城站点的建设和营销,确实有很多中方法,除了一般性的网站推广方法之外,还有很多商城网站专属的推广方法可参考。    一、定位分析      网站剖析:对网站的自身进行解剖分析,目的是寻找到网站的基础问题所在,从而找到推广的方向;行业竞争分析:行业竞争的情况,行业网站的综合分析;网站发展计划分析:电子商务网站短期规划与长期发展战略的...

       东莞企石镇恒昊橡塑制品跟虎网科技签定网站建设事宜 恒昊选用虎网站定制型网站案例,此类网站主要是按客户要求和提供的风格案例或效果图纸来做,这种属于仿制和定制型网站,是根据功能开发的难易度来评估报价的,价格相对较高,适合于大中型企业和有个性风格、个性功能需求的客户选用。恒昊是经东莞市企石镇工商局审核的有资质公司,统一社会信用代码:914403006911627456。同时经国家工信部和广东省通信管理局审核通过ICP备案;备案号:粤ICP备130411...

最新模板
少儿英语培训机构网站建设 培训公司网站建设
成人自考网站建设 成人培训网站制作设计版面
智能家居摆设设计网站建设 智能家居装修企业网站建设
铜螺母,铜螺丝,螺栓,螺钉工厂网站建设
废气处理设备,如活性炭吸附箱、RTO蓄热式氧化处理设备、光氧等离子复合设备 低温等离子设备 光氧催化设备等网企业网站建设
图文阅读