信息检索综合课程设计-课程介绍课件

Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,*,*,Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,中科院研究生院2011年度秋季课程,*,信息检索综合课程设计,课程介绍,主讲人：李正华,苏州大学计算机学院,2016,年,2,月,29,日,主要参考陈文亮老师课件,信息检索综合课程设计课程介绍主讲人：李正华主要参考陈文亮老,自我介绍,姓名：,李正华,电子邮件：,个人主页：,http:/ “男士西服,”,世纪佳缘网的例子：,对象“女朋友”！,18,三个应用例子的共同特征给定需求(或者是对象)，从信息库中找出,信息检索的一些官方定义,给定用户需求，返回满足该需求的信息的一门学科。通常涉及信息的获取、存储、组织和访问。,从大规模非结构化数据的集合中找出满足用户信息需求的资料的过程。,非结构化数据通常指文本,什么是结构化数据？（提问）,19,信息检索的一些官方定义给定用户需求，返回满足该需求的信息的一,本课程的,内容,主要关注面向文本数据,几部分内容：,爬虫（,Crawler,），得到网页（,wget,可以递归爬取静态网页,html,）,网页正文提取（,html,文件的处理），得到文档,中文分词,文档存储（倒排；快速查询）,用户,query,分词,检索：找到相关文档,相关文档简单排序,20,本课程的内容主要关注面向文本数据20,本课程不涉及,内容,非文本数据,Query,深度分析和扩展,网页链接分析（,PageRank,）等复杂排序方法,.,.,21,本课程不涉及内容非文本数据21,22,完整的搜索系统示意图,22,22完整的搜索系统示意图22,信息检索技术的应用,23,搜索,推荐,挖掘,IR,技术,情报处理,内容安全,舆情分析,信息检索技术的应用23搜索推荐挖掘 IR技术情报处理内容安,信息检索应用系统,搜索系统,Web,搜索引擎,IBM Waston,问答系统,推荐系统,淘宝网,豆瓣网,当当网,24,信息检索应用系统搜索系统24,从信息规模上分类,个人信息检索：个人相关信息的组织、整理、搜索等。桌面搜索,(Desktop Search),、个人信息管理,(PIM=Personal Information Management),、个人数字记忆,(Personal Digital Memory),企业级信息检索：在企业内容文档的组织、管理、搜索等。内容管理,(Content Management),Web,信息检索：在超大规模数据集上的检索。,25,从信息规模上分类个人信息检索：个人相关信息的组织、整理、搜索,提纲,中科院研究生院,2011,年度秋季课程,26,什么是信息检索？,为什么要学习信息检索？,课程情况,提纲中科院研究生院2011年度秋季课程26什么是信息检索？,直接经济效益,-,能赚钱啊！,世界级牛公司,很多互联网的公司：,Google,baidu,高市值公司,软件工程师,年薪高,直接经济效益-能赚钱啊！世界级牛公司,市场发展的需求,用户需要信息检索技术：互联网的信息量太大、噪音太多，寻找所需要的信息非常不容易,公司需要信息检索技术：搜索引擎改变了很多传统的生活方式，,Yahoo,、,Google,、,Baidu,，还有一些公司如,Microsoft,、,Sina,、,Sohu,、,Tecent,、,Netease,都加入到这个搜索技术的竞争。不只是搜索引擎才需要信息检索技术，电子商务,(,如亚马逊网站、阿里巴巴,),、社交网,(,微博、,Facebook,、,twitter,、校内网,),、数字图书馆、大规模数据分析等都需要信息检索技术,人才的竞争：搜索相关人才人数出现缺口，他们非常抢手，待遇如日中天,是不是泡沫：,2000,年左右出现的网络泡沫和现在的互联网有什么不同，搜索引擎在其中占什么位置？,28,市场发展的需求用户需要信息检索技术：互联网的信息量太大、噪音,几个应用需求,移动搜索,产品搜索,专利搜索,广告推荐,消费行为分析,网络评论分析,SEO,营销,29,几个应用需求移动搜索29,对相关专业学生的基本要求,信息检索技术是内容应用特别是互联网内容应用的核心技术，可以说在这些应用中无处不在,信息检索将会成为一门计算机专业的基础学科,搜索,(,狭义的信息检索,),的三个层次,30,对相关专业学生的基本要求信息检索技术是内容应用特别是互联网内,中科院研究生院,2011,年度秋季课程,31,应用层次：搜索是一项非常重要的应用！,中科院研究生院2011年度秋季课程31应用层次：搜索是一项非,中科院研究生院,2011,年度秋季课程,32,中间层次：搜索是极其重要的,API,中科院研究生院2011年度秋季课程32中间层次：搜索是极其重,中科院研究生院,2011,年度秋季课程,33,www.G,中科院研究生院2011年度秋季课程33www.Googlef,中科院研究生院,2011,年度秋季课程,34,介绍一本有趣的书！,中科院研究生院2011年度秋季课程34介绍一本有趣的书！,中科院研究生院,2011,年度秋季课程,35,核心层次：搜索是未来操作系统的重要组成部分！,中科院研究生院2011年度秋季课程35核心层次：搜索是未来操,Q&A,有什么问题？,Q&A有什么问题？,