《分享一个Nutch入门学习的资料》的相关内容
相关讨论
大家来聊聊nutch
我搜索了javaeye只看到一个帖子:http://www.javaeye.com/topic/20247.也没听说国内有产品在使用,不敢贸然的引用到项目中.
谁有这方面的经验,来给大家补补.
by xxj 2006-09-21 浏览 (1544) 回复 (4) 关键字:
如何学习nutch的源代码
最近一个项目是要搜索信息的。Java刚好有个开源搜索框架Nutch,最新版本是0.9,但是我没有这方面的相关知识,下载了源代码后部署了一下,一直跑不了。网上参考资料也不多。。。在这种情况下,我把src弄到eclipse后进行学习,可是面对那么多的源文件,真是看得头大。大家有什么好的学习方法,借鉴一下。谢谢
by spitcold 2008-02-28 浏览 (285) 回复 (2) 关键字:
nutch爬行中的depth(层数,深度?)
一直搞不清楚nutch中的depth是什么意思,就照着字面意思理解,认为是指html文件所在文件夹的相对于网站的深度。今天做了个小实验,证明并不是这样,下面来看看
先在Tomcat里面建一个示例网站Test,网站根目录下建四个网页index.html, a.thml, b.html, c.html.建一个文件夹1,内有1.html,在文件夹1中建文件夹2,建2.html。它们的链接关系:inde ...
by javaeyes 2006-11-27 浏览 (1820) 回复 (2) 关键字:
Heritrix使用的初步总结
一、框架介绍
公司最近项目要用到全文检索,检索对象是一些网站的网页内容,要使用到网络爬虫工具。
目前技术选型对象主要有两个:Heritrix 和 Nutch。二者均为Java开源框架,Heritrix 是 SourceForge上的开源产品,Nutch为Apache的一个子项目,它们都称作网络爬虫/蜘 ...
by jason823 2007-05-29 浏览 (5397) 回复 (6) 关键字:
相关博客
Nutch 完整安装文档
Nutch 安装文档
安装Cygwin
首先,我们去http://www-inst.eecs.berkeley.edu/~instcd/iso/下载到Cygwin软件的ISO文件,用Daemon软件将其设为虚拟光驱后,双击其中的Setup文件,出现程序安装的向导界面(如图1所示)。
&n ...
by lizhengfa 2007-10-18 浏览 (995) 回复 (0) 关键字:
Nutch 笔记(一):Quick Start
最近用到了nutch,目的是针对指定的一些网站抓取其内容,然后做分析用。
nutch 笔记是我使用nutch过程一系列总结,写下自己的学习经过和大家一起分享,也希望能得到大家的指点
好了,废话少说,言归正传,第一篇:Quick Start,我们的目标是快速的能跑起来,能检索出我们想要的结果。
首先要明白nutch是什么?
nutch是一个基于lucene的开源搜索引擎,它包括了所有你想要的东西 ...
by xxj 2006-10-13 浏览 (6664) 回复 (4) 关键字: nutch
搜索引擎Nutch 0.7.2 试用笔记
在Google里面搜索了一些Nutch的资料,还真不多。今天画了两个小时搞了一通,把一些心得纪录下来。我的jdk 是1.5.x ,Tomcat是5.0.x1 下载0.7.2 版本的包:里面已经包含了war文件,所以不需要Ant编译了2 安装Cygwin,这个没什么好说的。3 把Nutch借压缩到D:/nutch4 在D:/nutch下面建立一个文件 urls (没有后缀)h ...
by ww2 2006-05-12 浏览 (21) 回复 (0) 关键字:
常上的网站
官方网站
oracle http://www.oracle.com/index.html
水晶报表 http://www.businessobjects.com/
sun官方java中国站点 ...
by primer_2004 2007-09-19 浏览 (179) 回复 (0) 关键字:
Nutch 0.8笔记--Google式的搜索引擎实现
作者:江南白衣 Nutch是一个基于Lucene,类似Google的完整网络搜索引擎解决方案,基于Hadoop的分布式处理模型保证了系统的性能,类似Eclipse的插件机制保证了系统的可客户化,而且很容易集成到自己的应用之中。 Nutch 0.8 完全使用Hadoop重写了骨干代 ...
by 江南白衣 2006-08-09 浏览 (428) 回复 (0) 关键字:
相关圈子讨论
来,排队自报家门,统计下
我,习惯id:J.L, 现在居于上海, 工作:专职搜索。空余时间: lucene推广和宣传,搜索技术商业方案(不包括与现在公司竞争的企业)。2007年的方向: 深度挖掘数据(大规模搜索平台), 广度挖掘商机(商业顾问)。
2005年接触lucene,2006年正式接触lucene。
下面同学排好队哦。
by imjl 2007-06-21 浏览 (4305) 回复 (42)
谁能帮忙介绍下nutch与一些中文分词的结合(如庖丁解牛)
网上是有,可是都是抄来抄去,自己动手试了几下总是失败,debug了2天了也没结果...
谁对与nutch结合中文分词了解的指点一下!!谢谢啊 我目前都是按照网上的插件方式尝试.
还有那个solr不知道怎么使用,我就把jsp页面显示出来,但是不知道怎么使用,谁能结束下,或给点资料!!
by chllcy 2008-04-05 浏览 (468) 回复 (0)
nutch中分布式文件系统介绍
NDFS:在一系列机器上存储庞大的面向流的文件,包含多机的存储冗余和负载均衡。
文件以块为单位存储在NDFS的离散机器上,提供一个传统的input/output流接口用于文件读写。
块的查找以及数据在网络上传输等细节由NDFS自动完成,对用户是透明的。而且NDFS能很好地处理
用于存储的机器序列,能方便地添加和删除一台机器。当某台机器不可用时,NDFS自动的保证文件
的可用性。只要 ...
by dogstar 2008-05-29 浏览 (183) 回复 (0)
[公告]新手版改为入门版,希望大家多贡献一些入门内容,帮助初学者成长
新手版改为入门版,希望大家多贡献一些入门内容,帮助初学者成长
比如这两个帖子就很好:
我整理的Ruby on Rails教程 和Ruby&Rails 入门大全,对新手很有用
台灣的 線上影音免費 JAVA 教學
大家如果很熟悉一方面的技术,可以在这里把一些入门内容,教程,资源与初学者分享,形成互相帮助的良好气氛。
希望入门版不要成一个单纯的简单提问版。应该成为一个入门知识 ...
by JavaEye管理员 2006-12-07 浏览 (1495) 回复 (6)
相关新闻
开源项目发布-eRedPMIS
1.引言
Java桌面应用一直都以门槛高、开发成本昂贵、对客户机性能要求高等因素而在国内桌面应用领域仅仅占有很小的市场分额。而且由于资源的匮乏,也加大了程序员学习Swing的难度和成本。为使后来者能够尽快入门,本人特将最近一段时间学习swing桌面编程的一些收获与大家分享。并希望对Swing桌面有兴趣的朋友能够加入到这个项目中来,最终封装出一个支持Swing桌面编程的基础平台或者说是提供一个能满足 ...
by JaNer 2007-10-23 浏览 (703) 回复 (3) 关键字: Swing desktop
《CSS实战手册》中文版发布
10年前,当我在记事本中一点一滴地书写着HTML、JavaScript、CSS并保存,然后在浏览器里预览自己的杰作时,感觉这是那么神奇、有趣!
10年后的今天,当Web 2.0的概念已经遍地开花结果时,从1996年提出的CSS 1,到即将出现的CSS 3,我们难免不联想到Web 3.0的蠢蠢欲动了。
没有CSS的手册,人们常常不知道从哪里入手学习CSS。好的CSS点子甚至可以胜过经验 ...
by YuLimin 2007-10-24 浏览 (2981) 回复 (7) 关键字: CSS Hack Bug
《应用Rails进行敏捷Web开发》中文版书评
毫无疑问,ruby on rails这个号称开发速度10倍于Java的快速web开发框架是2005年2006年连续两年web应用开发领域最大的奇迹。自从2004年7月ruby on rails第一个版本发布以来,ruby on rails以令人惊讶的速度迅速征服了web应用开发领域,在2006年3月毫无悬念的获得了第16届Jolt大奖的web开发工具奖项;rails的作者DHH(David Hei ...
by robbin 2006-11-10 浏览 (623) 回复 (0) 关键字: rails
推荐知识库条目
Comming soon

