Nutch2.1+solr3.6.1+mysql5.6问题
1.Nutch2.1问题
1.1
问题:导入完成后,Nutch2.1里面runtime仍旧不能运行,出现jobfailed等错误。
解决:runtime里的nutch调试过程和导入Eclipse差不多,都是在调试配置文件。将Eclipse里能运行的nutch的配置文件,特别是nutch-default.xml,nutch-site.xml,gora.properties替换runtime/local/conf里的文件。
如果仍有错误,打开nutch-default.xml,找到plugin.folders属性项,修改默认value为runtime/local/plugins,可以用绝对路径。绝对路径仍旧有错,用相对路径;相对路径有错,再改到绝对路径。
用相对路径时,注意./表示文件(nutch-default.xml)所在包(conf)的平级路径,此处的相对路径也就是./plugins。
1.2
问题:nutch在抓取数据时提示,“skiped,content xxxx truncated to xxxx”,并且没有插入数据库新的数据。
解决:找到nutch-default.xml属性parser.skip.truncated修改为fasle。
1.3
问题:大面积出现Skipping http://auto.163.com/chemi/; different batch id (null)这样的提示
解决:sb,我还没找到解决办法,就被你贴到网上了。
1.4
问题:很多数据并没有放入数据库webpage中
解决:打开nutch-default.xml文件,找到file.content.limit属性,修改一个更大的值,比如可以修改为67108864;找到http.content.limit属性,修改一个更大的值。使更多的数据能够插入到数据库。
2.solrwenti
2.1
3.mysql问题
3.1
问题:网上创建数据库时,找不到my.cnf
解决:root权限下/etc/mysql/my.cnf
3.2
问题:创建数据库时,加入my.cnf的[mysqld]参数后系统不能启动或识别
解决:确保输入的参数没有拼写错误。仍旧有错误的话查看mysql版本,5.6版本以下的话就不用修改my.cnf了。
3.3
最新文章
- PowerShell实现批量重命名文件
- 小结一下前段时间做的rpgdemo
- Android课程---课下练习(表格、线性和相对布局)
- [iOS翻译]《iOS 7 Programming Cookbook》:iOS文件与文件夹管理(下)
- Java基础之写文件——缓冲区中的多条记录(PrimesToFile3)
- [Arduino] 逗号分隔文本到数组的两种方法
- cpoint
- Oracle 常用操作
- linux常用查看硬件设备信息命令(转载)
- xcode5下一个ffmpeg静态库配置
- 【转】Install Oracle Jdbc driver in your Maven local repository
- GitHub使用指导
- android 学习笔记(1)
- JSP内置对象值out对象及其它的一些常见方法
- Linux下MySQL编码的修改
- WPF中修改DataGrid单元格值并保存
- azkaban---visualize crontab--frontail
- The hyperlink for cell A2 references relation rId1, but that didn't exist!
- Java使用Redis学习笔记
- 对常用软件的评价(TGP腾讯游戏平台)