micmiu - 软件开发+生活点滴

Nutch2.x RuntimeException Not a host:port pair

作者: Michael 日期: 2015 年 1 月 8 日 3 条评论 | 753 views

Nutch 2.2.1 编译安装后，执行 nutch inject 命令后报错信息如下：

 micmiu@micmiu-mbp: ~/tmp/nutch  $ nutch inject urls -crawlId micmiublog
InjectorJob: starting at 2014-12-31 14:13:19
InjectorJob: Injecting urlDir: urls
InjectorJob: org.apache.gora.util.GoraException: java.lang.RuntimeException: java.lang.IllegalArgumentException: Not a host:port pair: ?6460@micmiu-mbp.local192.168.1.100,62142,1420001742333
	at org.apache.gora.store.DataStoreFactory.createDataStore(DataStoreFactory.java:167)
	at org.apache.gora.store.DataStoreFactory.createDataStore(DataStoreFactory.java:135)
	at org.apache.nutch.storage.StorageUtils.createWebStore(StorageUtils.java:75)
	at org.apache.nutch.crawl.InjectorJob.run(InjectorJob.java:221)
	at org.apache.nutch.crawl.InjectorJob.inject(InjectorJob.java:251)
	at org.apache.nutch.crawl.InjectorJob.run(InjectorJob.java:273)
	at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)
	at org.apache.nutch.crawl.InjectorJob.main(InjectorJob.java:282)
Caused by: java.lang.RuntimeException: java.lang.IllegalArgumentException: Not a host:port pair: ?6460@micmiu-mbp.local192.168.1.100,62142,1420001742333
	at org.apache.gora.hbase.store.HBaseStore.initialize(HBaseStore.java:127)
	at org.apache.gora.store.DataStoreFactory.initializeDataStore(DataStoreFactory.java:102)
	at org.apache.gora.store.DataStoreFactory.createDataStore(DataStoreFactory.java:161)
	... 7 more
Caused by: java.lang.IllegalArgumentException: Not a host:port pair: ?6460@micmiu-mbp.local192.168.1.100,62142,1420001742333
	at org.apache.hadoop.hbase.HServerAddress.<init>(HServerAddress.java:60)
	at org.apache.hadoop.hbase.MasterAddressTracker.getMasterAddress(MasterAddressTracker.java:63)
	at org.apache.hadoop.hbase.client.HConnectionManager$HConnectionImplementation.getMaster(HConnectionManager.java:354)
	at org.apache.hadoop.hbase.client.HBaseAdmin.<init>(HBaseAdmin.java:94)
	at org.apache.gora.hbase.store.HBaseStore.initialize(HBaseStore.java:109)
	... 9 more

 micmiu@micmiu-mbp: ~/tmp/nutch  $ nutch inject urls -crawlId micmiublog

InjectorJob: starting at 2014-12-31 14:13:19

InjectorJob: Injecting urlDir: urls

InjectorJob: org.apache.gora.util.GoraException: java.lang.RuntimeException: java.lang.IllegalArgumentException: Not a host:port pair: ?6460@micmiu-mbp.local192.168.1.100,62142,1420001742333

at org.apache.gora.store.DataStoreFactory.createDataStore(DataStoreFactory.java:167)

at org.apache.gora.store.DataStoreFactory.createDataStore(DataStoreFactory.java:135)

at org.apache.nutch.storage.StorageUtils.createWebStore(StorageUtils.java:75)

at org.apache.nutch.crawl.InjectorJob.run(InjectorJob.java:221)

at org.apache.nutch.crawl.InjectorJob.inject(InjectorJob.java:251)

at org.apache.nutch.crawl.InjectorJob.run(InjectorJob.java:273)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)

at org.apache.nutch.crawl.InjectorJob.main(InjectorJob.java:282)

Caused by: java.lang.RuntimeException: java.lang.IllegalArgumentException: Not a host:port pair: ?6460@micmiu-mbp.local192.168.1.100,62142,1420001742333

at org.apache.gora.hbase.store.HBaseStore.initialize(HBaseStore.java:127)

at org.apache.gora.store.DataStoreFactory.initializeDataStore(DataStoreFactory.java:102)

at org.apache.gora.store.DataStoreFactory.createDataStore(DataStoreFactory.java:161)

... 7 more

Caused by: java.lang.IllegalArgumentException: Not a host:port pair: ?6460@micmiu-mbp.local192.168.1.100,62142,1420001742333

at org.apache.hadoop.hbase.HServerAddress.<init>(HServerAddress.java:60)

at org.apache.hadoop.hbase.MasterAddressTracker.getMasterAddress(MasterAddressTracker.java:63)

at org.apache.hadoop.hbase.client.HConnectionManager$HConnectionImplementation.getMaster(HConnectionManager.java:354)

at org.apache.hadoop.hbase.client.HBaseAdmin.<init>(HBaseAdmin.java:94)

at org.apache.gora.hbase.store.HBaseStore.initialize(HBaseStore.java:109)

... 9 more

一般这样的错误信息是由于 $NUTCH_HOME/lib/hbase-x.y.z.jar 的版本和当前环境中HBase的版本不一致造成的，只[……]

Nutch2.x 编译和安装配置

作者: Michael 日期: 2014 年 12 月 26 日没有评论 | 11,293 views

目录结构

介绍
编译配置
参考文章

[一]、介绍

Nutch 是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。
现在Nutch分为两个版本：1.x和2.x，这两个版本的主要区别在于底层的存储不同。1.x版本是基[……]

ERROR org.apache.hadoop.hbase.master.HMasterCommandLine: Failed to start master

作者: Michael 日期: 2014 年 12 月 25 日没有评论 | 1,783 views

HBase单机模式启动后，很快进程就结束了，日志中错误信息如下：

ERROR org.apache.hadoop.hbase.master.HMasterCommandLine: Failed to start master
java.lang.RuntimeException: Failed suppression of fs shutdown hook: Thread[Thread-30,5,main]
	at org.apache.hadoop.hbase.regionserver.ShutdownHook.suppressHdfsShutdownHook(ShutdownHook.java:196)
	at org.apache.hadoop.hbase.regionserver.ShutdownHook.install(ShutdownHook.java:83)
	at org.apache.hadoop.hbase.util.JVMClusterUtil.startup(JVMClusterUtil.java:191)
	at org.apache.hadoop.hbase.LocalHBaseCluster.startup(LocalHBaseCluster.java:420)
	at org.apache.hadoop.hbase.master.HMasterCommandLine.startMaster(HMasterCommandLine.java:149)
	at org.apache.hadoop.hbase.master.HMasterCommandLine.run(HMasterCommandLine.java:104)
	at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)
	at org.apache.hadoop.hbase.util.ServerCommandLine.doMain(ServerCommandLine.java:76)
	at org.apache.hadoop.hbase.master.HMaster.main(HMaster.java:2120)

ERROR org.apache.hadoop.hbase.master.HMasterCommandLine: Failed to start master

java.lang.RuntimeException: Failed suppression of fs shutdown hook: Thread[Thread-30,5,main]

at org.apache.hadoop.hbase.regionserver.ShutdownHook.suppressHdfsShutdownHook(ShutdownHook.java:196)

at org.apache.hadoop.hbase.regionserver.ShutdownHook.install(ShutdownHook.java:83)

at org.apache.hadoop.hbase.util.JVMClusterUtil.startup(JVMClusterUtil.java:191)

at org.apache.hadoop.hbase.LocalHBaseCluster.startup(LocalHBaseCluster.java:420)

at org.apache.hadoop.hbase.master.HMasterCommandLine.startMaster(HMasterCommandLine.java:149)

at org.apache.hadoop.hbase.master.HMasterCommandLine.run(HMasterCommandLine.java:104)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)

at org.apache.hadoop.hbase.util.ServerCommandLine.doMain(ServerCommandLine.java:76)

at org.apache.hadoop.hbase.master.HMaster.main(HMaster.java:2120)

环境参数：

Mac OSX 10.10.1
Java “1.6.0_65”
HBase 0.94.14 (Nutch 官方建议的版本)

问[……]

MarGo: Missing required environment variables: GOPATH

作者: Michael 日期: 2014 年 12 月 10 日没有评论 | 2,672 views

sublime 安装 gosublime 后启动出现错误信息： MarGo: Missing required environment variables: GOPATH

解决办法有两个：

第一种：在系统环境变量中添加 GOPATH的设置

以Mac OSX为例，编辑 $HOME/[……]

Go环境安装配置

作者: Michael 日期: 2014 年 12 月 9 日没有评论 | 549 views

[一]、实验环境

Mac OSX 10.10.1
go1.3.3.darwin-amd64-osx10.8.tar.gz ( 官网https://golang.org/dl/ 下载对应版本)

[二]、安装配置

1. 下载系统对应的软件包，并解压到 /usr/local/sha[……]

J2EE开发框架mvc-hazel

作者: Michael 日期: 2014 年 11 月 26 日没有评论 | 586 views

它是基于 micmiu-web-sh 修改成Maven多模块的构建模式，同时对项目代码进行了重构。这是一个整合了J2EE的主流技术的开发框架，方便快速搭建项目原型。Hazel是我妻子的英文名字，为了感谢她给我们生了一个萌萌的娃，故把这个框架命名为 mvc-hazel (^o^) 。

代码托[……]

[commons-attributes-api-2.2.jar]: Required extension [ant] not found.

作者: Michael 日期: 2014 年 11 月 25 日 1 条评论 | 1,532 views

web应用的war包部署到tomcat下面时有如下类似错误信息：

[commons-attributes-api-2.2.jar]: Required extension [ant] not found.

这个错误会导致项目启动失败，无法访问应用。这个问题出现的原因是commons-attrib[……]

Jetty部署web应用错误oejj.ObjectMBean

作者: Michael 日期: 2014 年 11 月 25 日没有评论 | 4,349 views

在Idea中Jetty部署web应用启动后有异常信息，详细错误信息如下：

2014-11-21 17:10:14.360:WARN:oejj.ObjectMBean:
java.lang.NoClassDefFoundError: org/eclipse/jetty/jmx/ObjectMBea[……]

Spring AOP拦截Struts1记录操作日志

作者: Michael 日期: 2014 年 7 月 3 日 2 条评论 | 1,569 views

前言
BeanNameAutoProxyCreator 自动代理实现
AOP标签之Aspect实现
继承DelegatingRequestProcessor （非AOP实现）

[一]、前言

一个N年前的SSH（Spring2.0.3+Struts1+Hiber[……]

Baby

作者: Hazel 日期: 2014 年 5 月 29 日 1 条评论 | 554 views

Day77

开始全职妈妈生涯，加油！

第 3 页，共 31 页«1 234 5...10 20 30...»最旧 »

micmiu – 软件开发+生活点滴

Nutch2.x RuntimeException Not a host:port pair

Nutch2.x 编译和安装配置

ERROR org.apache.hadoop.hbase.master.HMasterCommandLine: Failed to start master

MarGo: Missing required environment variables: GOPATH

Go环境安装配置

J2EE开发框架mvc-hazel

[commons-attributes-api-2.2.jar]: Required extension [ant] not found.

Jetty部署web应用错误oejj.ObjectMBean

Spring AOP拦截Struts1记录操作日志

Baby

近期文章

浏览

分类目录

文章归档

标签云(3D)

近期评论

技术链接

功能