Hadoop初试

         Hadoop一个分布式系统基础架构,是Apache基金下的一个子项目。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDF[……]

Read more

图文介绍Cygwin的安装过程

cygwin是一个在windows平台上运行的unix/linux模拟环境,主要用于学习unix/linux操作环境,或者从unix/linux到windows的应用程序的移植、测试等。
本人是在windows系统中模拟搭建Hadoop的环境时用到的,在此图文详细介绍下Cygwin的基本安装过程,主要包括两大步:
•Cygwin的基本安装
•系统环境变量的设置[……]

Read more

继续阅读 »

Linux(Centos)配置OpenSSH无密码登陆

最近在搭建Hadoop环境需要设置无密码登陆,所谓无密码登陆其实是指通过证书认证的方式登陆,使用一种被称为”公私钥”认证的方式来进行ssh登录。

公私钥“认证方式简单的解释:首先在客户端上创建一对公私钥 (公钥文件:~/.ssh/id_rsa.pub; 私钥文件:~/.ssh/id_rsa)[……]

Read more

陷到马里亚纳海沟了

心情↓↓↓到马里亚纳海沟了 👿

mark一记

VirtualBox安装Ubuntu图文介绍

实验环境:
•Windows Vista
•VirtualBox 4.0.0
•Ubuntu 10.10

图文介绍安装过程如下:

基本每一步都有截图,在必要的图片上做了相关备注,特别是在磁盘分区的地方做了详细的注释,一看就会[……]

Read more

继续阅读 »

Ubuntu下Firefox安装jre插件

系统环境:ubuntu10.10 、firefox3.6.10

JDK的安装路径:/opt/jdk1.6.0_20 下面以<JDK dir>表示

有关JDK或者JRE的安装这里就不再具体讲述了,不会的可以搜索下有很多这方面的文章。

这次还是按照以前的方法给Ubuntu下[……]

Read more

java.sql.SQLException: 对只转发结果集的无效操作

错误代码如下:

产生原因:

异常出现于移动结果集的指针时,原因是在生成statement对象的时候提供的参数不同,无参数的那个方法使用的是默认参数,statement执行后得到的结果集类型为 ResultSet.TYPE_F[……]

Read more

MySQL之JDBC批量操作

最近项目中需要周期性解析文本数据并把相关数据插入到MySQL数据库中,文本数据大概每小时12个,每个文件大概200M,解析后每个文件的入库数据量大概在30W左右,1小时大概360W数据。

为了提高大量数据的入库效率于是想到了批处理,可是在实际测试过程中发现用批量操作后入库的效率并没有什么明显[……]

Read more

分布式事务JTA之实践:Spring+ATOMIKOS

本文的目录结构如下:

  • 一、概述
  • 二、应用场景
  • 三、实验模拟需求
  • 四、实例测试环境
  • 五、源代码下载及配置介绍
  • 六、测试验证

一、概述:

本文主要讲述如何基于Atomikos 和spring在项目中实现分布式事务管理

二、应用场景:

如果项目中的数据源[……]

Read more

第 22 页,共 31 页« 最新...10...2021222324...30...最旧 »