faint hadoop

失误删除了服务器上的hadoop，不得不重新配置。

格式化后，说啥也启动不起来。

没办法，放弃自己diy后的hadoop版本，然后下载了最新的hadoop。

还是启动不起来。

记录一下全新配置hadoop的问题：

（1）更改conf下的hadoop-env.sh

export JAVA_HOME=

（2）core-site.xml

 

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
 
<!-- Put site-specific property overrides in this file. -->
 
<configuration>
        <property>
                <name>fs.default.name</name>
                <value>hdfs://cn50:9000</value>
        </property>
        <property>
                <name>hadoop.tmp.dir</name>
                <value>/workspace/xianmin/tmp</value>
        </property>
</configuration>

（3）hdfs-site.xml

 

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
 
<!-- Put site-specific property overrides in this file. -->
 
<configuration>
        <property>
                <name>dfs.replication</name>
                <value>1</value>
        </property>
        <property>
                <name>dfs.data.dir</name>
                <value>/workspace/xianmin/data</value>
        </property>
        <property>
                <name>dfs.name.dir</name>
                <value>/workspace/xianmin/name</value>
        </property>
</configuration>

（4）mapred-site.xml

 

?
1
2
3
4
5
6
7
8
9
10
11
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
 
<!-- Put site-specific property overrides in this file. -->
 
<configuration>
        <property>
                <name>mapred.job.tracker</name>
                <value>cn50:9001</value>
        </property>
</configuration>

注意这里一定要用cnxx，调试了两天的错误就是因为format的时候找不到host，fuck。

当然需要/etc/hosts要设定cnxx

（5）把hdfs-site.xml和mapred-site.xml复制到hdfs/conf和mapred/conf下

format 然后 启动

 

bug移除 Comments(1) 2011年3月24日 10:39

ubuntu 解压缩

.tar
解包：tar xvf FileName.tar
打包：tar cvf FileName.tar DirName
（注：tar是打包，不是压缩！）
---------------------------------------------
.gz
解压1：gunzip FileName.gz
解压2：gzip -d FileName.gz
压缩：gzip FileName
.tar.gz 和 .tgz
解压：tar zxvf FileName.tar.gz
压缩：tar zcvf FileName.tar.gz DirName
---------------------------------------------
.bz2
解压1：bzip2 -d FileName.bz2
解压2：bunzip2 FileName.bz2
压缩： bzip2 -z FileName
.tar.bz2
解压：tar jxvf FileName.tar.bz2
压缩：tar jcvf FileName.tar.bz2 DirName
---------------------------------------------
.bz
解压1：bzip2 -d FileName.bz
解压2：bunzip2 FileName.bz
压缩：未知
.tar.bz
解压：tar jxvf FileName.tar.bz
压缩：未知
---------------------------------------------
.Z
解压：uncompress FileName.Z
压缩：compress FileName
.tar.Z
解压：tar Zxvf FileName.tar.Z
压缩：tar Zcvf FileName.tar.Z DirName
---------------------------------------------
.zip
解压：unzip FileName.zip
压缩：zip FileName.zip DirName
---------------------------------------------
.rar
解压：rar x FileName.rar
压缩：rar a FileName.rar DirName

rar请到：http://www.rarsoft.com/download.htm 下载！
解压后请将rar_static拷贝到/usr/bin目录（其他由$PATH环境变量指定的目录也可以）：
[root@www2 tmp]# cp rar_static /usr/bin/rar
---------------------------------------------
.lha
解压：lha -e FileName.lha
压缩：lha -a FileName.lha FileName

lha请到：http://www.infor.kanazawa-it.ac.jp/~ishii/lhaunix/下载！
>解压后请将lha拷贝到/usr/bin目录（其他由$PATH环境变量指定的目录也可以）：
[root@www2 tmp]# cp lha /usr/bin/
---------------------------------------------
.rpm
解包：rpm2cpio FileName.rpm | cpio -div
---------------------------------------------
.deb
解包：ar p FileName.deb data.tar.gz | tar zxf -
---------------------------------------------
.tar .tgz .tar.gz .tar.Z .tar.bz .tar.bz2 .zip .cpio .rpm .deb .slp .arj .rar .ace .lha .lzh .lzx .lzs .arc .sda .sfx .lnx .zoo .cab .kar .cpt .pit .sit .sea
解压：sEx x FileName.*
压缩：sEx a FileName.* FileName

sEx只是调用相关程序，本身并无压缩、解压功能，请注意！
sEx请到： http://sourceforge.net/projects/sex下载！
解压后请将sEx拷贝到/usr/bin目录（其他由$PATH环境变量指定的目录也可以）：
[root@www2 tmp]# cp sEx /usr/bin/

相关配置 Comments(1) 2011年3月23日 16:43

monet+xquery in ubuntu 10.04

Create a file /etc/apt/sources.list.d/monetdb.list with the following contents (replacing "karmic" as needed with "lenny", "lucid" or "maverick"):

deb http://dev.monetdb.org/downloads/deb/ karmic monetdb
deb-src http://dev.monetdb.org/downloads/deb/ karmic monetdb

ubuntu 10.04: use "lucid" to replace "karmic"

wget --output-document=- http://dev.monetdb.org/downloads/MonetDB-GPG-KEY | apt-key add -

sudo apt-get update

sudo apt-get install monetdb-xquery monetdb-client

sudo usermod -a -G monetdb $USER

使用：

启动server：Mserver --dbinit="module(pathfinder);"
启动clinet：mclient -lx

 

相关配置 Comments(1) 2011年3月23日 08:29

hadoop safe mode

让Hadoop不处在safe mode 模式下，只要在Hadoop的目录下输入：

bin/hadoop dfsadmin -safemode leave 

bug移除 Comments(0) 2011年3月22日 14:46

bibentry的用法

网上找到bibentry的用法，无外乎\usepackage, \nobibliography*, \nobibliography{}等用法。

但是把我的tex文件用上bibentry时总是有错误，原始文件如下：

 

?
codes with faults
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
\documentclass[11pt,twocolumn,a4paper]{article}
 
\usepackage{CJK}
\usepackage{xspace}
 
\usepackage{bibentry}
\usepackage{natbib}
 
\usepackage[dvipdfm,  %pdflatex,pdftex    这里决定运行文件的方式不同
            pdfstartview=FitH,
            CJKbookmarks=true,
            bookmarksnumbered=true,
            bookmarksopen=true,
            colorlinks, %注释掉此项则交叉引用为彩色边框(将colorlinks和pdfborder同时注释掉)
            pdfborder=001,   %注释掉此项则交叉引用为彩色边框
            linkcolor=blue,
            anchorcolor=blue,
            citecolor=blue,
            pagebackref
            ]{hyperref}
 
\usepackage{epsfig}
\usepackage{amssymb}
\usepackage{amsmath}
\usepackage{amsfonts}
 
\nobibliography*
 
\begin{document}
 
\begin{CJK*}{GBK}{kai}
\author{}
\title{LSH的下界}
\maketitle
 
\input{lsh}
 
\begin{abstract}
给定一个测度空间$(X,d_X)$，$c\geq{1}$，$r>0$，并且$p,q\in{[0,1]}$，一个从$X$到$\mathbb{N}$
上的mapping的分布$\mapH$$:X\rightarrow{\mathbb{N}}$被称为一个$(r,cr,p,q)-sensitive$的hash
函数族，如果(1)对于$X$中的两个距离至多是$r$的点，$\mapH$把他们映射为相同值
的概率至少是$p$，(2)而对于距离大于$cr$的两个点，$\mapH$把他们映射为相同值
的概率至多是$q$。这个概念在1996年被Indyk和Motwani引进作为一个高效的最近
邻搜索的算法的基础。算法的性能被一个参数$\rho=\frac{\log(1/p)}{\log(1/q)}$
控制，构造具有更小的$\rho$就会很自然地提供更好的nearest neighbor的算法。
本文中，我们证明对于$X=l_1$，基本上想做到$\rho\leq{\frac{1}{2c}}$。这个结构
几乎已经match了Indyk和Motwani给出的上界$\rho\leq{\frac{1}{c}}$。
\end{abstract}
 
 
\clearpage
\end{CJK*}
 
\bibliographystyle{plainnat}
{\small
\bibliography{BibDataQuality}
}
 
\end{document}

编译:latex, bibtex, latex, latex

总是出错：

例如： latex error: Command \BR@bibitem already defined.

       \par <insert text>

最后发现是hyperref的问题，改为下列就好了

 

?
right codes
1
2
3
4
5
6
7
8
9
10
11
12
\usepackage[dvipdfm,  %pdflatex,pdftex    这里决定运行文件的方式不同
            pdfstartview=FitH,
            CJKbookmarks=true,
            bookmarksnumbered=true,
            bookmarksopen=true,
            colorlinks, %注释掉此项则交叉引用为彩色边框(将colorlinks和pdfborder同时注释掉)
            pdfborder=001,   %注释掉此项则交叉引用为彩色边框
            linkcolor=blue,
            anchorcolor=blue,
            citecolor=blue,
            %pagebackref
            ]{hyperref}

 

bug移除 Comments(13) 2011年3月21日 13:02

latex-公式例子-加粗-括号

\documentclass{article}

\pagestyle{empty}
\setcounter{page}{6}
\setlength\textwidth{87.0pt}

% Special setting to make delimiters always grow in this example
\setlength\delimitershortfall{-3pt}

\usepackage{bm}
\begin{document}

\begin{equation}
  a^2+\mathbf{b^2}=c^2
\end{equation}
$\bm{\Biggl\lbrace\biggl\lbrace\Bigl\lbrace\bigl\lbrace \lbrace
     \mathcal{Q}
     \rangle \bigr\rangle\Bigr\rangle\biggr\rangle\Biggr\rangle}$
\mathversion{bold}
\begin{equation}
  a^2+b^2=c^2
\end{equation}

\end{document}

相关配置 Comments(0) 2011年3月16日 16:42

2010.10.27

 

 
 
1. setup, partition
2. enable the effect of desktop, which can auto-install the video card driver.
3. download and setup chrome browser.
4. change language support, and choose the number page to select 'chinese', then select all chinese, apply system wide.
5. change the desktop font to 中文字体。
6. add input method 拼.
7. 安装雅黑字体
    a. 准备字体
    b. 创建目录：sudo mkdir /usr/share/fonts/msyh
    c. 拷贝字体：sudo cp msyh.ttf /usr/share/fonts/msyh/
    d. 修改权限：sudo chmod 755 -v /usr/share/fonts/msyh/*
    e. 创建缓存：sudo mkfontscale && sudo mkfontdir && sudo fc-cache -fv 
    f.  重启系统：sudo reboot
    g.  修改字体。
8. vim, gvim
9. g++
10. 系统字体设置为英文字体，这时候会为中文选择默认字体，原本的设置非常难看
cd /etc/fonts/conf.d/
sudo ln -s /etc/fonts/conf.avail/29-language-selector-zh.conf
sudo ln -s /etc/fonts/conf.avail/69-language-selector-zh-cn.conf
sudo ln -s /etc/fonts/conf.avail/99-language-selector-zh.conf
解决。
 
11. 耳机没有声音，据说要升级alsa，找到一个方法。
 
Ubuntu 10.04自带的Alsa版本是1.0.21，现在最新版本是1.0.23。下面我们来升级一下。升级此驱动可以解决安装系统以及升级内核等等过程中出现的诸多声音问题。
查看现在的版本：
cat /proc/asound/version
输出类似如下：
Advanced Linux Sound Architecture Driver Version 1.0.21.
Compiled on Apr 29 2010 for kernel 2.6.32-22-generic (SMP).
如果是最新版本则没有必要进行升级操作，若你感觉声音还是有问题，重装可能可以解决问题。为了避免不必要的麻烦，我们用下面的命令停止Alsa-utils:
sudo alsa-utils stop
下面我们来安装一些编译工具。这很疯狂，如果是第一次安装这些工具你甚至会发现它们的体积可以和你安装的系统相媲美。这会花掉你相当长的时间来下载，不过对于一个灵活开源的系统来说，安装它们是必要的。
sudo apt-get -y install build-essential ncurses-dev gettext xmlto libasound2-dev
sudo apt-get -y install linux-headers-`uname -r` libncursesw5-dev
如果在下载上面工具的漫长等待中你实在无事可做，你完全可以另开一个终端下载下面3个驱动文件。我们把它们下载到当前用户目录下的sound文件夹下：
cd ~
mkdir sound
wget ftp://ftp.alsa-project.org/pub/driver/alsa-driver-1.0.23.tar.bz2
wget ftp://ftp.alsa-project.org/pub/lib/alsa-lib-1.0.23.tar.bz2
wget ftp://ftp.alsa-project.org/pub/utils/alsa-utils-1.0.23.tar.bz2
我们把下载的驱动文件复制到/usr/src/alsa目录下来安装。这一步没有什么特殊的意思，驱动嘛，在这里有个备份，哪天不小心升级了内核声音没了，也好有个准备不是：
sudo rm -rf /usr/src/alsa
sudo mkdir -p /usr/src/alsa
cd /usr/src/alsa
sudo cp ~/sound/alsa* .
分别解压它们：
sudo tar zxvf alsa-driver*
sudo tar zxvf alsa-lib*
sudo tar zxvf alsa-utils*
下面进行编译安装alsa-driver
cd alsa-driver*
sudo ./configure
sudo make
sudo make install
安装alsa-lib：
cd ../alsa-lib*
sudo ./configure
sudo make
sudo make install
安装alsa-utils：
cd ../alsa-utils*
sudo ./configure
sudo make
sudo make install
重启一下，
sudo reboot
如果现在输入cat /proc/asound/version输出结果应该类似下面：
cat /proc/asound/version
Advanced Linux Sound Architecture Driver Version 1.0.23.
Compiled on May  2 2010 for kernel 2.6.32-21-generic (SMP).
我们来配置一下
sudo alsaconf
之后重启一下
sudo reboot
12. 耳机没有弄好，不管了
13. texlive，用dvd的iso安装
安装后设置环境变量
14. jdk

相关配置 Comments(0) 2011年3月16日 16:40

这里的简洁与宁静吸引了我

如题，这样的简洁和宁静，决定把博客搬家到这个地方。

刚才用了半天才找到原来博客的地址

记录 Comments(0) 2011年3月16日 15:54