CentOS大数据实验环境更改记录

littleGrow 发布于2019-07-24 18:23 / 1837人阅读

摘要：安装重新编译然后重新安装遇到遇到之后，再重新安装即可。安装完成安装安装出现问题解决方法修改文件，路径位于的安装路径下的文件。在下添加如下几行依然报错尝试解决依然报错使用安装包直接进行安装，发现是以下问题安装遇到问题终于大功告成

CentOS大数据实验环境更改记录

标签（空格分隔）：未分类

1.修改163的yum源

使用说明

首先备份/etc/yum.repos.d/CentOS-Base.repo

mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup

下载对应版本repo文件, 放入/etc/yum.repos.d/(操作前请做好相应备份)

CentOS6

运行以下命令生成缓存

yum clean all
yum makecache

2.更新python从2.6.6版本为2.7

#wget http://www.python.org/ftp/python/2.7.5/Python-2.7.5.tar.bz2
#tar jxvf Python-2.7.5.tar.bz2
#cd Python-2.7.5
#./configure --prefix=/usr/local 
#make && make altinstall 
#mv /usr/bin/python /usr/bin/python2.6.6
#ln -s /usr/local/bin/python2.7 /usr/bin/python

3.安装pip
1）安装setuptools
解压安装遇到错误
RuntimeError: Compression requires the (missing) zlib module

yum install zlib& zilib devel

然后遇到yum因为python版本不对错误错误：

[root@localhost bin]# yum install pip
There was a problem importing one of the Python modules
required to run yum. The error leading to this problem was:

   No module named yum

Please install a package which provides this module, or
verify that the module is installed correctly.

It"s possible that the above module doesn"t match the
current version of Python, which is:
2.7.3 (default, Jan 16 2016, 05:59:11) 
[GCC 4.4.6 20120305 (Red Hat 4.4.6-4)]

If you cannot solve this problem yourself, please go to 
the yum faq at:
  http://yum.baseurl.org/wiki/Faq

查找yum文件,并编辑此py文件

[root@develop local]# which yum
/usr/bin/yum
[root@develop local]# vi /usr/bin/yum

将
#!/usr/bin/python
改为:
#!/usr/bin/python2.6

然后保存OK.

补充：yum基于python写的。

4.安装zlib&zlib-devel
重新编译python
/.configure
make
make install
然后重新安装setuptools

5.遇到wangqi is not in the sudoers file.

#visudo
## Allow root to run any commands anywhere
root    ALL=(ALL)       ALL
wangqi  ALL=(ALL)       ALL

6.遇到ImportError: cannot import name HTTPSHandler
yum install openssl openssl-devel -y
之后，再重新安装Python即可。
/.configure
make
make install

7.pip安装完成
8.安装numpy,
9.安装pandas
出现问题：
UnicodeDecodeError: "ascii" codec can"t decode byte 0xe2 in position 32: ordinal not in range(128)
解决方法：
修改mimetypes.py文件，路径位于python的安装路径下的Libmimetypes.py文件。在import下添加如下几行：

if sys.getdefaultencoding() != "gbk": 
    reload(sys) 
    sys.setdefaultencoding("gbk")

依然报错：

gcc: error trying to exec "cc1plus": execvp: No such file or directory

error: command "gcc" failed with exit status 1

尝试解决：
yum -y install gcc

依然报错：

Command /usr/local/bin/python -c "import setuptools, tokenize;__file__="/tmp/pip_build_root/pandas/setup.py";exec(compile(getattr(tokenize, "open", open)(__file__).read().replace("
", "
"), __file__, "exec"))" install --record /tmp/pip-5RbGXm-record/install-record.txt --single-version-externally-managed --compile failed with error code 1 in /tmp/pip_build_root/pandas
Traceback (most recent call last):
  File "/usr/local/bin/pip", line 9, in 
    load_entry_point("pip==1.5.6", "console_scripts", "pip")()
  File "/usr/local/lib/python2.7/site-packages/pip-1.5.6-py2.7.egg/pip/__init__.py", line 185, in main
    return command.main(cmd_args)
  File "/usr/local/lib/python2.7/site-packages/pip-1.5.6-py2.7.egg/pip/basecommand.py", line 161, in main
    text = "
".join(complete_log)
UnicodeDecodeError: "gbk" codec can"t decode bytes in position 97-98: illegal multibyte sequence

使用安装包直接进行安装，发现是以下问题：

gcc: error trying to exec "cc1plus": execvp: No such file or directory
error: command "gcc" failed with exit status 1

安装gcc-c++

[root@localhost pandas-0.17.1]# yum list gcc-c++
Loaded plugins: fastestmirror, refresh-packagekit, security
Loading mirror speeds from cached hostfile
Available Packages
gcc-c++.i686                                 4.4.7-16.el6                                  base
[root@localhost pandas-0.17.1]# yum -y install gcc-c++.i686

遇到问题

No local packages or download links found for python-dateutil
error: Could not find suitable distribution for Requirement.parse("python-dateutil")

pip install python-dateutil

终于大功告成

USDP大数据平台托管Hadoop集群阿里大数据实验平台大数据实施大数据实现大数据实用

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/37718.html

CentOS大数据实验环境更改记录

摘要：安装重新编译然后重新安装遇到遇到之后，再重新安装即可。安装完成安装安装出现问题解决方法修改文件，路径位于的安装路径下的文件。在下添加如下几行依然报错尝试解决依然报错使用安装包直接进行安装，发现是以下问题安装遇到问题终于大功告成 CentOS大数据实验环境更改记录标签（空格分隔）：未分类 1.修改163的yum源使用说明首先备份/etc/yum.repos.d/CentOS-B...

BlackMass 2019-07-31 14:18 评论0 收藏0
CentOS大数据实验环境更改记录

摘要：安装重新编译然后重新安装遇到遇到之后，再重新安装即可。安装完成安装安装出现问题解决方法修改文件，路径位于的安装路径下的文件。在下添加如下几行依然报错尝试解决依然报错使用安装包直接进行安装，发现是以下问题安装遇到问题终于大功告成 CentOS大数据实验环境更改记录标签（空格分隔）：未分类 1.修改163的yum源使用说明首先备份/etc/yum.repos.d/CentOS-B...

shmily 2019-06-25 18:10 评论0 收藏0
CentOS大数据实验环境更改记录

摘要：安装重新编译然后重新安装遇到遇到之后，再重新安装即可。安装完成安装安装出现问题解决方法修改文件，路径位于的安装路径下的文件。在下添加如下几行依然报错尝试解决依然报错使用安装包直接进行安装，发现是以下问题安装遇到问题终于大功告成 CentOS大数据实验环境更改记录标签（空格分隔）：未分类 1.修改163的yum源使用说明首先备份/etc/yum.repos.d/CentOS-B...

alexnevsky 2019-05-28 18:29 评论0 收藏0
【大数据实践】Kafka生产者编程（5）——ProducerConfig详解（下）

摘要：前言上一篇文章大数据实践生产者编程详解上中，对的相关配置项进行了部分介绍，在本文章中，将继续完成剩下配置项的介绍。在前面的文章大数据实践生产者编程中，对有详细讲解。重要性低类型默认值，表示不能被使用配置，用于事务的递交。前言上一篇文章【大数据实践】Kafka生产者编程（4）——ProducerConfig详解（上）中，对kafka producer的相关配置项进行了部分介绍，在本文...

codecook 2019-07-16 14:45 评论0 收藏0
【大数据实践】Kafka生产者编程（5）——ProducerConfig详解（下）

摘要：前言上一篇文章大数据实践生产者编程详解上中，对的相关配置项进行了部分介绍，在本文章中，将继续完成剩下配置项的介绍。在前面的文章大数据实践生产者编程中，对有详细讲解。重要性低类型默认值，表示不能被使用配置，用于事务的递交。前言上一篇文章【大数据实践】Kafka生产者编程（4）——ProducerConfig详解（上）中，对kafka producer的相关配置项进行了部分介绍，在本文...

sarva 2019-05-28 18:46 评论0 收藏0