数据库集群部署用哪个，postgresql哪种搭建集群的方式比较好

来源：整理时间：2023-08-25 02:12:48 编辑：黑码技术手机版

本文目录一览

1，postgresql哪种搭建集群的方式比较好
2，集群应用中使用何种文件系统呀
3，部署30个节点的hadoop集群用什么工具
4，hadoop集群的存储架构一般适宜采用dasnassan或其他什么架构搜
5，部署Hadoop集群cloudera的CDH和Ambari哪个比较好

1，postgresql哪种搭建集群的方式比较好

可以看下stado，一种开源的分布式postgres解决方案，pgxc, pgxl 也可以考虑。

postgresql哪种搭建集群的方式比较好

2，集群应用中使用何种文件系统呀

你说的集群应用指的是？是web集群的话，用ext3就可以。如果是分布式文件系统的话，且是存徐爷爷件的话，用ext4比较不错！数据库集群的话，用ext4！

集群应用中使用何种文件系统呀

3，部署30个节点的hadoop集群用什么工具

1. 一个HDFS集群是由一个NameNode和若干个DataNode组成的。2. 其中NameNode作为主服务器，管理文件系统的命名空间和客户端对文件系统的访问操作；集群中的DataNode管理存储的数据。3. MapReduce框架是由一个单独运行在主节点上的JobTracker和运行在每个集群从节点的TaskTracker共同组成的。4. 主节点负责调度构成一个作业的所有任务，这些任务分布在不同的从节点上。

1.运行环境三台装有centos 6.3 的电脑 openjdk 1.6 2下载hadoop，加压到你要放置的目录，最好是解压到/opt或者/usr/local目录下 3 创建hadoop群组和hadoop用户 groupadd hadoop useradd hadoop -g hadoop 更改hadoop 用户的密码在命令行输入:

部署30个节点的hadoop集群用什么工具

4，hadoop集群的存储架构一般适宜采用dasnassan或其他什么架构搜

数据局部性(data locality)：这是Hadoop的主要特性，指的是直接在存储数据的节点上做CPU密集型计算。显然，SAN/NAS不适用于任何形式的CPU密集型计算。RAID：SAN/NAS采用RAID磁盘阵列进行存储，而Hadoop框架通过复本来确保数据的可靠性和容错性。DAS采用JBOD磁盘数组进行存储，如果Hadoop节点的内置存储容量较小，可以采用DAS做扩展。如果只是想通过Hadoop做数据归档，没有计算，好吧，SAN/NAS是个选择。

it may take a whils to crawl a site ... set_time_limit(10000); // inculde the phpcrawl-mainclass include("libs/phpcrawler.class.php"); // extend the class and override the handledocumentinfo()-method class mycrawler extends phpcrawler {

5，部署Hadoop集群cloudera的CDH和Ambari哪个比较好

1、Hortonworks Hadoop区别于其他的Hadoop发行版(如Cloudera)的根本就在于，Hortonworks的产品均是百分之百开源。2、Cloudera有免费版和企业版，企业版只有试用期。3、apache hadoop则是原生的hadoop。4、目前在中国流行的是apache hadoop，Cloudera CDH，当然Hortonworks也有用的5、Apache Ambari是一个基于web的工具，用于配置、管理和监视Apache Hadoop集群，支持Hadoop HDFS,、Hadoop MapReduce、Hive、HCatalog,、HBase、ZooKeeper、Oozie、Pig和Sqoop。Ambari同样还提供了集群状况仪表盘，比如heatmaps和查看MapReduce、Pig、Hive应用程序的能力，以友好的用户界面对它们的性能特性进行诊断。Ambari你值得拥有1、通过一步一步的安装向导简化了集群供应。2、预先配置好关键的运维指标（metrics），可以直接查看Hadoop Core（HDFS和MapReduce）及相关项目（如HBase、Hive和HCatalog）是否健康。3、支持作业与任务执行的可视化与分析，能够更好地查看依赖和性能。4、通过一个完整的RESTful API把监控信息暴露出来，集成了现有的运维工具。5、用户界面非常直观，用户可以轻松有效地查看信息并控制集群。

目前而言，不收费的hadoop版本主要有三个（均是国外厂商），分别是：apache（最原始的版本，所有发行版均基于这个版本进行改进）、cloudera版本（clouderas distribution including apache hadoop，简称cdh）、hortonworks版本(hortonworks data platform，简称“hdp”），对于国内而言，绝大多数选择cdh版本，cdh和apache版本主要区别如下：　　（1） cdh对hadoop版本的划分非常清晰，只有两个系列的版本，分别是cdh3和cdh4，分别对应第一代hadoop（hadoop 1.0）和第二代hadoop（hadoop 2.0），相比而言，apache版本则混乱得多；比apache hadoop在兼容性，安全性，稳定性上有增强。　　（2）cdh3版本是基于apache hadoop 0.20.2改进的，并融入了最新的patch，cdh4版本是基于apache hadoop 2.x改进的,cdh总是并应用了最新bug修复或者feature的patch，并比apache hadoop同功能版本提早发布，更新速度比apache官方快。　　(3)安全 cdh支持kerberos安全认证，apache hadoop则使用简陋的用户名匹配认证　　(4)cdh文档清晰，很多采用apache版本的用户都会阅读cdh提供的文档，包括安装文档、升级文档等。　　(5)cdh支持yum/apt包，tar包，rpm包，cloudera manager四种方式安装,apache hadoop只支持tar包安装。　　注：cdh使用推荐的yum/apt包安装时，有以下几个好处：