云计算

Openstack Nova(九)----Instance 创建（Computer API & Conductor ），openstacknovaapiOpenstackNova(九)----Instance创建（ComputerAPIConductor），openstacknovaapi在前一章中，学习了所有的流水线处理。最后通过路由的设置，会把创
hadoop集群只有一个datanode启动问题，hadoop集群datanodehadoop集群只有一个datanode启动问题，hadoop集群datanode之前不懂犯了个低级错误，导致datanode只能启动一个；很是奇怪；首先，之前多次将namenode格式
Docker 使用方法总结之：镜像，docker总结Docker使用方法总结之：镜像，docker总结另存为命令：dockersave[OPTIONS]IMAGE[IMAGE...]参数：-o,--output=Writetoafile,instead
一篇博文简单了解weka，博文简单weka一篇博文简单了解weka，博文简单wekaweka是java写的开源模式识别和数据挖掘软件，已经有十多年的历史了。weka的官网在http://www.cs.waikato.ac.nz/ml/weka
关于hadoop程序优化的几点建议，hadoop几点建议关于hadoop程序优化的几点建议，hadoop几点建议我最近在写代码的过程中发现了hadoop的mapreduce程序的一些操作有的是耗时的有的可以使得程序运行更快1.不知道大家有没有用过那个par
我的hadoop2.4安装过程，hadoop2.4安装过程我的hadoop2.4安装过程，hadoop2.4安装过程先记录下安装jdk出现的问题：（1）首先删除掉已经安装的openjdksudoapt-getpurgeopenjdk*----以下出自：htt
python模块，pythonpython模块，pythonhttp://blog.csdn.net/pipisorry/article/details/45476817Python除了str对象自带的一些方法外，re文字处理能力
大数据流式处理一个不能忽视的问题，数据流不能忽视大数据流式处理一个不能忽视的问题，数据流不能忽视我的上一篇BLOG《大数据处理的两种模式》，谈了大数据基于内存的流式处理和基于硬盘的存储处理。比较这两种处理模式，因为内存的处理性能是硬盘的N个量级，所
Spark中配置Parquet参数，sparkparquet参数Spark中配置Parquet参数，sparkparquet参数Parquet的参数，例如blocksize、压缩格式等，需要sparkcontex对象上调用setHadoopConf来
HDFS概述---namenode的设计详解，hdfs概述---namenodeHDFS概述---namenode的设计详解，hdfs概述---namenodeHDFS的设计概述：NameNode的设计维护名字空间，是HDFS中文件目录和文件分配的管理者。保存的重要信息如下：文件
Mellanox网卡，使用netperf进行性能测试，mellanoxnetperfMellanox网卡，使用netperf进行性能测试，mellanoxnetperf1.安装网卡驱动：在官网上面下载相对应当驱动包。下载路径：http://www.mellanox.comProduc
hadoop 多数据源连接之DataJoin，hadoopdatajoinhadoop多数据源连接之DataJoin，hadoopdatajoin一个MapReduce任务很可能访问和处理两个甚至多个数据集，在关系型数据库中，这将是两个或者多个表的连接，但是Hadoop系统
Hive作为Mondrian的数据源，hivemondrianHive作为Mondrian的数据源，hivemondrian项目中的报表系统使用开源的mondrian和saiku作为工具实现的，现在自己又不得不去熟悉OLAP这一块的东西，首先要面对的就是mond
如何动态地给vSphere虚拟机模板注入信息，vsphere虚拟机如何动态地给vSphere虚拟机模板注入信息，vsphere虚拟机在做vSphere自动化安装过程中，遇到这样一个需求：将vCenterServer做成模板，在给用户自动化装好vSphere后，下载v
redis主从同步，redis主从redis主从同步，redis主从Redis主从复制简介Redis支持将数据同步到多台从库上，这种特性对提高读取性能非常有益。1)master可以有多个slave。2)除了多个slave连到相同的ma
基于 ssh + Xpra 构建 Docker 桌面系统，xpradocker基于ssh+Xpra构建Docker桌面系统，xpradockerbyFalconofTinyLab.org2015/05/01Docker桌面系统初识Docker，发现大部分文章都只是介绍非GUI的
Hadoop 源代码分析（三）对象序列化，hadoop序列化Hadoop源代码分析（三）对象序列化，hadoop序列化由于Hadoop的MapReduce和HDFS都有通信的需求，需要对通信的对象进行序列化。Hadoop并没有采用Java的序列化，而是引入了它
使用simple json时遇到的一个小问题，simplejson使用simplejson时遇到的一个小问题，simplejson发现问题最近写了个程序，在构建http参数的时候使用到了org.json.simple.JSONObject这个类，上线之后有客户反馈说
配置tomcat默认项目，tomcat默认项目配置tomcat默认项目，tomcat默认项目在Host/Host之间加上:Contextpath=docBase=../ad-0.0.1-SNAPSHOTdebug=0reloadable=true
XenServer网卡Bonding，xenserverbondingXenServer网卡Bonding，xenserverbonding在给XenServer配置网卡bonding时，需要在所有节点都添加到集群之后再进行，这也是来自Citrix的建议：“Citrix
hive优化-----控制hive任务的reduce数，hivereducehive优化-----控制hive任务的reduce数，hivereduce1.Hive自己如何确定reduce数：reduce个数的设定极大影响任务执行效率，不指定reduce个数的情况下，Hive
创建GZIP压缩格式的HIVE表，gzip压缩格式hive创建GZIP压缩格式的HIVE表，gzip压缩格式hive[Author]:kwuGZIP为Linux系统中最常用的压缩格式，创建GZIP压缩格式的HIVE表具体步骤如下。
pig里面没有if：不能判断一个条件后决定一个执行步骤，pigifpig里面没有if：不能判断一个条件后决定一个执行步骤，pigifpig是处理流的工具，所以数据集是流对象，处理步骤也是一样的。Pig中存在按条件处理流对象的方式有1)filterX=FILTERAB
Hadoop源码分析----RPC反射机制，hadoop----rpcHadoop源码分析----RPC反射机制，hadoop----rpc有了Client和Server，很自然就能RPC啦。下面轮到RPC.java啦。一般来说，分布式对象一般都会要求根据接口生成存根和
使用sqoop，sqoop2使用使用sqoop，sqoop2使用[Author]:kwu使用sqoop--options-file直接导入hive数据，把操作命令语句写在文件中，便于管理及管理1、创建hive数据库及表created

首页上一页 7 8 9 10 11 下一页末页

云计算

文章分类

最新内容