- linux（vi）常用命令常用操作系统命令查看主机名hostname修改主机名(重启后无效)hostnameyang修改主机名(重启后永久生效)vi/ect/sysconfig/network修改IP(重启后无效)ifconfigeth0192.168.12.22修改IP(重启后永久生效)vi/etc/sysconfig/network-scripts/ifcfg-eth0查看系统信
- Hadoop集群搭建中的问题节点启动正常，从节点失败从连接主的时候出现问题，查看日志发现，slave在连接master的端口失败，retry了多次。原因：腾讯云hosts文件不支持配置本主机的外网ip，master只监听了127.0.0.1的9002端口，而slave连接的是master(外网ip)的9002端口，因此出现slave连接master失败集群启动中配置顺序hadoop2.6.5core-site.xml
- hiveserver2或sparksql和HApoxy远程服务的高可用和负载均衡pacheSpark现在是大数据中非常流行的处理引擎，简单的API、内存计算、很好的性能、一站式的解决方案、良好的生态，Spark是大数据中最火的明星AngelaBaby。在Spark内部的多个组件中，SQL组件也是很多公司用的最多的一个内部组件。由于SparkSQL并不适用于大并发的场景，所以在实际的生产过程中发现，由于SparkSQL并不能限制用户数，经常会有过多的用户以及过多的任务，导
- mysql数据库建立索引以及索引失效问题操作数据库索引能起到优化数据库查询，提高查询效率的作用。并且对也稍微大一点的数据量的服务来说，索引的创建是必须的，也是关键的。但是索引也要合理应用，不要遇到查询就建索引，也不能乱建。如果造成索引失效那还不如不建。索引失效有的时候是因为自己的语句问题造成的。下面是几种造成索引失效的几种原因，?一、以下的方法会引起索引失效??1,2,单独的>,3,like%_百分号在前.?
- RAFT基础知识Paxos是分布式协议的标准，由美国大佬莱斯利·兰伯特提出（2013年图灵奖，现在在微软研究院，学术软件laTex开发者）。Paxos是即使基于不可靠网络也能实现分布式服务器共识一致性的算法。分布式一致性（Distributedconsenseus）不再阐述。??不过Paxos不仅仅复杂难以理解，同时也很难在工程上实现，即使强如Google，它完成的分布式锁系统Chubby（作为Paxos
- Spark Shuffle FetchFailedException报错解决方案SparkShuffleFetchFailedException报错解决方案
- Apache CarbonData快速入门指南HowtoUseit?CarbonData是由华为开发、开源并支持ApacheHadoop的列式存储文件格式，支持索引、压缩以及解编码等，其目的是为了实现同一份数据达到多种需求，而且能够实现更快的交互查询。FollowthestepsinCarbonData-QuickStart.Putthe*.csvfileintoHDFS,like:cdcarbon
- spark python 环境搭建 windows10spark?python环境搭建windows下载jdk8并配置环境变量???JAVA_HOME??C:\ProgramFiles\Java\jdk1.8.0_131???CLASSPATH??%JAVA_HOME%\lib;%JAVA_HOME%\lib\tools.jar???path：%JAVA_HOME%\bin
- windows下Scala 编译器的安装scala安装
- HA搭建 zkfc启动不起来原因及解决办法1.问题描述：HA搭建过程中，执行sbin/hadoop-daemon.sh?start?zkfc后，jps看不到DFSZKFailoverController进程。两个namenode都是standby状态。2.原因分析：查看日志。发现是hdfs-site.xml配置文件错误。如下：?property>?dfs.ha.fencing.methods??sshf
- spark提交任务java.nio.channels.ClosedChannelExceptionspark提交任务java.nio.channels.ClosedChannelException
- Hadoop集群安装Hadoop集群安装1、简介Hadoop是一个分布式系统基础架构。Hadoop的框架核心设计是HDFS和MapReduce。HDFS为海量的数据提供了存储，则MapReduce为海量的数据提供了计算。2、核心架构MapReduce引擎，该引擎是由JobTrackers和TaskTrackers组成????????HDFS就想一个传统的分级文件系统。可以创建、删除、移动
- 邮件服务器管理员的痛楚电子邮件早已代替纸笔成为最常用的交流方式之一，尤其在企业之中。通知的转达、文本的传输等都通过其来实现。然而每每打开公司邮箱，迎面而来的总是铺天盖地的广告，拥堵在收件箱里，气象万千，好不热闹。点上&ld
- IT主管须谨记的19条钢铁军规想成为新一代IT主管吗?公司主管，尤其是IT主管需要注意以下这些重要的原则。前三条为最基本的管理原则，后16条是对业务经理和IT主管们非常有益的原则。1.由客户决定价值。这里的客户指外部客户，他们决定
- 企业租用服务器的管理需注意哪些方面客户在租用服务器后，经常会遇到一些小问题，很多时候都是由于操作失误造成的。那么在使用租用服务器的时候，是否也存在一些技巧呢?回答必然是肯定的。根据相关资料的查询，总结了几点，下面就来看看!当您拥有了这
- IT人士对于SaaS需要了解的五件事SaaS对于所有类型和规模的IT部门都已经成为现实。首席信息官和其他IT领导者需要一些工具像管理内部安装的软件一样严格地管理SaaS应用的庞大的产品组合。下面是每一个IT专业人员都应该知道的关于Saa
- 权衡利弊 服务器租用和托管价格悬殊服务器托管是客户自身拥有一台服务器，并把它放置在Internet数据中心的机房，由客户自己进行维护，或者是由其它的签约人进行远程维护。服务器租用的最大障碍：服务直接租用IDC机房服务器的好处就是便捷和
- 以Apache服务器为例 详解动态网站访问目前来说，网站页面主要分为静态页面和动态页面，纯静态页面组成的网站现在相对比较少见，大型网站一般使用的是动态网站建站技术，还有一部分网站是静态网页与动态网页共存，本文以Apache服务器、php语言为
- IT运维服务企业如何构建完善的运维服务体系随着IT运维服务行业的逐步成熟，IT运维服务行业已经形成了一套基本的服务框架和较完整的服务产业链条，而且IT运维服务已经成为了IT产业链条中的一个重要环节。国家标准化管理委员会于2012年11月5日正
- 5大对策 老化的服务器是否该升级？许多公司依靠服务器为关键应用程序提供计算能力，让用户和客户可以顺畅交互，处理工作负载以及创造宝贵的收入。与大多数企业资产一样，服务器的使用寿命也很有限，需要定期更新。最终，每一台服务器都会租赁到期或报
- 新手必备！IT管理员需要了解的十方面(1)IT管理员在每个企业都非常常见，这是一个非常复杂的职位，管理员需要掌握大量的知识才能够解决日常的IT维护工作，对于新毕业的大学生来说，IT管理员往往是很多人选择的职位，但是其对掌握的IT知识方面确实要
- 六大存储技术或将敲响硬盘丧钟(1)最后一只传统的旋转硬盘到底何时会离开企业数据中心环境?传统硬盘无疑是如今广泛使用的一种最常见的存储介质。认为传统硬盘寿终正寝的理由很充分，包括可以避免塞满磁盘的服务器机架所需要的电力和冷却资源，可以消
- 专家出策：惠普转型三大步一般说来，解决复杂问题归根结底分为三步：将问题细分成组件，然后诊断，分析修复哪些组件与丢弃哪些组件，最后是优先处理哪些组件，并投入资源解决问题。如果不打破问题并遵循这些步骤，那么永远是治标不治本。惠普
- 开源KVM为企业准备好了吗？虚拟化是走向云的第一步，同理，开源虚拟化是走向开源云的第一步。云计算所提供的产品与方案都是围绕着IT资源的新交付与消费模式。云的形式多样，私有云、公有云与混合云，无论哪种云都具有三个关键特征：虚拟化、
- 20款必装的Ubuntu应用(1)如果你每天都使用Ubuntu桌面的话，肯定有一些心得，哪些应用好用，哪些不好用。在本文中，Datamation网站作者MattHartley将分享20款实用的Ubuntu应用。这些应用涵盖生产工具以及
