![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
linux/unix
u4110122855
1.熟悉 Spark、 ElasticSearch、 Kafka、 Solr、 Impala等分布式开源组件
2.熟悉 Spark、 MapReduce 计算框架和工作原理,了解Tez框架
3.熟悉 Scala、 Java、C/C++等编程语言,了解html语言
4.熟悉 Linux 操作系统,能够使用Shell脚本语言编程
5.灵活使用 MySql, Oracle, MS SQL Server 等关系数据库
6.熟悉 Cloudera Hadoop 和纯粹开源 Hadoop 版本的组件
7.有较为丰富的集群部署、开发和维护管理经验
展开
-
ambari-agent 服务启动不了
一直报:需要kill 掉占有进程。netstat -antp | grep 4242原创 2020-04-06 14:05:36 · 1040 阅读 · 0 评论 -
-bash:fork:Cannot allocate memory 问题的处理
今天遇到服务器无法SSH,VNC操作命令提示fork:cannot allocate memoryfree查看内存还有(注意,命令可能要多敲几次才会出来)查看最大进程数 sysctl kernel.pid_maxps -eLf | wc -l查看进程数确认是进程数满了修改最大进程数后系统恢复 1 echo 1000000 ...原创 2020-04-06 13:59:43 · 390 阅读 · 0 评论 -
CD 唱片图形显示
#!/bin/sh# Very simple example shell script for managing a CD collection.# Copyright (C) 1996-2007 Wiley Publishing Inc.# This program is free software; you can redistribute it and/or modify it# u转载 2013-01-21 21:22:41 · 527 阅读 · 0 评论 -
Unix 高级环境编程 关于原子操作
一般而言,原子操作指的是由多步组成的操作。如果该操作原子地执行,则要么执行完所有步骤,要么一步也不执行,不可能只执行所有步骤的一个子集。原创 2013-03-26 23:08:43 · 608 阅读 · 0 评论 -
套接字对
一个TCP连接的套接字对是一个定义该连接的两个端点的的四元组:本地IP地址,本地TCP端口号,外地IP地址,外地TCP端口号。套接字对唯一标识一个网络上的每个TCP 连接。标识每个端点的两个值(IP地址和端口号)通常称为一个套接字。原创 2013-06-24 22:43:16 · 675 阅读 · 0 评论 -
Unix 通用套接字选项
SO_BROADCAST : 开启或禁止进程发送广播消息的能力。SO_DEBUG: 仅支持TCP 。当一个TCP 套接字开启本选项时,内核将为TCP在该套接字发送和接收的所有分组保留详细跟踪信息。SO_ERROR: 套接字发生错误时,待处理错误。SO_KEEPALIVE :给一个TCP 套接字设置保持存活选项后,如果2小时内在该套接字的任一方向都没有数据交换,TCP就自动对端发送一个转载 2013-07-13 10:30:23 · 1607 阅读 · 0 评论 -
信号概念
信号就是告知某个进程发生了某个事件的通知,有时也称为软件中断。信号通常是异步发生的,也就是说预先不知道信号的准确发生的时刻。信号可以:由一个进程发给另一个进程(或自身);由内核发给某个进程。转载 2013-07-01 09:48:37 · 549 阅读 · 0 评论 -
I/O 复用典型使用在下列网络应用场合
当客户处理多个描述符(通常是交互式输入和网络套接字)时,必须使用I/O 复用。一个客户同时处理多个套接字是可能的,不过比较少见。如果一个TCP 服务器既要处理监听套接字,又要处理已连接套接字,一般用I/O复用。如果一个服务器既要处理TCP,又要处理UDP,一般就要使用I/O复用。如果一个服务器要处理多个服务或多个协议,一般就要使用I/O复用。转载 2013-07-03 20:58:26 · 672 阅读 · 0 评论 -
守护进程
守护进程是在后台运行且不与任何控制终端关联的进程。守护进程没有控制终端通常源于它们由系统初始化脚本启动。然而守护进程也可能从某个终端由用户在shell提示符下键入命令行启动,这样的守护进程必须亲自脱离与控制终端的关联。从而避免与作业控制、终端会话管理、终端产生信号等发生任何不期望的交互,也可以避免在后台运行的守护进程非预期地输出到终端。转载 2013-07-21 09:42:26 · 564 阅读 · 0 评论