Linux中的管道大小限制:pipesize (linux pipesize)

在Linux中,管道是不可或缺的一部分。管道可以被用来把多个命令连接起来,形成一个管道,可以在不同的命令之间传递数据。但是,管道的大小是有限制的,而这个限制对于一些特定的操作来说可能是不够的。在Linux中,这个面积被称为“pipesize”,它决定了管道的更大容量。本文将会探讨Linux中的管道大小限制。

管道是一种进程间通信的方式,它通过将一个进程的输出传递给另一个进程来实现通信。如果管道的大小限制太小,可以导致管道无法传输足够大的数据块。这个问题可能在一些特定的应用场景中非常重要,比如接收大量的实时数据流。

Pipesize实际上指的是管道的缓冲区大小,也就是能够存储在管道中的数据量的大小。一般来说,这个缓冲区大小对于大多数用例来说是足够的,但是在某些情况下需要对其进行调整。

事实上,在Linux中,管道的大小受到系统内存大小和进程数量的限制。如果系统内存较小,那么管道的大小限制就较小。另一方面,如果运行的进程数量过多,管道的大小限制也会相应地下降。当然,在多核CPU上运行多个进程时,可以增加管道的大小限制,以提高管道的吞吐量。

那么,怎样才能够改变管道的大小限制呢?

在Linux中,可以使用“ulimit”命令来改变管道的大小限制。在终端中输入“ulimit -p ”命令可以修改管道的大小限制。其中,“size”参数表示期望的缓冲区大小,单位为字节。需要注意到是,这个命令只对当前终端会话生效。如果需要永久使用修改,需要对相关配置文件进行修改。

相关问题拓展阅读:

linux中的pipe和fifo的区别

/*实现子进程向管道中写入数据,

父进程

读出数据*/

#include

#include

#include

#include

#include

int

main()

{

pid_t

childpid;

int

fd,nbytes;

char

string=”data

from

child

process\n”;

char

buf;

在linux进程间通信(IPC)可以通过信号量、文件系统、消息队列、共享内存还有管道来实现的。其中消息队列、内存管理是在SystemV中提出的。进程通信间涉及到了管道,而且管道在shell命令中也大有用处。

那就简要说说管道:管道顾名思义,你可以将其理解为日常生活中的管子,一边流入,一边流出。它可以有半双工和全双工。半双工就是只能一边流入,另一边流出;全双工则是一边可以流入,也可以流出。

1、pipe就是一种半双工的管道。其中,fd用来向管道中写入数据,而fd在另一端用来读出数据。如果现有两个进程要利用pipe进行通信。此时,就要保证只能有一个写入端和一个读出端,即:fd和fd只能有一个。

2、fifo是一种全双工,即:它的一端既可以进行读取fd,也可以进行写入fd。正因为它的这种通信方式,使其可以用来涉及基于C/S模式的网络通信。

虚拟机部署exadata cell 节点,启动cellsrv服务报错?

根据报错路径查看trc文件里面的内容才能够判断

首先需要在虚拟机中安装Oracle Linux 5.7, (Red Hat Enterprise Linux理论也可以,但我没有测试过),内存分配1GB通常就足够了。安装过程很简单,需要注意的是需要选上软件开发包,例如gcc/aio之类的,图形界面(GUI)可不装。

注意: 安装完成以后Oracle Linux默认使用UEK,如果这里使用UEK, 则在后面的步骤中无法正常启动cellsrv服务。可以修改grub的配置将其默认启动内核修改为redhat兼容内核:

将default=0修改为default=1 ,然后型茄重启。

因为默认Oracle Linux启动了很多我们不需要的服务,为了节省资源:建议将以下服务停止并且禁用。

当颂盯然上述服务的禁用也可以通过 ntsysv –level 2345在图形界面进行选择,取消掉不需要的服务,然后重启。

然后我们将Exadata Cell Image V.zip上传到虚拟机内,然后解压,得到cellImageMaker_11.2.3.2.0_LINUX.X64_.x86_64.tar,继续解压得到dl180文件夹。

在dl180/boot/cellbits下找到cell.bin文件。这个bin文件实际上是一个zip压缩包我们使用unzip来对它进行解压:

解压后得到cell-11.2.3.2.1_LINUX.X64_.x86_64.rpm和jdk-1_5_0_15-linux-amd64.rpm

我们先来安装jdk:

# rpm -ivh jdk-1_5_0_15-linux-amd64.rpm

然后再安装cell:

# rpm -ivh cell-11.2.3.2.1_LINUX.X64_.x86_64.rpm

安装的时候报错,提示有LWP包依赖:

配置好yum源直接使用yum安装LWP:

# yum install perl-libwww-perl

再次安装cell,又一次提示错误,前提条件不满足,到底是什么前提条件不满足没有提示,只能通过以下方式生成具体的检查条件的脚本然后再看是什么条件不满足:

# rpm –scripts -qp cell-11.2.3.2.1_LINUX.X64_.x86_64.rpm >>diag.log

打开diag.log,很快看到应该是/var/log/oracle目录不存在导致的,于是手工建立这个目录并修改权限为775。

# mkdir -p /var/log/oracle

# chmod -R 775 /var/log/oracle

再次安装cell这次没有报错。

执行dd.sh创建对应的磁盘和闪盘:其中磁盘12块,每块大小为1GB,闪盘4块,没块大小也是1GB。

然后删除dd脚本,切换到celladmin用户,重新启动celld服务。

# su – celladmin

$ cellcli -e alter cell restart services all

发现cellsrv服务无法启动,查看/opt/oracle/cell11.2.3.2.1_LINUX.X64_130109/log/diag/a/cell/cell/trace/alert.log发现有类似如下的报错信息:

CELLSRV version=11.2.3.2.1,label=OSS_11.2.3.2.1_LINUX.X64_130109,Wed_Jan__9_06:09:48_PST_2023

Non critical error DIAcaught while writing to trace file “/opt/oracle/cell11.2.3.2.1_LINUX.X64_130109/log/diag/a/cell/cell/trace/svtrc_2244_0.trc”

Error message: DIA-48913: Writing into trace file failed, file size limit reached

从错野租和误号就可以判断应该是更大文件数不足, 于是需要再修改操作系统的更大文件数限制:

在/etc/sysctl.ctl最后添加一行: fs.file-max = 65536,然后刷新生效:

在/etc/security/limit.conf文件最后添加两行:

* soft nofile 65536

* hard nofile 65536

然后退出重新登录, 切换到 celladmin,使用ulimit -a进行查看是否生效:

# ulimit -a

core file size (blocks, -c) 0

data seg size (kbytes, -d) unlimited

scheng priority (-e) 0

file size (blocks, -f) unlimited

pending signals (-i) 11999

max locked memory (kbytes, -l) 32

max memory size (kbytes, -m) unlimited

open files (-n) 65536

pipe size (512 bytes, -p) 8

POSIX message queues (bytes, -q)

real-time priority (-r) 0

stack size (kbytes, -s) 10240

cpu time (seconds, -t) unlimited

max user processes (-u) 11999

virtual memory (kbytes, -v) unlimited

file locks (-x) unlimited

再次启动cell所有的服务:

$ cellcli -e alter cell restart services all

这次发现cell下的cellsrv, ms, rs服务都可以正常启动了。

接下来需要在cellinit.ora中添加网卡的信息:

$ cellcli -e create cell cell1 interconnect1=eth0

执行成功以后,可以看到cellinit.ora文件中添加了一行ipaddress1=192.168.56.101/24类似的信息。

# cat /opt/oracle/cell/cellsrv/deploy/config/cellinit.ora

#CELL Initialization Parameters

version=0.0

DEPLOYED=TRUE

HTTP_PORT=8888

RMI_PORT=23791

SSL_PORT=23943

JMS_PORT=9127

BMC_SNMP_PORT=162

ipaddress1=192.168.56.101/24

接下来创建celldisk, griddisk, flashcache, flashlog:

关于linux pipesize的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。


数据运维技术 » Linux中的管道大小限制:pipesize (linux pipesize)