V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  realpg  ›  全部回复第 23 页 / 共 440 页
回复总数  8792
1 ... 19  20  21  22  23  24  25  26  27  28 ... 440  
你要找的是
Microsoft Office Onenote & Onedrive
我支持 APP 备案制
228 天前
回复了 zhongjun96 创建的主题 Linux Ubuntu 下解压 gz 文件,如何限制速度?
@aloxaf #17

这里走 dd 还是建议用 odirect...
fsync 也会有奇怪问题 我记不住是啥问题了 得看知识库 懒
我们整天跟 io 打交道 为了把成本降低到正常使用云的 5%
228 天前
回复了 zhongjun96 创建的主题 Linux Ubuntu 下解压 gz 文件,如何限制速度?
@zhongjun96 #19
额 仔细看了下 你这是 buffered io 肯定是很快的
这也是我跟 4 楼讨论的问题

你需要用 iostat 查硬盘真实写入速度 这也是我这个办法的最核心的东西
228 天前
回复了 zhongjun96 创建的主题 Linux Ubuntu 下解压 gz 文件,如何限制速度?
@aloxaf #18
对 cgroups v2 能控制 buffered io 才有这个彻底的方法
用 systemd 的 slice 也可以实现类似方法 我对 systemd 研究不透彻

@zhongjun96 #19
那可能是我的哪个脚本写的有毛病 我就随手脑测手打的 理解思路自己修改即可 绝对是可用的
查一下 cgroups v2 的状态 查一下分组的内容
因为因为我的生产业务每天都依赖这玩意 遇到的问题跟你是一样的 而且比你的麻烦在于我这边的吞吐量问题是不限速就会因为写入超过 6GB/s 把虚拟化后端的 25Gbps*2 IPSAN 打死 机器直接死掉
228 天前
回复了 zhongjun96 创建的主题 Linux Ubuntu 下解压 gz 文件,如何限制速度?
@aloxaf #4

大内存机器, 没特殊优化的, 你这样写还会炸硬盘吞吐量

缓冲区大的, 都限速写 ram buffer 里了, 然后刷新脏页时候还不限速的, 会堆死掉硬盘

如果硬盘的限速是因为后端是类似云盘的 IPSAN 虚拟化挂载到虚拟机, 速度限制是因为存储网络带宽瓶颈, 甚至会导致这个盘的 IO 整体被内核 hang 住, 系统盘直接死机, 不是系统盘的话, 必须硬断电重启可破, 本机 reboot 命令都没用, 永久 hang 住

如果空闲内存小的机器, 问题不大, 不会读吞吐量

OP 这个问题 基本就是我们的面试题之一
低成本嫖各大云厂商的 IOPS 和吞吐量

您这个解答基本算是常见考虑不充分的错误答案
228 天前
回复了 zhongjun96 创建的主题 Linux Ubuntu 下解压 gz 文件,如何限制速度?
默认你是较新版本的操作系统, 比如 22.04 的 ubuntu, 比如最新的 debian 而不是上古内核的 centos 直接拷贝以下命令到 bash 脚本执行即可

--------------------------

#!/bin/bash

echo "+io" >/sys/fs/cgroup/cgroup.subtree_control
mkdir /sys/fs/cgroup/limitio


echo $$ > /sys/fs/cgroup/limitio/cgroup.procs

ls -la /dev/block/ | grep -v '/loop' | grep -v '/sr' | awk '{print $1, $2, $3, $4, $5, $9}' | grep -oP '\d+:\d+' | while read line
do
echo "$line wbps=52428800 rbps=52428800" > /sys/fs/cgroup/limitio/io.max 2>/dev/null
done

#this script's disk read and write are both set to 50MB/s, plz add your gzip -d command below


#gzip -d a.gz


----------------

格式如果错乱, 去下面复制:

https://gist.github.com/realpg/f36ae7bc655d7eab6903fad82ead65f8

请用 root 执行, uncomment 代码最后一行的 gzip 指令换成你自己的

本脚本后面的任何语句的本地磁盘 IO 会被限速到读写各 50MB/s
2023-11-18 19:50:51 +08:00
回复了 realpg 创建的主题 程序员 一次 github 跟开源大佬的抬杠经历
@Chad0000 #13

我也没要求项目组现在就去改,或者因为一个外行的想法就去改项目

我只是想知道这个设计到底合不合理?

就算他不合理,不去改也是可以接受的,因为多少生产环境在用,总不能因为这点破事造成一堆事故
2023-11-18 19:49:20 +08:00
回复了 realpg 创建的主题 程序员 一次 github 跟开源大佬的抬杠经历
@paopjian #11

反正我是敢直接的表达观点:我认为这个不合理

但是大佬,他就不敢说 “我认为这个合理” “我认为这个有一定合理性”
2023-11-18 19:48:34 +08:00
回复了 realpg 创建的主题 程序员 一次 github 跟开源大佬的抬杠经历
@Nazz #10

那就拉黑呗

反正我是敢直接的表达观点:我认为这个不合理

但是大佬,他就不敢说 “我认为这个合理” “我认为这个有一定合理性”
2023-11-18 19:46:31 +08:00
回复了 realpg 创建的主题 程序员 一次 github 跟开源大佬的抬杠经历
@xxfye #7

如果不是总是得到顾左右而言它从不正面回答问题的答复,能杠起来?
2023-11-18 19:45:39 +08:00
回复了 realpg 创建的主题 程序员 一次 github 跟开源大佬的抬杠经历
@xxfye #3
@JustSong #4
我也没想去开盒谁或者那个项目

我没觉得自己没问题

合理不合理的问题是他提出的

我就想知道这个 在大佬的想法里 到底合不合理 一句话的事儿 你要说合理 那我就反思反思我自己是不是看的不够高
既然认为合理 那就直接说出来好了

爱挂人的,随便挂 无论 V2 还是 GH 这个账号都是纯匿名的反人肉号 不跟现实发生关系
2023-11-08 01:58:48 +08:00
回复了 flynnlemon 创建的主题 程序员 朋友有创业计划,我应征当了那个“只缺一个程序员”了
@tool2d #13
微信能打开吗?
2023-11-03 08:54:08 +08:00
回复了 adenlin 创建的主题 信息安全 有没有研究过浏览器指纹的大佬?请教几个问题
免费是问不出价值数百万美元的技术答案的
2023-11-03 08:44:21 +08:00
回复了 sadfQED2 创建的主题 DNS 阿里云、腾讯云的 DNS 服务也有污染吗?
@sadfQED2 #9
你的意思,我国法律得给服务器做个例外?
家庭不可以违法,服务器就可以违法……
2023-10-31 11:49:04 +08:00
回复了 billowssun123 创建的主题 信息安全 海外的信息泄漏和骚扰有国内这么严重吗?
@billowssun123 #58
所以 这种问题不要在 V2 问
普遍都是愤青 所谓的“重隐私”
什么都得先喷小米再喷国家 根本得不到正确答案
2023-10-31 11:06:59 +08:00
回复了 iceAD 创建的主题 程序员 什么情况下,才考虑把项目文件以 GBK 编码格式保存?
不跟别的系统互通的小系统,随便……
没有
警告楼上各位:
给别人提供方法,也是从犯……
1 ... 19  20  21  22  23  24  25  26  27  28 ... 440  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1820 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 4264ms · UTC 16:16 · PVG 00:16 · LAX 08:16 · JFK 11:16
Developed with CodeLauncher
♥ Do have faith in what you're doing.