金枪鱼之夜:空运磁带的 PB 级实验数据传输 https://tuna.moe/event/2022/lto-practice/
从日本神冈到中国北京,可以试着计算实际传输速率。
![]() |
1
oldshensheep 358 天前 ![]() 实际传输速度受限于磁带传输速度。
飞机,运送等时间忽略不计,因为写入磁带花了 20 天,实际传输速度就是 700TB/20 天大约 400MB/S 。 |
![]() |
2
netnr 358 天前 via Android
这应该算得上大数据分析了吧
|
3
huaes 358 天前
以前见极客湾玩过磁带机,磁带挺便宜的就是磁带机贵,顺序读写几百 MB 这样,做冷数据存储性价比远超机械硬盘
|
4
huaes 358 天前
不对,是翼王,
|
![]() |
5
ohiu 358 天前 ![]() 很慢 而且丢包率只能是 0 一丁点冗余都不能有 满载硬盘的卡车也只能是立刻可以部署的服务器才行 否则读写数据本身就是瓶颈
|
6
MrKrabs 358 天前
难道就一盒磁带?可以一起读啊
|
9
fisherwei 357 天前 ![]() @oldshensheep 清关报检可能远不止 20 天能出来。当然,关系硬可能也半天就出来了。
|
![]() |
10
zli 357 天前 ![]() 日本进来的?
先 84 喷一遍消消毒…… 🐶 |
11
kerrspace 357 天前
说实话 我搜集的黄图黄片加在一起也快有 100TB 了(不算备份),清华这个 700TB 也就洒洒水
|
![]() |
12
Cubat 357 天前
证明至今为止数据最快的传输方式还是集装箱托运,比如 AWS Snowmobile (狗头)
|
![]() |
13
ZE3kr 357 天前 via iPhone
为什么我从日本寄到北京的包裹是需要隔离 10 天才会派送的😭USPS 、UPS 、FedEx 都是,是不是因为我没有清华的关系
|
![]() |
14
Zy143L 357 天前 via Android
清华包裹需要消毒静止么?
这个时间节点还能进京么? |
![]() |
15
documentzhangx66 357 天前 ![]() 也就 35 个 20TB 磁盘,手提式磁盘箱,一个箱子能放 10 块。那么就是 4 个箱子的事情。
双副本 7 个手提箱,三副本 11 个手提箱的事情。 难点是 700 TB 的数据,要进行写入,还要校验,费时间罢了。 以上是垃圾佬的做法。 企业级的做法,直接一台 3U 的全闪服务器,一台最大能达到 PB 级别。 |
![]() |
16
dangyuluo 357 天前
好奇是怎么实现无人值守写入磁带的,而且怎么保证数据完整性
|
![]() |
18
zachgenius 357 天前
@kerrspace #11 借一部说话 😂
|
24
huihuilang 356 天前 via Android
@ZE3kr 找个靠谱的清关公司吧。。。我们买的货物欧洲进来的,从发出到收到一周搞定。。。货物发出来就可以预申报了
|
25
lxr760 356 天前
直播链接:YouTube ,开始后公布
谁有 youtube 地址 上去学习学习 |
![]() |
26
ZE3kr 356 天前 via iPhone
@huihuilang 清关都是预申报,清关不到 4 个小时。发到北京之外的地方全程都不到 3 天就能派送抵达,远不到一周。但收货地北京无论是从北京口岸、广州口岸、上海口岸进口,都会被静置隔离 10 天……打算以后送到天津然后再转寄到北京了
|
![]() |
28
Cassius 356 天前 via Android
磁带自动化程度很高的。大型带库一次可以放上千盘磁带,都是机械手托盘自动装载到磁带机的。
维护的时候只需要拉开抽屉一次性放入所有磁带就行了。每盘磁带上有条码,机械手读取的时候会读取到 ID ,每盘数据先后就不会乱。 取出也是同理。IBM 小带库也能塞几十盘,大型带库有 4 个 42U 机柜 |
![]() |
30
xunqin 356 天前
|
![]() |
31
nbsn 355 天前
时间到了,没有开始啊
|
![]() |
32
Xymmh 355 天前
![]() |
![]() |
33
secondwtq 355 天前
以前网速没那么快的时候数据稍微大一点就是这么干的 ... 现在就是多了几个 0 吧
|