WDT 数据传输工具

程序名称:WDT

授权协议: BSD

操作系统: 跨平台

开发语言: C/C++

WDT 介绍

WDT 是一个嵌入式函数库( embeddedable library),也是命令行工具,旨在尽可能快速地用多个 TCP 路径在
2个系统之间传送文件。WDT 意思是 Warp speed Data Transfer 和 Wormhole Data Transfer 。

WDT 的目标是:最低的总传输时间——当不使用自我强加的资源,仅限制硬件(光盘或网络带宽不延迟),并尽可能保持高效(较低的CPU/内存/资源利用率)。

我们正在努力保持最低限度的依赖,以最大限度地提高便携性,以及保证最小二进制。附带的好处是尽量减少编译时间。

WDT 官网

https://github.com/facebook/wdt

相关编程语言

RedHadoop 是一个持续优化的企业级Hadoop基础软件平...
来自 Mozilla 的 Heka 是一个用来收集和整理来自多个...
HBase – Hadoop Database,是一个高可靠性、高性能...
Mincemeat-node 是使用Node.js实现的极简MapReduce框...
REEF 是微软开发的一个大数据框架。 REEF运行在YARN...
Scribe旨在帮助Facebook处理服务器上的大量数据,正...