@greatghoul 这个嘛其实强调 VCS 我觉得就可以了。比如 Google 里是 perforce 为主， Facebook 是 hg 为主。针对你的项目特性可以选择适当的工具。你所遇到的二进制文件大，用 hg ， perforce ， svn 都能很好地解决。
若是一定要用 git 的话，可以选择 submodule 的功能，将所有二进制文件另外放在一个 repo 里面，需要再 clone 或者 checkout ，那么存代码的库拉去是很快的。当然，项目大了其实肯定会慢，比如拉个 linux 内核什么的，这个是没办法的事情，你不上 VCS 也得拉，不是你拉就是别的同事拉，毕竟谁敢保证明天那份代码不会被误删除。