| ▲ | tintor 5 hours ago | ||||||||||||||||||||||||||||||||||||||||
Does your server have 20Tbyte+ of storage for frontier LLM weights? It is too large to transfer in one HTTPS PUT request. This needs to be S3 object store with multi-part upload spanning a long time period, to avoid trigger outgoing bandwidth monitors. | |||||||||||||||||||||||||||||||||||||||||
| ▲ | taylorfinley 4 hours ago | parent [-] | ||||||||||||||||||||||||||||||||||||||||
It goes to r2 and supports multi-part with 5 tib chunks | |||||||||||||||||||||||||||||||||||||||||
| |||||||||||||||||||||||||||||||||||||||||