近日，谷歌研究员Zachary Charles发布了新训练方法Scaling Law for DiLoCo。新的训练方法无惧模型规模，未来，在多个数据中心训练大模型的规模不再是问题。Charles宣布：“在越来越大的模型上，分布式训练取得重大突破”。论文显示，DiLoCo训练方法的Scaling law，效果远超目前流行的数据并行。

【环球时报特约记者 陈山】据路透社报道，美国东部时间3月16日凌晨，美国太空探索技术公司（SpaceX）的载人“龙”飞船成功与国际空间站对接，此前在国际空间站滞留超9个月的两名美国宇航员布奇·威尔莫尔和苏尼·威廉姆斯终于有望在不久后返回地球。

3月31日前，各地旅客持到达南京站、南京南站、仙林站、江宁站、江宁西站、溧水站火车票信息，抵达南京后十日内，在相关景区、景点现场购票，享受门票特别优惠，最低3.8折。 详情 >> （交汇点新闻） ...