回答:首先明确下定义：计算时间是指计算机实际执行的时间，不是人等待的时间，因为等待时间依赖于有多少资源可以调度。首先我们不考虑资源问题，讨论时间的预估。执行时间依赖于执行引擎是 Spark 还是 MapReduce。Spark 任务Spark 任务的总执行时间可以看 Spark UI，以下图为例Spark 任务是分多个 Physical Stage 执行的，每个stage下有很多个task，task 的...
silenceboy
|
918人阅读
...多年从事移动互联网相关运维工作，带领团队维护数百台服务器，拥有丰富的故障排查和性能优化实战经验，擅长业务拆分，高可用架构设计。 大家好，我叫汤金城，今天和大家分享一下我在公司业务方面故障排查遇到的一些...
...提高用户访问的响应速度和成功率。解决因分布、带宽、服务器性能带来的访问延迟问题，适用于站点加速、点播、直播等场景。（本章节部分内容摘引自：1.2 [CDN的基本工作过程][1] - 51CTO.COM）最简单的CDN网络由一个DNS服务器和...
...存在差异，进一步可以将常用操作（如启动停止，更新，移动主机）等等包装起来，为操作人员提供一个标准的 CLI 工具，将复杂的生产环境操作变成程序。 同样道理，我们也可以按代码生成一个开发环境的定义，用一套工具...
...提高用户访问的响应速度和成功率。解决因分布、带宽、服务器性能带来的访问延迟问题，适用于站点加速、点播、直播等场景。（本章节部分内容摘引自：1.2 [CDN的基本工作过程][1] - 51CTO.COM）最简单的CDN网络由一个DNS服务器和...
...rnal-dns除了支持公共的DNS服务（如route53），还支持内部DNS服务器（如bind9），而external-lb目前支持F5设备。除此之外，Rancher内置的负载均衡是基于Haproxy实现的，支持L4-L7。 本次分享，我将会以概念介绍原理讲解并穿插一些实际案...
...果这位伟大的政治家和发明家活在我们的现代世界，也许服务器停机也会进入这个名单。不管底层技术再怎么好，也不管托管提供商再多么能干，云总是会发生故障。以下这个名单恐怕是这些公司不想看到的：CRN的2014年前10大云...
...量压力。我们普通计算机的网卡，是1Gbps的带宽。如果是服务器，现在有10Gbps的网卡（万兆网卡）。如果优酷有一台超级服务器，那么，这台超级服务器就需要4000块万兆网卡，而且必须百分之百跑满速度，才能够实现这1千万用...
...一下: Origin Server：源站，也就是做 CDN 之前的客户真正的服务器。User：访问者，也就是问网站的网民。Edge Server：CDN 的服务器，不单指边缘服务器，这个之后细说。在 CDN 中，还有 3 个一英里的概念，即 First Mile、Middle M...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
ernest
rose
ernest
邱勇
崔晓明
