Dell EMC PowerEdge R7525 内部视图散热器和内存角度
Dell EMC PowerEdge R7525 是您目前可以买到的最快的双路主流 x86 服务器。为了实现这一目标，Dell EMC 使用了许多不同的技巧。我们正在测试的配置具有 24 个 NVMe SSD，可构成令人印象深刻的存储阵列。除此之外，该服务器最多可以处理 AMD EPYC 7H12 280W TDP 64 核 CPU。这些与大约一年前推出时主要只为那些构建超级计算机的客户保留的 CPU 相同。增加服务器的吸引力的是包含一系列扩展选项，以进一步展示系统的功能。在我们的评论中，我们将深入了解细节并向您展示为什么我们对服务器印象深刻。
由于这些天我们的评论包含比往年更多的图像，因此我们希望将此部分分为硬件的外部视图和内部视图。
我们还有一个视频（上图），其中 B-roll 显示的角度比我们在网络上可以做的更多。与往常一样，我们建议在新浏览器中打开视频以收听或查看观看次数。快速说明一下，我们之前在我们的AMD PSB部分以及我们的160 PCIe 通道设计部分中为该系统制作了一些视频。
在戴尔发送的系统正面，我们看到一个带有小型状态屏幕的“精美”面板。这是一个可以配置的选项。坦率地说，这种外观与戴尔这一代的至强服务器共享，看起来很棒。这也很昂贵。标准功能还包括 USB 服务端口以及用于冷通道服务的监视器端口。该系统可以配置 Quick Sync 2，这是 Dell EMC 通过移动设备选项的快速设置，不要与英特尔的 QuickSync 混淆，后者是一种英特尔 GPU 视频转码技术。
Dell EMC PowerEdge R7525 内部视图前面板
在我们的测试系统前面，我们有 24 个 2.5 英寸的驱动器托架。Dell EMC 还提供其他产品，包括 SAS、SATA 以及更少的驱动器托架。有些人不想要这么多的驱动器托架连接，其他人肯定会想要尽可能多的存储空间。正如我们对 PowerEdge 所期望的那样，这是高度可配置的。
这款 AMD EPYC 服务器与英特尔至强服务器的直接不同之处在于，所有 24x NVMe SSD 托架都通过专用通道直接连接到主板。这总共需要 24 个 PCIe x4 通道，总共 96 个。96 是我们在当前第二代英特尔至强可扩展系统（如Dell EMC PowerEdge R740xd）中获得的总 PCIe 通道数 。这里最大的区别是我们不需要 PCIe 开关来达到这个 PCIe 通道数。另一个可能更深刻的区别在于，我们使用 EPYC 获得 PCIe Gen4 通道，而不是使用英特尔至强的传统 PCIe Gen3 通道。
Dell EMC PowerEdge R7525 内部视图 24x NVMe 背板
由于我们的内部概述部分很长，我们将在这里快速提及背板本身很有趣。戴尔在这里使用的是 24x 驱动器 PCB。市场上的许多其他供应商正在使用三个 8x 驱动器背板 PCB。这只是一个小的设计细节，当您查看大量服务器时会立即显现出来。
在系统的背面，我们获得了正常的 PowerEdge 灵活性。我们不想看任何一边，而是想专注于我们仍然得到的东西，即使是使用 96 个 PCIe Gen4 通道的 24x NVMe 驱动器。在像 PowerEdge R740xd 这样的系统中，我们的扩展非常有限。在这里，我们有两个全高和两个半高扩展插槽以及一个 OCP NIC 3.0 插槽。我们将在内部概述中对此进行更详细的介绍，但这里的一个独特功能是，包括两个 1GbE 端口（Broadcom）、两个 SFP+ 端口（英特尔）以及 iDRAC、USB 和 VGA 端口在内的任何 I/O连接到主板。戴尔采用真正的模块化设计。
Dell EMC PowerEdge R7525 后置 IO
在机箱后部的两侧，我们有 1.4kW 80Plus Platinum Dell EMC 电源。正如我们在功耗测试中看到的那样，考虑到可以在该系统中配置多少，可能需要更大的容量。
Dell EMC PowerEdge R7525 1.4kW 电源
另一个小问题是系统的后部有一个坚固的手柄。稍后可以将其移除，但如果需要，它也可以用于一些电缆管理作为固定点。如果使用薄型卡槽，则可能需要卸下此手柄以进行收纳。同样，这是一个小小的接触，但很高兴看到。
Dell EMC PowerEdge R7525 后把手
接下来，我们将查看系统内部，看看它在幕后提供了什么。
这是系统的快速浏览。我们已经讨论了前驱动器托架和背板。我们将从前部（如下图左图）到后部穿过系统内部。
Dell EMC PowerEdge R7525 带气流指南的内部视图
在背板后面，人们会立即注意到这些蓝色电缆的使用。每条电缆承载 8 个 PCIe Gen4 通道，或足以容纳两个 PCIe x4 NVMe SSD。这种设计的一个主要影响是可以重新路由 PCIe 通道。如果使用的是 SAS 控制器，因此不需要大量的前面板 PCIe 连接，这些通道可以重新用于在机箱的其他地方提供连接。
Dell EMC PowerEdge R7525 XGMI 电缆至 NVMe 背板
背板后面是风扇分区。风扇分区有六个可热插拔的风扇。如您所见，您还可以使用两个拉杆将整个风扇隔板移除。这在 YouTube 视频中简要演示。
Dell EMC PowerEdge R7525 内置高性能风扇
气流由模制导轨引导。在风扇后面，在黑色气流引导下，我们到达了系统的核心。
Dell EMC PowerEdge R7525 内部视图 无气流指南
在系统内部，我们有两个 AMD EPYC 7002 系列“罗马”处理器插槽 (SP3)。虽然我们正在审查 EPYC 7002 代的系统，但我们希望该服务器能够接受与插槽兼容的 EPYC 7003“米兰”代与那些推出一样，可能会在 2021 年第一季度推出。
Dell EMC PowerEdge R7525 内部视图散热器和内存角度
该服务器的独特功能之一是可以将系统配置为具有四个插口间极米 Infinity Fabric 链路和 128 个 PCIe Gen4 通道。或者，可以采用这些通道并配置三个插槽间极米 Infinity Fabric 链路，并获得 160x PCIe Gen4 通道，就像我们在我们的测试系统中所拥有的那样。这是一个可配置的选项，您可以看到此处的电缆接头被路由到 NVMe SSD。
Dell EMC PowerEdge R7525 XGMI 电缆
如果您想了解更多信息，我们为此功能制作了整篇文章和视频。在某些情况下，将在 AMD EPYC 7003 系列之后推出的下一代 Intel Xeon Scalable Ice Lake 服务器将仅支持每个插槽 64x PCIe Gen4 通道，总共 128 个通道。这是将这一可配置功能融入戴尔产品的创新方式，使其比下一代英特尔至强服务器更具可配置性。
对于每个 AMD EPYC CPU，我们获得 8 通道 DDR4-3200 内存配置，每个通道有两个 DIMM (2DPC) 操作。因此，8 通道 x 2 DIMM 每通道 x 2 插槽为我们提供了 32 个 DIMM 插槽。我们这里有 16 个 64GB ECC RDIMM，但每个处理器在技术上都可以支持 128GB 和 256GB LRDIMM（戴尔的配置选项发生了变化，在我们写这篇文章时没有更大的 DIMM，但我们确信更大的容量即将到来。）这意味着可以每个处理器获得高达 4TB 的内存，或者在服务器中获得最多 8TB 的内存。与第二代英特尔至强可扩展方面不同，这不会产生 M 或 L SKU 的额外成本，尽管我们介绍了 第二代英特尔至强可扩展 M SKU 已停产由于这种竞争，至强 L SKU 的价格较低。我们预计 Ice Lake Xeons 会重新考虑这种内存容量溢价，这在很大程度上是由于这场 AMD EPYC 竞争。Ice Lake Xeons 还将支持 8 通道 DDR4-3200，在这方面达到同等水平。
Dell EMC PowerEdge R7525 内部视图散热器和内存
在 PCIe 连接方面，我们的系统中有两个 PCIe 转接卡，提供半高和全高扩展插槽。即使使用 24x 前面板 NVMe SSD，我们也可以在这里获得额外的连接。正如我们在 EPYC 中已经看到的那样，下一代系统具有更多的 PCIe 连接，我们很快就会在 Ice Lake 中看到，而且我们最近在我们的Ampere Altra Arm 驱动的 Wiwynn Mt. 中进行了展示。翡翠服务器评论。
Dell EMC PowerEdge R7525 PCIe 转接卡
这些立管通过高密度连接器连接到主 PCB。这种设计进一步增加了平台的灵活性。传统的 x16 或 x32 转接卡插槽可能不适合主板。
Dell EMC PowerEdge R7525 内部提升板连接器
下面来看看主板。可以看到外边缘的电缆连接。在我们的系统中，这些连接到 NVMe SSD，但它们可以路由到其他地方以根据配置进行其他连接。更高密度的连接器在里面。然后我们将电池和 BMC 放在这些功能中。
Dell EMC PowerEdge R7525 内部 IDRAC 和 PCIe Riser 接头
我们在外部概述中提到了这一点，但可以看到主板停止的位置。它不会延伸到机箱的后部 I/O 部分。相反，所有后部 I/O 都通过可定制的提升板进行处理。例如，我们的基本 Broadcom 网络是通过其自己的 PCB 处理的。
Dell EMC PowerEdge R7525 内部 1GbE Broadcom LOM
在中间，我们得到了 OCP NIC 3.0。这在 PowerEdge 生态系统中是一件大事，因为这是下一代标准 NIC 外形。戴尔在专有 LOM 上采用这一点很高兴看到。
Dell EMC PowerEdge R7525 OCP NIC 3.0 插槽
我们的特定设备是双 10GbE SFP+ Intel X710，但我们已经看到了带有 100GbE NIC 的 OCP NIC 3.0 外形。我们这里有一个 PCIe Gen4 x16 链路，因此有足够的带宽，但是生产具有足够低功率来实现 2x 100GbE/1x 200GbE 连接的 NIC 仍然是业界正在进行的工作，在这种形式因素中。
英特尔 X710 DA2 OCP 网卡 3.0 端口
除了 NIC 之外，我们还在其自己的柔性 PCB 上安装了传统的后部 I/O。此 PCB 具有 USB、VGA、iDRAC 管理端口和机箱入侵等功能。同样，这很灵活，可以像系统的其余部分一样进行定制。
Dell EMC PowerEdge R7525 内部基本 IO 和入侵检测
虽然其中许多看起来像是服务器设计中的小进步，但它们加起来构成了一个几乎可配置的 2U 服务器。凭借高端核心数量、内存容量和 PCIe 连接，这实际上是 PowerEdge 系列中的旗舰 2U 双插槽服务器。戴尔并不总是这样推销它，但从我们看到的情况中可以清楚地看出这一点。
接下来，我们将在进入性能测试之前讨论测试配置和管理。
在我们的 PowerEdge R7525 测试配置中，我们有一个非常好的系统设置：
系统： Dell EMC PowerEdge R7525 24x NVMe 背板
CPU： 2x AMD EPYC 7H12
内存： 1TB 16x 64GB DDR4-3200 双列 ECC RDIMM
存储： 24x 1.6TB Intel DC P4610 NVMe SSD
网络：英特尔 XL710 双 SFP+ 10GbE OCP NIC 3.0
虽然我们拥有最高端的 CPU 和高端存储阵列，但还有许多其他配置选项。例如，可以为 2TB 内存获得 32 个 64GB DIMM。虽然这不在标准配置器中，但 CPU 本身支持高达 256GB LRDIMM 和每个插槽 4TB 的内存（在像这样的双插槽配置中为 8TB。）戴尔在其规格表上有但没有用于 128GB DDR4 LRDIMM 的在线配置器选项.
戴尔还为系统提供 PCIe Gen4 NVMe SSD，而这里的英特尔单元是 PCIe Gen3 驱动器。我们在系统中测试了Kioxia CM6，它以 PCIe Gen4 速度连接。戴尔还为此类系统提供了许多网络升级。
对于那些想知道的人，这里是系统拓扑的快速视图。
Dell EMC PowerEdge R7525 拓扑
我们很快就会注意到，Dell EMC 正在锁定与其系统相关的 AMD EPYC CPU。我们在我们的文章中对此进行了广泛的讨论：AMD PSB 供应商锁定 EPYC CPU 以提高安全性，但要付出代价。
这样做的一个影响是，运行此安全功能的戴尔系统中使用的 CPU 不能用于其他供应商的服务器，这可能会在服务器初始生命周期部署后产生电子垃圾。这是戴尔安全功能带来的权衡。
Dell EMC PowerEdge R7525 提供 Dell iDRAC 9。我们的测试服务器附带 iDRAC 9 Express，这是基本选项。通常，我们的 PowerEdge 审核单元随 Enterprise 一起提供，它具有启用 iKVM 等功能。因此，我们将展示我们最近的Dell EMC PowerEdge C6525 评测中的一些屏幕截图，以展示企业级的外观。登录 Web 界面后，会看到一个熟悉的登录屏幕。
Dell EMC PowerEdge R7525 IDRAC 9 登录
许多潜在买家感兴趣的该系统的一个重要方面是与现有戴尔管理工具的集成。由于这是 iDRAC 9，而且即使使用 AMD 平台，戴尔几年来一直在改进该解决方案，因此它的工作原理与英特尔至强服务器的预期相同。如果您拥有现有的至强基础架构，戴尔会透明地添加 AMD 节点。
Dell EMC PowerEdge R7525 IDRAC Express 仪表板
另一个值得注意的功能是能够通过 Web 界面设置 BIOS 设置。这是我们在 Dell EMC、HPE 和联想等顶级供应商的解决方案中看到的功能，但市场上的许多供应商都没有。
Dell EMC PowerEdge R7525 IDRAC BIOS 配置设置
iKVM 功能是当今任何服务器的必备功能，因为它在故障排除方面具有最佳 ROI 之一。iDRAC 9 具有多种 iKVM 控制台模式，包括 Java、ActiveX 和 HTML5。在这里，我们从 C6525 评论中提取了遗留 Java 版本的视图：
Dell EMC PowerEdge C6525 IDRAC 9 IKVM
现代服务器管理解决方案（例如 iDRAC）本质上是专门用于管理更大系统的嵌入式 IoT 系统。因此，iDRAC 有许多用于服务模块的配置设置，因此您可以设置正确的网络作为示例。这甚至包括详细资产跟踪等功能，以监控集群中的硬件。随着时间的推移，服务集群通常意味着配置可能会发生变化，而戴尔有解决方案来帮助 IT 的业务方面，例如跟踪资产。
Dell EMC PowerEdge R7525 IDRAC Express 系统仪表板
我们可能没有充分介绍这一点，但戴尔还有其他一些小功能。这里的例子是在下次启动时选择启动设备，如果您想启动到 iKVM 媒体进行服务或类似的东西，这一点很重要。戴尔拥有一个非常完善的解决方案，在功能的广度方面比白盒供应商高出一步。许多供应商提供基本设置，但戴尔提供的功能远不止于此。
Dell EMC PowerEdge C6525 IDRAC 9 IKVM BIOS
我们不喜欢的事实是企业版是我们服务器上的升级。对于标价超过 100,000 美元的配置，启用 iKVM 的额外 300 美元选项感觉就像是“镍和暗淡”的举动。即使使用即时折扣打折至 73,000 美元，该产品仍留有大量利润。在 2020 年及以后，iKVM 需要成为服务器上的标准功能，尤其是在 COVID 限制限制访问数据中心的情况下。这已成为工作场所的安全功能。
接下来，我们将看看性能，然后是功耗和我们的总结。
在本练习中，我们将使用旧版 Linux-Bench 脚本，这有助于我们查看多年来一直使用的跨平台“最小公分母”结果以及更新后的 Linux-Bench2 脚本的几个结果。
在这一点上，我们的基准测试会话需要数天才能运行，并且我们正在生成超过一千个数据点。我们还为希望了解其软件如何在最新硬件上运行的软件公司运行工作负载。因此，这是我们正在收集并可以公开共享的数据的一小部分样本。我们的立场始终是我们乐于提供一些免费数据，但我们也提供服务让公司在我们的实验室中运行自己的工作负载，例如我们的 DemoEval 服务。我们提供的是一个高度受控的环境，我们知道每一步都完全相同，并且每次运行都是在真实世界的数据中心而不是测试台上完成的。
我们将展示一些结果，并在本文中重点介绍一些有趣的数据点。
这是过去几年中最受欢迎的 STH 基准之一。任务很简单，我们有一个标准配置文件，来自 kernel.org 的 Linux 4.4.2 内核，并利用系统中的每个线程进行标准的自动生成配置。我们以每小时编译数来表示结果，以使结果更易于阅读：
AMD EPYC 7H12 V EPYC 7742 V Intel Linux 内核编译基准
在这里，我们可以看到 PowerEdge R7525 的性能略好于其他产品，因为它能够处理 AMD EPYC 7H12 SKU。此外，我们在此图表上有一些结果，例如双 Xeon E5-2670 (V1)、E5-2698 V3 和 E5-2699 V4 结果，只是为了提供一些整合率的感觉。即使在我们无法从 Xeon 到 EPYC 的优势中获得如此高的工作负载的情况下，我们仍然看到了 2.5:1 的整合率，即使是那些世代的高端部件。如果您有 PowerEdge R720 或 PowerEdge R730 服务器机架，则迁移到 R740 可能是一种增量升级，但 R7525 是一种升级类型，可以获得全新的性能等级。
多年来，我们一直在使用 c-ray 进行性能测试。这是一个非常流行的光线追踪基准测试，用于显示多线程工作负载下处理器的差异。我们将使用我们的 8K 结果，它在性能范围的这一端运行良好。
AMD EPYC 7H12 V EPYC 7742 C Ray 8K 基准测试
在这里快速说明一下，一些 AMD EPYC CPU 具有可配置的 TDP。所述EPYC 7742是一个很好的例子，是一个SKU所述的PowerEdge R7525可以利用为好。在竞争性基准测试中，这通常用于 225W TDP 而不是完整的 240W cTDP。在 PowerEdge R7525 中，系统可以冷却高达 280W TDP 的部件，因此我们可以利用这个额外的空间。在所有双插槽 AMD EPYC 平台上并非如此，因此它是 R7525 的一个差异化因素。
7-zip 是一种广泛使用的跨平台压缩/解压缩程序。我们在早期的 Windows 测试中就开始使用该程序。它现在是 Linux-Bench 的一部分。
AMD EPYC 7H12 V EPYC 7742 V Intel 7zip 压缩基准
退后一步，当我们查看第二代英特尔至强可扩展性能时，我们看到 64 核 AMD EPYC CPU 的性能要高得多。Platinum 8280 是对第一代 Platinum 8280 的适度升级。Xeon Gold 6258R 是一款类似的芯片，只有双插槽到插槽的 UPI 链接，并且作为对 AMD EPYC 7002 系列的回应，可以享受大约 60% 的折扣。
OpenSSL 广泛用于保护服务器之间的通信。这是许多服务器堆栈中的重要协议。我们首先看一下我们的符号测试：
AMD EPYC 7H12 V EPYC 7742 V Intel OpenSSL 标志基准
下面是验证结果：
AMD EPYC 7H12 V EPYC 7742 V Intel OpenSSL 验证基准
如果您使用的是 PowerEdge R740，那么 32、48 和 64 核 AMD EPYC 7002 部件可提供比双插槽 28 核 Skylake/Cascade Lake Xeon 可扩展系统更高的每插槽和每服务器性能。
国际象棋是一个有趣的用例，因为它几乎具有无限的复杂性。多年来，我们收到了许多要求恢复国际象棋基准测试的请求。我们一直在分析系统并准备开始分享结果：
AMD EPYC 7H12 V EPYC 7742 V. Intel Chess Benchmark
我们没有在这里展示这些，但可以看到 AMD 也有我们在AMD EPYC 7F52 基准评测和市场展望中介绍的频率优化部件。我们意识到我们专注于每个插槽而不是每个核心的性能。这是我们拥有的 64 核 CPU 和 PSB 功能的一个功能，限制了我们将实验室 CPU 交换到这些系统中的意愿。
我们想要共享的其他工作负载之一来自我们的 DemoEval 客户之一。我们有权发布结果，但正在测试的应用程序本身是闭源的。这是一个基于 KVM 虚拟化的工作负载，我们的客户端正在测试在给定时间在目标 SLA 下完成工作时可以在线的 VM 数量。每个 VM 都是一个独立的工作器。
AMD EPYC 7H12 V EPYC 7742 V Intel STH KVM STFB 工作负载 1
在我们的虚拟化测试中，我们得到了与其他图表类似的结果。虽然 Xeon CPU 可以利用 Intel Optane PMem 来获得更大的内存容量（基于 Cooper Lake 的第三代系统除外），但 EPYC 7002 系列可以使用商用 64GB DDR4 RDIMM 达到 1TB 的内存容量，并且无需专门的 L-SKU 即可超越此容量.
接下来，我们将讨论功耗，然后是我们的最终想法。
服务器中的冗余电源为1.4kW 单元。这些是 80Plus 白金效率额定单位。
Dell EMC PowerEdge R7525 1.4kW 电源
空闲：0.46kW
STH 70% CPU 负载：0.71kW
100% 负载：0.97kW
最大记录：1.1kW
有进一步扩展配置的空间，可以使这些数字高于我们实现的数字，但 1.4kW PSU 似乎是合理的。我们也开始使用 kW 而不是 W 作为我们报告功耗的基础。这是一项前瞻性功能，因为我们计划在不久的将来推出更高的 TDP 处理器。
请注意，这些结果是使用 208V Schneider Electric / APC PDU 在 17.5C 和 71% RH 下获得的。此处显示的测试窗口具有 +/- 0.3C 和 +/- 2% RH 差异。
接下来，我们将让 STH Spider 跟随我们的最终想法。
在 2018 年下半年，我们推出了 STH Server Spider 作为服务器系统能力所在的快速参考。我们的目标是开始快速直观地描述服务器所针对的参数类型。
STH Server Spider Dell EMC PowerEdge R7525
计算密度可能会让我们的一些读者感到惊讶，因为它是一个超快的系统。尽管我们得到了两个快速 CPU，但在 2U 的空间中却有 128 个这样的内核。相比之下，我们评测的 Dell EMC PowerEdge C6525是一个 2U 4 节点 (2U4N) 系统，它可以采用四倍密度的 AMD EPYC 7H12 CPU。这可能需要液体冷却，但如果您想要更高的密度，则有一些外形因素。PowerEdge R7525 展示的不仅仅是计算密度，还有更高端的存储和网络密度。对于许多人来说，这将是一个更加平衡的平台，以与超快的 CPU 保持一致。
自从我们在 AMD EPYC 7001“那不勒斯”一代中审查了最初的Dell EMC PowerEdge R7415以来，戴尔确实取得了进展 。这台机器的构建质量明显更好，使其更适合英特尔至强竞争。PowerEdge R7525 能够以超过 2:1 的比例整合同一代的英特尔至强节点。有人可能会争辩说，这比双Intel Xeon Gold 6258R或Platinum 8280节点使用更多的功率，但它也提供了更高的性能。
Dell EMC PowerEdge R7525 内部视图前面板
当您达到 2:1 的整合率时，经济将发生变革。不仅需要更少的数据中心机架空间，而且还需要更少的交换机端口、PDU 端口，甚至是 iDRAC 等基于每个节点许可的软件。阅读过我们的2021 Intel Ice Pickle 2021 如何成为关键时刻的聪明买家会知道，英特尔的下一个竞争性答案将在几个月后提供。有了 Ice Lake Xeons，我们很可能会看到 EPYC 7H12 的性能超越 Ice Lake 所能提供的性能。PCIe Gen4 等平台功能已经在 EPYC 中出现，但在 Xeon 方面还有几个季度。AMD 将在本季度晚些时候推出采用Zen3 架构的Milan统一更多的缓存设计，所以我们在 AMD EPYC 7H12 “Rome” 一代中越来越晚。尽管如此，今天转向 AMD 的商业案例非常强大。
Dell EMC PowerEdge R7525 内部视图散热器和内存角度
Dell EMC PowerEdge R7525 向 Dell Technologies 生态系统发出了强烈的信息。这是一个功能齐全的平台，允许对 AMD 感兴趣或已准备好 AMD 的客户进入平台，而不必牺牲平台。事实上，凭借 PowerEdge R7525，戴尔在 AMD EPYC 或英特尔至强方面拥有市场上最具前瞻性的平台之一。对于看到戴尔第一代 AMD EPYC 7001 产品并认为它们是 PowerEdge 平台的成本优化版本的客户而言，PowerEdge R7525服务器 将戴尔生态系统中的 AMD 平台提升到超越其英特尔至强平台所处的位置写这篇评论的时间。毫无疑问，这是一个大胆的声明，但这就是当今市场的状态。
【公司名称】四川旭辉星创科技有限公司
【代理级别】成都戴尔服务器工作站总代理
【销售经理】李经理
【联系方式】座机：028-85596747 手机：13438344046
【公司地址】成都市人民南路4段 桐梓林 商鼎国际2号楼1单元1913
请用微信扫描二维码
