CARNet Wi-Fi Independent Resultados de la prueba Comparación de puntos de...

9
RESUMEN EJECUTIVO La red croata académica y de investigación (Croatian Academic and Research Network - CARNet) hace poco realizó una prueba independiente de rendimiento de Wi-Fi, que mostró los mejores puntos de acceso (AP) 802.11ac y 802.11n del mundo dentro de un entorno real, de gran capacidad e interferencia en aula. Mediante el uso de herramientas de prueba estándar en la industria, se sometió a presión a 19 AP en varios escenarios de prueba progresivos que incluían 12, 23, 36, y 60 clientes, lo cual aumentaba los clientes para cada prueba de throughput. Máximo throughput TCP agregado para una mezcla de clientes 802.11ac y 802.11n que incluía dispositivos portátiles y móviles de una, dos y tres bandas. Cada prueba se realizó tres veces con el mayor resultado registrado. Los proveedores quedan invitados a participar activamente en la prueba con el último código públicamente disponible para el dispositivo que se someta a la prueba (DUT, por sus siglas en inglés) y la opción de elegir sus propios canales y ancho de canal para la prueba, sin que se requiera encriptación. Los resultados de la exhaustiva prueba fueron que los AP para Smart Wi-Fi de Ruckus consistentemente superaron en rendimiento a todos los dispositivos bajo prueba, y obtuvieron las puntuaciones más altas en casi todos los escenarios de prueba. PUNTOS DESTACADOS DE LA PRUEBA 19 puntos de acceso 802.11n y 802.11ac de clase empresarial sometidos a presión en entornos de prueba Mezcla de .11ac y .11n único, dual y de clientes de tres bandas dentro del aula Cada AP probado en cada lado de mampostería de 5dB Cantidad cada vez mayor de clientes (12, 23, 36 y 60) usados con cada prueba realizada tres veces Throughput TCP agregado mayor registrado al usar la última versión de prueba IxChariot Sólo código públicamente disponible CARNet Wi-Fi Independent Resultados de la prueba Comparación de puntos de acceso Ruckus R700 Ruckus R500 Cisco 2700 Meraki MR34 Cisco 3700 HP 560 Cisco 1700 HP 525 Aerohive 230 Aruba 225 Prueba 802.11ac de 60 clientes 107 80 65 58 56 53 52 49 22 18 Throughput TCP agregado(Mbp) Mayo 2015

Transcript of CARNet Wi-Fi Independent Resultados de la prueba Comparación de puntos de...

RESUMEN EJECUTIVO

La red croata académica y de investigación (Croatian Academic and Research Network - CARNet) hace poco realizó una prueba independiente de rendimiento de Wi-Fi, que mostró los mejores puntos de acceso (AP) 802.11ac y 802.11n del mundo dentro de un entorno real, de gran capacidad e interferencia en aula.

Mediante el uso de herramientas de prueba estándar en la industria, se sometió a presión a 19 AP en varios escenarios de prueba progresivos que incluían 12, 23, 36, y 60 clientes, lo cual aumentaba los clientes para cada prueba de throughput.

Máximo throughput TCP agregado para una mezcla de clientes 802.11ac y 802.11n que incluía dispositivos portátiles y móviles de una, dos y tres bandas. Cada prueba se realizó tres veces con el mayor resultado registrado.

Los proveedores quedan invitados a participar activamente en la prueba con el último código públicamente disponible para el dispositivo que se someta a la prueba (DUT, por sus siglas en inglés) y la opción de elegir sus propios canales y ancho de canal para la prueba, sin que se requiera encriptación.

Los resultados de la exhaustiva prueba fueron que los AP para Smart Wi-Fi de Ruckus consistentemente superaron en rendimiento a todos los dispositivos bajo prueba, y obtuvieron las puntuaciones más altas en casi todos los escenarios de prueba.

PUNTOS DESTACADOS DE LA PRUEBA• 19 puntos de acceso 802.11n y 802.11ac de clase

empresarial sometidos a presión en entornos de prueba

• Mezcla de .11ac y .11n único, dual y de clientes de tres bandas dentro del aula

• Cada AP probado en cada lado de mampostería de 5dB

• Cantidad cada vez mayor de clientes (12, 23, 36 y 60) usados con cada prueba realizada tres veces

• Throughput TCP agregado mayor registrado al usar la última versión de prueba IxChariot

• Sólo código públicamente disponible

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

Ruc

kus

R70

0R

ucku

s R

500

Cis

co 2

700

Mer

aki M

R34

Cis

co 3

700

HP

560

Cis

co 1

700

HP

525

Aero

hive

230

Arub

a 22

5

Prueba 802.11ac de

60 clientes

107

80

6558 56 53 52 49

2218

Thro

ughp

ut T

CP a

greg

ado(

Mbp

)

Mayo 2015

page 2

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

Todos los fabricantes de Wi-Fi fueron invitados a traer su AP elegido, sin limitaciones sobre el tipo o la cantidad de AP que podían ser probados en solo día. Cada uno de los siguientes proveedores eligió enviar un ingeniero para las pruebas con su equipo en mano: Aerohive, Cisco, HP, y Ruckus. También se brindó a cada proveedor un ciclo de prueba para probar que su AP funcionara según lo esperado y tuviera la oportunidad de optimizar su configuración para el rendimiento.

Se realizó la descarga de pruebas de troughput mediante el uso un archivo de1MB transferido y la última versión de IxChariot de manera secuencial desde un único AP a 13, 23, 36, 60, y 36 clientes (distribuidos). Para la prueba 36 (distribuida), los dispo-sitivos de los clientes fueron dispuestos en un patrón en arco de 270º . Los 60 clientes fueron asociados al AP que se sometió a prueba antes de comenzar. La compensación de banda de los clientes pudo ser realizada de manera automática por el AP, o de forma manual por el equipo técnico en el sitio. Se realizaron cinco pruebas diferentes y se registró el mejor resultado:

Prueba 1: 13 clientes (una mezcla de 802.11ac y 802.11n)

Prueba 2: agrega clientes 10 802.11n

Prueba 3: agrega clientes 13 802.11n

Prueba 4: agrega clientes 24 802.11n

Prueba 5: distribuye 36 clientes en un patrón de arco de 270o

CARNETCARNet es una institución pública que facilita el progreso de las personas y la sociedad a través del uso de las nuevas tecnologías de la información. Las instituciones educativas de nivel primario y secundario pueden aprovechar los servicios de CARNet, que incluyen tecnologías de la información y la comu-nicación y su aplicación en redes e infraestructura educativa. CARNet incluye:

• Más de 240 miembros de la comunidad académica

• Más de 1.380 escuelas de educación primaria y secundaria

• Más de 2.320 ubicaciones conectadas a través de la red CARNet

Para obtener más información, visite: http://www.carnet.hr/en

Dual-Band Devices Under TestPROVEEDOR MODELO PHY PUNTUACIÓN*

Aerohive 121 802.11n

Aerohive 230 802.11ac

Aerohive 330 802.11n

Aruba 225 802.11ac

Cisco 1700 802.11ac

Cisco 2700 802.11ac

CIsco 3700 802.11ac

HP 430 802.11n

HP 525 802.11ac

HP 560 802.11ac

Meraki MR34 802.11ac

Ruckus 7372 802.11n

Ruckus 7982 802.11n

802.11nRuckus R300

Ruckus R500 802.11ac

Ruckus R700 802.11ac

RESULTADO

38,16 Mbps

42,68 Mbps

54,45 Mbps

67,84 Mbps

54,50 Mbps

83,56 Mbps

76,21 Mbps

61,43 Mbps

37,67 Mbps

65,09 Mbps

56,00 Mbps

91,27 Mbps

85,23 Mbps

95,24 Mbps

122,16 Mbps

137,00 Mbps

Ubiquiti Uni-Fi Pro 802.11n

Xirrus XR520 802.11n

Xirrus XR430 802.11n

Tx/Rx:SS

2x2:2

3x3:3

3x3:3

3x3:3

3x3:2

3x4:3

4x4:3

3x3:2

2x2:2

3x3:3

3x3:3

2x2:2

3x3:3

2x2:2

2x2:2

3x3:3

2x2:2

2x2:2

3x3:3

15

14

13

8

12

6

7

10

16

9

11

4

5

3

2

1

No aplica

No aplica

No aplica

* Results from 36 (distributed) client testing. (n/a=DUT unable to complete test).* Resultados de pruebas con 36 clientes (distribuidos) .(n/a = puntos de acceso que no pudieron completar la prueba)

page 3

Participación

Dispositivos de clientesSe utilizó una mezcla real de dispositivos móviles (un total de 60), tabletas, y computadoras portátiles, cada uno con especificaciones de Wi-Fi y sistemas operativos diferentes.

Access Point Details

121 802.11n Sí 2x2:2

230 802.11ac Sí 3x3:3

330 802.11n Sí 3x3:3

225 802.11ac Sí 3x3:3

1700 802.11ac Sí 3x3:2

2700 802.11ac Sí 3x4:3

3700 802.11ac Sí 4x4:3

430 802.11n Sí 3x3:2

525 802.11ac Sí 2x2:2

560 802.11ac Sí 3x3:3

MR34 802.11ac Sí 3x3:3

7372 802.11n Sí 2x2:2

7982 802.11n Sí 3x3:3

R300 802.11n Sí 2x2:2

R500 802.11ac Sí 2x2:2

R700 802.11ac Sí 3x3:3

Uni-Fi Pro 802.11n Sí 2x2:2

XR520 802.11n Sí 2x2:2

Aerohive

Aerohive

Aerohive

Aruba

Cisco

Cisco

Cisco

HP

HP

HP

Meraki

Ruckus

Ruckus

Ruckus

Ruckus

Ruckus

Ubiquiti

Xirrus

Xirrus XR4430 802.11n Sí 3x3:3

Fabricante Modelo PHY Banda dual TxR:SS

Client Device Details

Samsung S-SM-T230

Samsung S-SM-T235

Samsung S-SM-T700

Samsung S-SM-T705

Samsung S-SM-T800

Samsung S-SM-T805

Samsung S-SM-N910C

Samsung S-SM-P600

Samsung N8000

iPad 3

iPad 4

MacBook Pro 15” (2011)

Computadoras portátiles Lenovo X200

Computadoras portátiles Lenovo T400

1

1

2

1

1

1

1

1

6

4

1

1

10

14

15 HP Pro Tablet 610 G1

Fabricante y modeloCant. 802.11n 802.11ac 20MHz 40MHz 80MHz 1SS 2SS 3SS 802.11h

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

APÉNDICE

page 4

Entorno de pruebaLos AP fueron ubicados fuera del aula, separados de los dispositivos de los clientes, que estaban dentro del aula, por medio de una simple mampostería con una pérdida medida de 5dB. El aula medía aproximadamente 12 metros (~39 pies) por 10 metros (~33 pies). Se le brindó a cada proveedor un ciclo de prueba para probar que su AP funcionara según lo esperado y tuviera la oportunidad de optimizar su configuración para el rendimiento.

Criterios de evaluaciónLos criterios a ser evaluados incluyeron un throughput maximizado para todos los clientes de la prueba. Se realizó la descarga de pruebas de troughput mediante el uso un archivo de1MB transferido y la última versión de IxChariot de manera secuencial desde un único AP a 13, 23, 36, 60, y 36 clientes (distribuidos). Para la prueba 36 (distribuida), los dispositivos de los clientes fueron dispuestos en un patrón en arco de 270. Los 60 clientes fueron asociados al AP que se sometió a prueba antes de comenzar. La compensación de banda de los clientes pudo ser realizada de manera automática por el AP, o de forma manual por el equipo técnico en el sitio.

Reglas• Las pruebas deben estar ordenadas antes de comenzar: 13,

23, 36, 60, 36 (distribuidas).

• Se brindó una versión de evaluación a cada proveedor, si lo solicitaba.

• Si una sesión TCP para clientes falla en cualquier prueba, se considera que esa prueba falló y que el AP sometido a prueba no continúa a la próxima ronda de prueba (con un mayor número de clientes).

• Cada prueba se realiza tres veces y se registra el número más alto (en Mbps).

• Cada proveedor puede elegir su(s) propio(s) canal(es) y banda de canal para la prueba.

Entorno RFNo se realizó esfuerzo alguno para "limpiar" el entorno RF, dado que las distribuciones reales deben hacerle frente a niveles de interferencia modulada y no modulada aleatorios y, a veces, incontrolables. La red de Wi-Fi de banda dual de CARNet y los sensores de movimiento de 2.4GHz permanecieron en funcio-namiento durante la prueba.

Antes de comenzar la prueba, el dispositivo USB de análisis de espectro Wi-Spy DBx de MetaGeek y el software Chanalyzer se usaron para visualizar la banda 2.4GHz ISM y las bandas 5GHz UNII. Se muestran ilustraciones a continuación.

2.4GHz antes de comenzar la prueba.

5GHz antes de comenzar la prueba.

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

APÉNDICE

page 5

La lista completa de puntuación numérica y throughput se

muestra a continuación.

RESULTADOS DE LAS PRUEBASPrueba n. ° 1: Prueba con 13 ClientesLos clientes usados en la prueba se muestran en el siguiente cuadro.

Prueba n. ° 1: Resultados con 13 Clientes

13 Client TestN. ° de cliente Tipo PHY ¿Banda dual?

Cliente 1 Samsung S-SM-T230 802.11n 1x1:1 Sí

Cliente 2 Samsung S-SM-T235 802.11n 2x2:2 Sí

Cliente 3 al 4 Samsung S-SM-T700 802.11ac 2x2:2 Sí

Cliente 5 Samsung S-SM-T705 802.11ac 2x2:2 Sí

Cliente 6 Samsung S-SM-T800 802.11ac 1x1:1 Sí

Cliente 7 Samsung S-SM-T805 802.11ac 1x1:1 Sí

Cliente 8 Samsung S-SM-N910C 802.11ac 2x2:2 Sí

Cliente 9 Samsung S-SM-P600 802.11ac 2x2:2 Sí

Clientes 10 al 13 Samsung N8000 802.11n 1x1:1 Sí

13 Client Test: Full Results,NumericPuntuación Fabricante Modelo de AP Resultado (Mbps)

1 Ruckus R500

2 Ruckus R700

3 Aruba 225

4 Meraki MR34

5 Cisco 3700

6 Aerohive 330

7 HP 560

8 Ruckus 7982

9 HP 525

10 Cisco 1700

11 Ubiquiti Uni-Fi Pro

12 Ruckus 7372

13 Cisco 2700

14 Aerohive 230

15 Aerohive 121

16 HP 430

17 Ruckus R300

18 Xirrus XR4300

19 Xirrus XR520

213,26

187,69

175,00

168,19

162,66

158,92

153,48

144,87

141,74

139,89

130,78

126,80

123,82

119,52

108,10

89,06

86,00

85,58

25,90

Mbps

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

APÉNDICE

page 6

La lista completa de puntuación numérica y throughput se

muestra a continuación.

Prueba n. ° 2: Prueba con 23 ClientesLos clientes extras agregados para esta prueba se muestran en el siguiente cuadro.

Prueba n. ° 2: Resultados con 23 Clientes

13 Client TestN. ° de cliente Tipo PHY ¿Banda dual?

Cliente 14 Samsung N8000 802.11n 1x1:1 Sí

Clientes 15 al 16 iPad 3 802.11n 1x1:1 Sí

Clientes 17 al 23 HP Pro Tablet 610 802.11n 2x2:2 Sí

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

Ruckus

Ruckus

Meraki

Aruba

Ruckus

Cisco

Ruckus

HP

Cisco

Aerohive

Ubiquiti

Cisco

Ruckus

Aerohive

HP

Xirrus

Aerohive

HP

Xirrus

Xirrus

R300

R500

R700

MR34

225

7372

3700

7982

560

2700

330

Uni-Fi Pro

1700

121

430

XR4430 (1 radio)

230

525

XR4430 (3 radios)

XR520

179,59

174,92

126,30

124,09

105,73

104,67

104,36

103,03

99,41

98,66

95,94

94,17

78,90

77,29

76,27

66,15

62,74

58,00

53,63

0,00*

23 Client Test: Full Results,NumericPuntuación Fabricante Modelo de AP Resultado (Mbps)

Mbps

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

APÉNDICE

page 7

La lista completa de puntuación numérica y throughput se

muestra a continuación.

Prueba n. ° 3: Prueba con 36 ClientesLos clientes extras agregados para esta prueba se muestran en el siguiente cuadro.

Prueba n. ° 3: Resultados con 36 Clientes

36 Client TestN. ° de cliente Tipo PHY ¿Banda dual?

Clientes 24 al 25 iPad 3 802.11n 1x1:1 Sí

Cliente 26 iPad 4 802.11n 1x1:1 Sí

Cliente 27 Samsung N8000 802.11n 1x1:1 Sí

Cliente 28 MacBook Pro 15” (2011) 802.11n 3x3:3 Sí

Clientes 29 al 36 HP Pro Tablet 610 802.11n 2x2:2 Sí

36 Client Test: Full Results,NumericPuntuación Fabricante Modelo de AP Resultado (Mbps)

1 Ruckus

2 Ruckus

3 Ruckus

4 Ruckus

5 Ruckus

6 Cisco

7 Cisco

8 Aruba

9 HP

10 HP

11 Meraki

12 Cisco

13 Aerohive

14 Aerohive

15 Aerohive

16 HP

R700

R500

R300

7372

7982

2700

3700

225

560

430

MR34

1700

330

230

121

525

137,00

122,16

95,24

91,27

85,23

83,56

76,21

67,84

65,09

61,43

56,00

54,50

54,45

42,68

38,16

37,67

Mbps

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

APÉNDICE

page 8

La lista completa de puntuación numérica y throughput se

muestra a continuación.

Prueba n. ° 4: Prueba con 60 ClientesLos clientes extras agregados para esta prueba se muestran en el siguiente cuadro

Prueba N.° 4:Resultados con 60 Clientes

60 Client TestN. ° de cliente Tipo PHY ¿Banda dual?

Clientes 37 al 46 Computadora portátil Lenovo X200 802.11n 3x3:3 Sí

Clientes 47 al 60 Computadora portátil Lenovo T400 802.11n 3x3:3 Sí

60 Client Test: Full Results,NumericPuntuación Fabricante Modelo de AP Resultado (Mbps)

1 Ruckus

2 Ruckus

3 Ruckus

4 Ruckus

5 Ruckus

6 Cisco

7 Meraki

8 HP

9 Cisco

10 Aerohive

11 HP

12 Cisco

13 HP

14 Aerohive

15 Aerohive

16 Aruba

7982

R700

7372

R300

R500

2700

MR34

430

3700

330

560

1700

525

121

230

225

113,65

107,06

87,85

84,50

80,25

64,48

57,70

57,06

55,68

55,17

53,35

51,66

49,28

36,14

21,52

17,78

Mbps

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

APÉNDICE

page 9

La lista completa de puntuación numérica y throughput se

muestra a continuación.

Prueba n. ° 5: Prueba con 36 Clientes (distribuidos)Se usaron los mismos clientes para esta prueba, dado que se utilizó la prueba estándar de 36 clientes. La diferencia es que los dispositivos de los clientes fueron distribuidos en forma de arco de 270 grados para que los AP tuvieran que alternar el envío de señal a los clientes en distintas direcciones.

Prueba N. °5: Resultados con 36 clientes (distribuidos)

36 Client Test (Distributed):Full Results, NumericPuntuación Fabricante Modelo de AP Resultado (Mbps)

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

Ruckus

Ruckus

Ruckus

Ruckus

Cisco

Meraki

Cisco

Ruckus

Aruba

Cisco

Aerohive

Aerohive

HP

Aerohive

HP

HP

R7982

R700

R300

7372

3700

MR34

2700

R500

225

1700

121

230

430

330

525

560

120,00

116,42

110,00

98,00

86,95

67,76

62,67

57,19

54,91

54,84

54,36

52,85

52,53

38,00

37,30

33,36

Mbps

CARNet Wi-Fi Independent

Resultados de la pruebaComparación de puntos de acceso

APÉNDICE

Ruckus Wireless, Inc. 350 West Java Drive Sunnyvale, CA 94089 USA Tel +1 (650) 265-4200 \ Fax +1 (408) 738-2065www.ruckuswireless.com

Copyright © 2015, Ruckus Wireless, Inc. Todos los derechos reservados. Ruckus Wireless y el diseño de Ruckus Wireless están registrados en la Oficina de patentes y marcas de Estados Unidos. Ruckus Wireless, el logotipo de Ruckus Wireless, BeamFlex, ZoneFlex, MediaFlex, FlexMaster, ZoneDirector, SpeedFlex, SmartCast, SmartCell, ChannelFly y Dynamic PSK son marcas comerciales de Ruckus Wireless, Inc. en Estados Unidos y otros países. Todas las demás marcas comerciales mencionadas en este documento o este sitio web son propiedad de sus respectivos dueños. Revisado en 2015