Hardware Considerations for Architectural Design

Reference architecture and background for Nexentastor deployments

Transcript

1. Hardware  Considera-ons for Architectural  Design Andy  Benne9,  Craig  Morgan
2. SATA  Connec-vity  Issues
3. SAS  Narrow  and  Wide  ports
4. SAS  Switch  Block  Diagram
5. SAS  Pathways
6. External  SAS  Connector
7. Datapaths  (Ini-ator  to  Target)
8. Single  I/O  Hub  (IOH)  –  36  PCI-­‐E  Gen2  Lanes
9. Dual  I/O  Hub  (IOH)  –  72  PCI-­‐E  Gen2  Lanes
10. Example  PlaUorm:  X8DTH-­‐6F  Motherboard
11. Example  PlaUorm:  X8DTH-­‐6F  Motherboard • Onboard  LSI  SAS • 7  PCI-­‐E  Gen2  slots • 2x  IOH  Controllers • 12x  memory  slots – 192GB  max
12. JBOD  Design
13. JBOD  Design
14. RAID  Z2  Across  JBODS  for  resiliency 3  x  RAIDZ2  6  DRIVE  VDEVS
15. Dell  Reference  Architecture Dell  R710  Server   Up  to  288GB  RAM   Duel  Intel  5600  Series  Processors   8x  2.5  or  6  x  3.5  Internal  Bays   2x  8  PCI-­‐E  Slots  and  2x  4  PCI-­‐E  Slots  Gen  2   Onboard  LSI  SAS  Controller   (Requires  Firmware  update  to  IT  Mode)   Dell  6  Gbps  SAS  HBA  (Rebadged  LSI)  –  WIP  for  full  Dell  Support   Dell  Branded  Intel  ,  Qlogic  or  Emulex  Connec-vity  adaptors  –  Disable  Broadcom   Dell  MDS  1200  /  1220  SAS  JBODS   Dell  1200  JBOD  –  12x  3.5  SAS    –  300-­‐600  GB  15K  /  2TB  Nearline   Dell  1220  JBOD  –  24x  2.5  SAS  –  146-­‐600  GB  15K  /  900GB  10/  1TB  Nearline   Pliant  Samsung  SSD  Support  ,  STEC    WIP  for  full  Dell  Support
16.  HP  Reference  Architecture HP  DL380  G7  Server   Up  to  192  GB  RAM   Duel  Intel  5600  Series  Processors   8x  2.5  or  6  x  3.5  Internal  Bays   6x  8  PCI-­‐E  Slots     HP  6  Gbps  SAS  HBA  (Rebadged  LSI)  –  WIP  for  full  HP  Support   HP  Branded  Intel  ,  Qlogic  or  Emulex  Connec-vity  adaptors   HP  D2600  /  D2700  SAS  JBODS   HP  D2600  JBOD  –  12x  3.5  SAS    –  300-­‐600  GB  15K  /  2TB  Nearline   HP  D2700  JBOD  –  24x  2.5  SAS  –  146-­‐600  GB  15K  /  900GB  10/  1TB  Nearline   Samsung  SSD  Support  ,  STEC    WIP  for  full  HP  Support
17.  Supermicro  Reference  Architecture Supermicro  Head  Nodes  Intel  5600  Series  Dual  Processor   SC829TQ-­‐R920LPB  2U  8  Bay  Headnode  Chassis  –  8  x  3.5  Direct  Cabled  No  Expander     X8DT6-­‐F  Mid  range  board  with  3  x  8  PCI-­‐E  Slots  192GB  RAM  Single  IOH   X8DTH-­‐6F  High  end  Board  with  7x  PCI-­‐E  x8  Slots  192  GB  RAM  Dual  IOH Supermicro  Head  Node  Ultra  Performance  8  Way    Intel  7500  Series     CSE-­‐758TS-­‐R2800BP    5U  Chassis  16  x  2.5  Integrated  Drive  slots   X8OBN-­‐F  Ultra  High  end  1TB  RAM  10x  PCI-­‐8  Slots   Supermicro  E26  JBOD  Range  SAS  JBODS  –  6Gbps  SAS   SC216-­‐E26  24  Bay  2.5   SC826-­‐E26  12  Bay  3.5   SC836-­‐E26  16  Bay  3.5   SC846-­‐E26  24      Bay  3.5   SC847-­‐E26  45  Bay  3.5   SC417-­‐E26  72  Bay  2.5  
18.  All  SSD  Reference  Architecture  SSD  Performance  Architecture   SC216A-­‐R900LPB  3.5  Direct  Mini  SAS  8087    Cabled  No  Expanders     X8DTH-­‐6F  High  end  Board  with  7x  PCI-­‐E  x8  Slots  192  GB  RAM  Dual  IOH   3x  LSI  9205  -­‐8E  SAS  HBA  Controllers   Several  Drive  manufacturers  in  Cer-fica-on  up  to  1.6TB  per  SSD   Why  9205-­‐8E  not  the  9200-­‐8E? New  Fusion-­‐MPT  architecture  more  than  550,000  I/Os  per  second 3  x  Direct  cabled  controllers  in  order  to  maximise    throughput Expanders  thro9le  performance  –     Expansion  is  best  with  addi-onal  Mul-path  LSI  cards Proposed  scaleable  SSD  Solu-on  to  be  tested  is  the  72  Bay SC417-­‐E26  –  Up  to  115TB  Pure  SSD  Storage  per  appliance  using  6  HBA’s
19. SAS  SSD  Solu-ons   Vendor Model Type Capacity Cer-fied Use Hitachi SSD  400S SLC 100GB Yes ZIL Hitachi SSD  400M MLC 200-­‐400GB No L2ARC STEC ZeusRAM RAM/  Flash 8GB Yes ZIL STEC Zeus  IOPS SLC 100GB Yes ZIL STEC Zeus  IOPS MLC 400GB Yes L2ARC Toshiba MK1001 SLC 100GB Yes ZIL  /L2ARC Smart  Modular Op-mus MLC 200  GB-­‐1.6TB No L2ARC Sandisk  /  Pliant LBxxxS  Series SLC 100GB No ZIL Sandisk  /  Pliant LBxxxM Series MLC 200-­‐800GB No L2ARC Seagate Pulsar  2 MLC 100  -­‐  800GB No L2ARC Seagate   Pulsar  XT.2 SLC 100  GB No ZIL OCZ Talos MLC 230  -­‐  930GB Yes L2ARC Pliant LS150S SLC 150GB Yes ZIL
20.  Typical  System  Designs Typical  Small  Generic  ConfiguraCon SC829TQ-­‐R920LPB  2U  8  Bay X8DT6-­‐F  board  with  3  x  8  PCI-­‐E  Single  IOH 2x  Intel  5620  Processor 24GB  RAM   Talos  0CZ  230  MLC  SSD  for  ZIL Talos  OCZ  230  MLC  SSD  for  L2ARC Pool  Configura-on  as  required. Typical  Medium  Generic  ConfiguraCon SC829TQ-­‐R920LPB  2U  8  Bay X8DT6-­‐F  board   2x  Intel  5620  Processor 48GB  RAM   Toshiba  MK100  SLC  ZIL Talos  OCZ  230-­‐  460  GB  MLC  SSD  for  L2ARC LSI  SAS  HBA Pool  Configura-on  as  required. Typical  Large  Generic  ConfiguraCon SC829TQ-­‐R920LPB  2U  8  Bay  Headnode   X8DTH-­‐6F  High  end  Board   2x  Intel  5640  Processors 96GB  RAM  +   STEC  ZeusRAM  ZIL  Device 2x  +  Talos  OCZ  230-­‐  460  GB  MLC  SSD  for  L2ARC Mul-ple  LSI  SAS  HBA Pool  Configura-on  as  required. Typical  Large  Generic  ConfiguraCon SC829TQ-­‐R920LPB  2U8  Bay  Headnode X8DTH-­‐6F  High  end  Board   2x  Intel  X5660 96GB  RAM  +   STEC  ZeusRAM  ZIL  Device 2x  +  Talos  OCZ  230-­‐  460  GB  MLC  SSD  for  L2ARC Mul-ple  LSI  SAS  HBA