企业级Node.js开发

于QCon2013北京分享。关于在企业中进行Node实践中的一点经验。

Transcript

1. 企业级Node.js开发 阿⾥里巴巴数据产品中的Node.js实践 by @⽥田永强 1 13年4月22⽇日星期⼀一
2. ⾃自我介绍 • ⽥田永强/@朴灵 • 阿⾥里巴巴/数据平台/数据产品部/⼯工程师 • CNode社区成员 2 13年4月22⽇日星期⼀一
3. 演讲议程 • 数据产品 • 协作开发 • 质量保证 • 异构共存 3 13年4月22⽇日星期⼀一
4. 数据产品 4 13年4月22⽇日星期⼀一
5. 数据产品 4 13年4月22⽇日星期⼀一
6. 数据产品 4 13年4月22⽇日星期⼀一
7. 数据产品 4 13年4月22⽇日星期⼀一
8. 数据产品 4 13年4月22⽇日星期⼀一
9. 数据产品 4 13年4月22⽇日星期⼀一
10. 数据产品 4 13年4月22⽇日星期⼀一
11. 5 13年4月22⽇日星期⼀一
12. 5 13年4月22⽇日星期⼀一
13. 5 13年4月22⽇日星期⼀一
14. 5 13年4月22⽇日星期⼀一
15. 5 13年4月22⽇日星期⼀一
16. 业务特点 6 13年4月22⽇日星期⼀一
17. 业务特点 • 数据源（类型）多 6 13年4月22⽇日星期⼀一
18. 业务特点 • 数据源（类型）多 • 数据量⼤大 6 13年4月22⽇日星期⼀一
19. 业务特点 • 数据源（类型）多 • 数据量⼤大 • 分布式 6 13年4月22⽇日星期⼀一
20. Why Node? 7 13年4月22⽇日星期⼀一
21. Why Node? IO开销 花费CPU时钟周期 CPU Cache L1 3 CPU Cache L2 14 RAM 250 Disk 41000000 Net 240000000 7 13年4月22⽇日星期⼀一
22. Why Node? 7 13年4月22⽇日星期⼀一
23. Why Node? 0 75000000.00 150000000.00 225000000.00 300000000.00 区域 1 数据访问耗时图 l1 l2 ram disk net 7 13年4月22⽇日星期⼀一
24. Coding style • 团队JavaScript⽔水平参差不⻬齐 8 13年4月22⽇日星期⼀一
25. Coding style 8 13年4月22⽇日星期⼀一
26. Coding style JSHint 8 13年4月22⽇日星期⼀一
27. Coding style JSHint Code review 8 13年4月22⽇日星期⼀一
28. Coding style JSHint Code review merge 8 13年4月22⽇日星期⼀一
29. 代码复⽤用 9 13年4月22⽇日星期⼀一
30. 代码复⽤用 Copy & Parse 9 13年4月22⽇日星期⼀一
31. 代码复⽤用 Copy & Parse 9 13年4月22⽇日星期⼀一
32. 代码复⽤用 Copy & Parse 9 13年4月22⽇日星期⼀一
33. 代码复⽤用 9 13年4月22⽇日星期⼀一
34. 代码复⽤用 9 13年4月22⽇日星期⼀一
35. 代码复⽤用 项⺫⽬目1 9 13年4月22⽇日星期⼀一
36. 代码复⽤用 项⺫⽬目1 项⺫⽬目2 9 13年4月22⽇日星期⼀一
37. 代码复⽤用 项⺫⽬目1 项⺫⽬目2 项⺫⽬目3 9 13年4月22⽇日星期⼀一
38. 包管理 10 13年4月22⽇日星期⼀一
39. 包管理 { "name": "wechat", "version": "0.4.1", "description": "微信公共平台⾃自动回复接⼝口服务", "main": "index.js", "scripts": { "test": "make test" }, "dependencies": { "xml2js": "0.2.6", "ejs": ">=0.8.3", "bufferhelper": ">=0.2.0" }, "devDependencies": { "supertest": "*", "mocha": "*", "should": "*", "connect": "*", "jscover": "*" }, "author": "Jackson Tian", "license": "MIT" } 10 13年4月22⽇日星期⼀一
40. 包管理 10 13年4月22⽇日星期⼀一
41. 包管理 10 13年4月22⽇日星期⼀一
42. 社区模块问题 • 私有模块⽆无法应⽤用 • 模块质量良莠不⻬齐 • 版本控制存在⻛风险 • 模块安装速度⽆无法保障 11 13年4月22⽇日星期⼀一
43. 企业NPM 12 13年4月22⽇日星期⼀一
44. 企业NPM 12 13年4月22⽇日星期⼀一
45. 企业NPM 12 13年4月22⽇日星期⼀一
46. 企业NPM 12 13年4月22⽇日星期⼀一
47. 享受开源 13 13年4月22⽇日星期⼀一
48. 享受开源 13 13年4月22⽇日星期⼀一
49. 享受开源 单向同步 13 13年4月22⽇日星期⼀一
50. 享受开源 本地NPM 单向同步 13 13年4月22⽇日星期⼀一
51. 享受开源 本地NPM 项⺫⽬目 单向同步 13 13年4月22⽇日星期⼀一
52. 享受开源 本地NPM 项⺫⽬目 单向同步 私有模块 13 13年4月22⽇日星期⼀一
53. 享受开源 本地NPM 项⺫⽬目 单向同步 私有模块 13 13年4月22⽇日星期⼀一
54. 享受开源 本地NPM 项⺫⽬目 单向同步 私有模块 13 13年4月22⽇日星期⼀一
55. 享受开源 本地NPM 项⺫⽬目 单向同步 私有模块 公有模块 13 13年4月22⽇日星期⼀一
56. 享受开源 本地NPM 项⺫⽬目 单向同步 私有模块 公有模块 13 13年4月22⽇日星期⼀一
57. 14 13年4月22⽇日星期⼀一
58. 14 13年4月22⽇日星期⼀一
59. 14 13年4月22⽇日星期⼀一
60. 私有NPM 14 13年4月22⽇日星期⼀一
61. 项⺫⽬目1 私有NPM 14 13年4月22⽇日星期⼀一
62. 项⺫⽬目1 项⺫⽬目2 私有NPM 14 13年4月22⽇日星期⼀一
63. 项⺫⽬目1 项⺫⽬目2 项⺫⽬目3 私有NPM 14 13年4月22⽇日星期⼀一
64. 项⺫⽬目1 项⺫⽬目2 项⺫⽬目3 私有NPM 14 13年4月22⽇日星期⼀一
65. 质量保证 15 13年4月22⽇日星期⼀一
66. 质量保证 • 严格的单元测试 15 13年4月22⽇日星期⼀一
67. 质量保证 • 严格的单元测试 15 13年4月22⽇日星期⼀一
68. 质量保证 • 严格的单元测试 15 13年4月22⽇日星期⼀一
69. 质量保证 • 严格的单元测试 • 只挑选有单元测试的三⽅方模块 15 13年4月22⽇日星期⼀一
70. 质量保证 • 严格的单元测试 • 只挑选有单元测试的三⽅方模块 • 持续集成平台（Toast/Travis/jenkins） 15 13年4月22⽇日星期⼀一
71. 发布流程 16 13年4月22⽇日星期⼀一
72. 发布流程 merge 16 13年4月22⽇日星期⼀一
73. 发布流程 test merge 16 13年4月22⽇日星期⼀一
74. 发布流程 test merge deploy 16 13年4月22⽇日星期⼀一
75. 异常处理 17 13年4月22⽇日星期⼀一
76. 异常处理 test merge deploy JSHint Code review 17 13年4月22⽇日星期⼀一
77. 异常处理 test merge deploy JSHint Code review exception 17 13年4月22⽇日星期⼀一
78. 异常处理 test merge deploy JSHint Code review exception test case 17 13年4月22⽇日星期⼀一
79. 异常处理 test merge deploy JSHint Code review exception test case 17 13年4月22⽇日星期⼀一
80. 异构共存 18 13年4月22⽇日星期⼀一
81. 异构共存 Tair 18 13年4月22⽇日星期⼀一
82. 异构共存 Tair HSF 18 13年4月22⽇日星期⼀一
83. 异构共存 Tair HSF OTS 18 13年4月22⽇日星期⼀一
84. 异构共存 Tair HSF OTS TFS 18 13年4月22⽇日星期⼀一
85. 异构共存 Tair HSF OTS TFS CDN 18 13年4月22⽇日星期⼀一
86. 异构共存 Tair HSF OTS TFS CDN etc. 18 13年4月22⽇日星期⼀一
87. 异构共存 Tair HSF Node OTS TFS CDN etc. 18 13年4月22⽇日星期⼀一
88. 异构共存 Tair HSF Node HTTP RESTful OTS TFS CDN etc. 18 13年4月22⽇日星期⼀一
89. 异构共存 Tair HSF Node HTTP RESTful RPC OTS TFS CDN etc. 18 13年4月22⽇日星期⼀一
90. 异构共存 Tair HSF Node HTTP RESTful RPC MySQL协议 OTS TFS CDN etc. 18 13年4月22⽇日星期⼀一
91. 异构共存 Tair HSF Node HTTP RESTful RPC MySQL协议 etc. OTS TFS CDN etc. 18 13年4月22⽇日星期⼀一
92. 异构共存 Tair HSF Node HTTP RESTful RPC MySQL协议 etc. OTS TFS CDN etc. 18 13年4月22⽇日星期⼀一
93. 总结 19 13年4月22⽇日星期⼀一
94. 总结 • 严格⾃自律，让犯错变得困难 19 13年4月22⽇日星期⼀一
95. 总结 • 严格⾃自律，让犯错变得困难 • 单元测试与异常⽇日志，并驾⻬齐驱保障应⽤用 质量 19 13年4月22⽇日星期⼀一
96. 总结 • 严格⾃自律，让犯错变得困难 • 单元测试与异常⽇日志，并驾⻬齐驱保障应⽤用 质量 • 编码规范和代码审查，提升团队平均⽔水平 19 13年4月22⽇日星期⼀一
97. 总结 • 严格⾃自律，让犯错变得困难 • 单元测试与异常⽇日志，并驾⻬齐驱保障应⽤用 质量 • 编码规范和代码审查，提升团队平均⽔水平 • 私有NPM去粗取精，拥抱开源社区，回馈 开源社区 19 13年4月22⽇日星期⼀一
98. 总结 • 严格⾃自律，让犯错变得困难 • 单元测试与异常⽇日志，并驾⻬齐驱保障应⽤用 质量 • 编码规范和代码审查，提升团队平均⽔水平 • 私有NPM去粗取精，拥抱开源社区，回馈 开源社区 • 拥抱社区⽣生态，打造企业内开发⽣生态环境 19 13年4月22⽇日星期⼀一
99. Q& A 20 13年4月22⽇日星期⼀一
100. 资料链接 • https://npmjs.org/ • http://wiki.commonjs.org/wiki/CommonJS • http://visionmedia.github.io/mocha/ • https://github.com/visionmedia/should.js • https://travis-ci.org/ • https://david-dm.org/ • https://github.com/isaacs/npmjs.org • http://couchdb.apache.org/ • http://www.erlang.org/ • http://blog.nodejs.org/2013/03/11/node-v0-10-0-stable/ 21 13年4月22⽇日星期⼀一