ニコニコAndroid(サーバ編) - Scalaを業務で使って

1. ニコニコAndroid- サーバ編 -間島大智

2. 目次•ニコニコAndroidサーバって何？•Scalaいいところ・わるいところ•サーバチームの仕事の流れ

3. 間島大智•株式会社ドワンゴ•ニコニコAndroidサーバチーム•2012年新卒入社

4. 間島大智•株式会社ドワンゴ•ニコニコAndroidサーバチーム•2012年新卒入社

5. 間島大智•株式会社ドワンゴ•ニコニコAndroidサーバチーム•2012年新卒入社•化学の知識を活用できるWebサービスのプロジェクトまだですかね

6. ニコニコAndroidサーバって？社内向けAPI・DBニコニコAndroidサーバAndroidアプリau STBアプリ様々なアプリでニコニコを使うために必要なAPIを提供

7. プロジェクトの歴史•2012/02 プロジェクト発足•2012/08 au STBアプリリリース•2012/11 Androidアプリリリース•74 API•330万リクエスト/日

8. サーバ側メンバー• mashijp (github)• @kozo1215• @mtgto• @mitikage• @kimwoonsung• インフラ2人

9. 環境•言語: Scala•フレームワーク: Play Framework 2.0•IDE: IntelliJ IDEA 11, 12•CI: Jenkins社内初

10. ニコニコAndroidサーバって？

11. ニコニコAndroidサーバの役目社内向けAPI・DBニコニコAndroidサーバAndroidアプリau STBアプリこの位置に求められることって…？

12. ニコニコAndroidサーバに求められること社内向けAPI・DBニコニコAndroidサーバAndroidアプリau STBアプリアプリにとって使いやすいAPIを提供すること

13. 使いやすいAPIとは?•用語が統一されている•用語が直感的に理解できる•内部的な細かい仕様を知らなくていい•ドキュメント化されている

14. •用語が統一されている•用語が直感的に理解できる•内部的な細かい仕様を知らなくていい逆にこの３つを満たしていないAPIって？

15. 社内APIを変えればいい？長い歴史があるもの(社内API)にはどうしてもわかりにくい用語・仕様がまじってしまう社内APIを修正すればいい…？

16. そう簡単には変えられない•社内APIは多数の社内サービスが既に使っている•仕様を変更するのは容易ではない

17. サーバで内部仕様を吸収mylist.list deﬂist.listmylist.remove deﬂist....GET /xxx/mylists/:id社内向けAPI・DBニコニコAndroidサーバAndroidアプリau STBアプリわかりやすい！モデルもScalaで再定義

18. ドメイン層Androidアプリau STBアプリインフラストラクチャ層社内向けAPI・DBAPI層ドメイン駆動設計による浄化社内APIを叩くことだけに専念ビジネスロジックだけに専念リクエストの処理だけに専念明確にレイヤー分離された設計をしています

19. 社内向けAPIドキュメント•Conﬂuence(Wikiみたいなもの)で管理•全てのAPIについて細かく記述している

20. ドキュメントの例

23. ドキュメントの例共通で使うレスポンスの形は別ページにしている(多重管理を避けるため)

24. APIドキュメントの記述•社内向けAPIドキュメントだからといって決して手を抜いていない•多重管理を避け、ドキュメントが古くなってしまうことを避けている

25. 使いやすいAPIが実現できた•用語が統一され、直感的に理解できる•内部的な細かい仕様を知らなくていい•ドキュメント化されている→Scalaでモデルを再定義しアプリに提供→社内向けだからといって甘えていない管理しやすく見やすいドキュメント作成

26. Scalaの良い所・悪い所

27. 環境•言語: Scala•フレームワーク: Play Framework 2.0•IDE: IntelliJ IDEA 11, 12•CI: Jenkins

28. •昨年６月、新卒研修が終わりニコニコAndroidチームに配属された•入社前•Javaは趣味で触ってた•が、 Scala は名前すら知らないScala…？！

29. Java利用者にとってのScala実体験をふまえて

30. Scalaって？•静的型付け言語•関数型言語とオブジェクト指向言語のハイブリッド•JVM上で動く•Javaのコードも簡単に混ぜられる

31. Scalaって？•静的型付け言語•関数型言語とオブジェクト指向言語のハイブリッド•JVM上で動く•Javaのコードも簡単に混ぜられるって言われても何が良いのかわからん！

32. 便利やでScala•型推論•コレクション関数•対話環境•Option型

33. 型推論String str = fugahoge ;String piyo = str + piyo ;Java

34. 型推論String str = fugahoge ;String piyo = str + piyo ;Java

35. 型推論String str = fugahoge ;String piyo = str + piyo ;Java↑書かなくても右辺見ればわかる

36. 型推論String str = fugahoge ;String piyo = str + piyo ;JavaScala↑書かなくても右辺見ればわかる

37. 型推論String str = fugahoge ;String piyo = str + piyo ;JavaScala↑書かなくても右辺見ればわかるval str = fugahogeval piyo = str + piyo

38. 型推論String str = fugahoge ;String piyo = str + piyo ;JavaScala↑書かなくても右辺見ればわかるval str = fugahogeval piyo = str + piyo↑コンパイラが勝手にStringと推測

39. 型推論

40. Scala型推論

41. Scala型推論def replaceAbc(str: String) = {str.replaceAll( abc , def )}val fuga = replaceAbc( abcdef )

42. Scala型推論def replaceAbc(str: String) = {str.replaceAll( abc , def )}val fuga = replaceAbc( abcdef )↑メソッドの返り値はStringと推測される

43. Scala型推論def replaceAbc(str: String) = {str.replaceAll( abc , def )}val fuga = replaceAbc( abcdef )↑メソッドの返り値はStringと推測される↑よって、fugaもString

44. Scala型推論def replaceAbc(str: String) = {str.replaceAll( abc , def )}val fuga = replaceAbc( abcdef )↑メソッドの返り値はStringと推測される↑よって、fugaもString冗長な記述をしなくていい

45. コレクション関数JavaString[] strs = { a , fuga , bb , hogee };List<String> result = new ArrayList<String>();for(String str : strs) {if (str.length >= 3) { result.add(str); }}return result;

46. コレクション関数Scalaval strs = List( a , fuga , bb , hogee );return strs.ﬁlter(_.length >= 3)強力なコレクション関数＋型推論によりコード記述量を大幅に減らせる

47. ちなみに•ニコニコAndroidサーバのコードにはfor文は7つしかない

48. Scalaのfor使うときval list1 = List( a , b , c )val list2 = List(1, 2, 3)for(a <- list1; b <- list2) {println(a+b)}

49. Scalaのfor使うときval list1 = List( a , b , c )val list2 = List(1, 2, 3)for(a <- list1; b <- list2) {println(a+b)}出力結果: a1 a2 a3 b1 b2 b3 c1 c2 c3

50. Scalaのfor使うときval list1 = List( a , b , c )val list2 = List(1, 2, 3)for(a <- list1; b <- list2) {println(a+b)}出力結果: a1 a2 a3 b1 b2 b3 c1 c2 c3複数のコレクションの組み合わせを網羅するのに非常に便利

51. 強力なコレクション関数+for•コード記述量が大幅に減った•単純なコレクションの処理をする際にfor文使うことほぼなし•たまに「forどうやって書くんだっけ」という声がでるほど…

52. 対話環境

53. 強力なimport文•ブロックの中にかける•別名をかけるScala

54. importをブロックの中にかけるimport java.util.Date;public void methodA(){Date date = new Date(). .......}public void methodB(){java.sql.Date date = new java.sql.Date(..). .......}Java名前が衝突するのでimportできず、フルネームで書くしかない

55. importをブロックの中にかけるdef methodA() = {import java.util.Dateval date = new Date(). .......}def methodB() = {import java.sql.Dateval date = new Date(..). .......}Scala

56. 別名をつけられるimport java.util.Dateimport java.sql.{Date => SqlDate}def methodA() = {val date = new Date(). .......}def methodB() = {val date = new SqlDate(..). .......}Scala

57. 強力なimport文•ブロックの中にかける＆別名をつけることができる•クラス名をつける際に「かぶりそうだな…」と怯えることがなくなった•短いクラス名をどんどんつけちゃう•例) Client (Redis接続用クラス)

58. Option型Java・このメソッドってnull返すことあるっけ？えーとドキュメント...・あ、そうだ nullチェックしないと... if (result != null) { ....

59. Option型Java・このメソッドってnull返すことあるっけ？えーとドキュメント...・あ、そうだ nullチェックしないと... if (result != null) { ....NullPointerException

60. Javaでぬるぽを起こす例JavaMap<String, String> map = getMap();String result = map.get(ﬁeldName);if (result.length() >= 3) {return 長さは +result.length();} else {return 短い！！ ;}Mapからとってきたものが3文字以上かどうかチェックするメソッド

61. Javaでぬるぽを起こす例JavaMap<String, String> map = getMap();String result = map.get(ﬁeldName);if (result.length() >= 3) {return 長さは +result.length();} else {return 短い！！ ;}Mapからとってきたものが3文字以上かどうかチェックするメソッド

62. Javaでぬるぽを起こす例JavaMap<String, String> map = getMap();String result = map.get(ﬁeldName);if (result.length() >= 3) {return 長さは +result.length();} else {return 短い！！ ;}NullPointerException!!!　　（　・∀・）　　　|　|　ｶﾞｯ　　と　　　　）　　 |　|　　　Ｙ　/ノ　　　人　　　　 /　）　　 < 　>__Λ∩　　＿/し　／／. Ｖ｀Д´）/　　（＿フ彡　　　　　　　/そんなキーねえよMapからとってきたものが3文字以上かどうかチェックするメソッド

63. nullチェック追加Map<String, String> map = getMap();String result = map.get(ﬁeldName);if (result != null && result.length() >= 3) {return 長さは +result.length();} else {return 短い！！ ;}Java

64. nullチェック追加Map<String, String> map = getMap();String result = map.get(ﬁeldName);if (result != null && result.length() >= 3) {return 長さは +result.length();} else {return 短い！！ ;}Javaどうしてもnullチェック忘れてしまう…！

65. Option型って？Option[T]Some[T] None値がある値がない値がある・ないを型で表現しているScala

66. Option型の挙動Scalaval map = Map("key1" -> "value1", "key2" -> "value2")// Map#getの返り値はOption型(ここではOption[String])println(map.get( key1 ))//→ Some(value1)println(map.get( fuga ))//→ Nonemap.get( key1 ).getOrElse( ないとき )//→ value1map.get( fuga ).getOrElse( ないとき )//→ ないときSomeのときは中身を取り出し、Noneのときは引数を返す

67. 型で値がないことに気づけるval map = getMap()val result = map.get(ﬁeldName)↑resultの型は Option[String]この時点で「値がないこともありうる」ということに気づけるScala

68. val map = getMap()val result = map.get(ﬁeldName)result.ﬁlter(_.length > 3).map(e => 長さは +e.length).getOrElse( 短い )さっきの例をScalaで実装Scala

69. ぬるぽがない安心感•Scalaの標準ライブラリは原則nullを返さない(Scalaはnullを使わない文化)•つまりnullチェックを書く必要がない

70. 社内向けAPIドキュメント

71. 社内向けAPIドキュメントnullがありうるものをドキュメントに残すのに苦労しなかった

72. Scalaの悪いところ...•コンパイル遅すぎ！•社内にScalaについて聞ける人が少ない

73. コンパイル•遅い！！とにかく遅い！！•メモリ食い過ぎー！•ビルド時のJavaの設定-Xms512m -Xmx1024m -XX:MaxPermSize=512mScala

74. コンパイル•遅い！！とにかく遅い！！•メモリ食い過ぎー！•ビルド時のJavaの設定-Xms512m -Xmx1024m -XX:MaxPermSize=512mScalaJenkinsで並行ビルドするとスワップアウト...→ Jenkinsサーバのメモリ増設(4GB → 8GB)

75. 社内に聞ける人が少ない•弊社内でScalaのプロジェクトはニコニコAndroidサーバが初めて•社内ノウハウが少ない…•Scala書ける人もあんまりいない…

76. 学習コストはそんなにかからない開発メンバー5人中4人がScalaをはじめて1年たっていない

77. 学習コストはそんなにかからない開発メンバー5人中4人がScalaをはじめて1年たっていないでも1ヶ月勉強したら業務で書けるようになった

78. どうやって勉強？•おすすめ本「JavaプログラマのためのScalaプログラミング」•疑問は社内IRCでブツブツ言う•誰か答えてくれる•#scalaというチャンネルもできた

79. 少しずつ広まっている...!最近は社内でもScalaを使う流れができつつあり、今後は改善されそう！ドワンゴでは4プロジェクトがScala使ってます

80. チームの実際の仕事の流れ

81. 仕事のサイクル計画振り返り実装レビューリリースマージ1周＝2週間のアジャイル開発

82. 開発メンバー全員で2週間にやることを計画誰がどの仕事をするか割り振る全員で計画する

83. 計画の前準備会議をする前に各自でやらないといけないことを洗い出し、チケットとして作成チケット管理にはAtlassian製品のJIRAを使っています

84. 全員で見積もるチケットを作った人がチケットの内容を説明工数見積もり(予想)を各自で出す見積もりがあわなかったら最大3回やる全員でやることを共有できているので突然誰かが倒れても大丈夫なチームに

85. 実装する• IntelliJ IDEA 12 Ultimate($200)使ってます• キャンペーンのときに全員買った• 買うまではCommunity Edition(無料)• 会社で買ってくれるという話も出てる• ScalaのIDEはIntelliJ IDEA一択• EclipseでのScala開発はめっちゃ重い…

86. テストに力を入れています1000以上のテストケースによりコードカバレッジ80%以上を達成

87. FishEyeでコードレビュー全員が仕事を理解しているので誰でもレビューできるみんなで気軽にレビューコメントをつける

88. GitHub:eよりFishEyeのほうが便利•誰がレビューOK出しているのか、どれぐらい見ているのかがすぐ分かる！全員のレビューOKが出ればマージする

89. Jenkins•ビルド•テストの実行•developブランチにマージするとJenkinsが動き出す•テストが落ちるとチームメンバーに罵られる

90. 振り返る(KPT)毎週水曜日にKPTKeep(続けたいこと), Problem(困ったこと),Try(次やりたいこと) をみんなで自由に書く

91. KPTで改善された例Jenkins用サーバで並行ビルドできないもっとスペックの高いJenkins用サーバを調達し、並行ビルド可能にProblemTry

92. 思ったことを気軽に書けるので「ちょっとした問題」を改善していく流れを作ることができた

93. 強いチーム作りに成功「全員で」計画し「全員で」振り返ることで常に意識を共有全員が主体的に動く強いチームを作っています

94. ドワンゴで働きませんか• Scalaに興味のある人もない人も• 「ドワンゴ採用」で検索！• http://info.dwango.co.jp/recruit/• 7月から新オフィス（歌舞伎座）お待ちしています！

95. まとめ• 美しいAPIをアプリチームに提供できた• Scalaで再モデリング・ドキュメント整備• Scalaを業務で楽しく使ってます！• 強力なScalaの機能で効率の良い開発が可能に• 強いチームでやってます• 全員が仕様を理解できている• 誰が風邪引いても困らない

ニコニコAndroid(サーバ編) - Scalaを業務で使って

Daichi Mashima

Transcript