Twitterã®snowflakeã«ã¤ã„ã¦PostgreSQLã®ãƒãƒ¼ãƒ«ç®¡ç†ã¨ãã®æ³¨æ„点（Open Source Conference 2022 Online/Osaka 発表資料）
『アメーãƒãƒ”ã‚°ã«ãŠã‘ã‚‹DB構æˆ&対応記ã€
2ヶ月å‰ã«ã‚¤ãƒ³ãƒ•ãƒ«ã‚¨ãƒ³ã‚¶ã¨ã‚¦ã‚£ãƒ«ã‚¹æ€§èƒƒè…¸ç‚Žã§ã²ã©ãダメージをå—ã‘ãŸå¢—ç”°(@masudaK)ã§ã™ã€‚アメーãƒãƒ”ã‚°ã¯2009å¹´2月ã«å§‹ã¾ã£ãŸã‚µãƒ¼ãƒ“スã§ã€FLASH・Javaã§ä½œã‚‰ã‚Œã¦ã„ã¾ã™ã€‚ãã—ã¦ã€ãƒ‡ãƒ¼ã‚¿ã‚¹ãƒˆã‚¢ã«MySQLを用ã„ã¦ã¾ã™ã€‚本記事ã§ã¯ã€ã‚ãŸãã—ãŒ2å¹´ã»ã©è¦‹ç¶šã‘ã¦ã„るアメーãƒãƒ”ã‚°ã®DB環境ã«ã¤ã„ã¦æ§‹æˆã‚„ã€æ—¥ã€…ã©ã®ã‚ˆã†ã«ã—ã¦å•é¡Œã¨å‘ãåˆã£ã¦ã„ã‚‹ã‹ã‚’紹介ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚インフラ寄りã®å†…容ãŒå¤šã„ãŸã‚ã€ã‚¢ãƒ—リ寄りã®è©±ã¯å¼Šç¤¾ç”Ÿæ²¼ã®è³‡æ–™ã‚’御覧ãã ã•ã„。 1. 構æˆã¨è¦æ¨¡ 1.1. æ§‹æˆ ã¾ãšæ§‹æˆã§ã™ãŒã€èªã¿æ›¸ãã¯ã™ã¹ã¦ãƒžã‚¹ã‚¿ãƒ¼ã¸è¡Œã†ã‚ˆã†ã«ã—ã¦ã„ã¾ã™ã€‚ãã®ãŸã‚ã€ã‚¹ãƒ¬ãƒ¼ãƒ–ã«ã¯å‚照をå‘ã‘ãšã€ãƒ›ãƒƒãƒˆã‚¹ã‚¿ãƒ³ãƒã‚¤ã¨ã—ã¦ä½¿ã£ã¦ã„ã¾ã™ã€‚ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã«é–¢ã—ã¦ã¯2012å¹´ä¸æ—¬ã¾ã§ã¯5.0を使ã£ã¦ã¾ã—ãŸãŒã€DC移転ã«ã‚ã‚ã›ã¦5.5ã«ã‚ã’ã¾ã—ãŸã€‚ãƒãƒƒã‚¯æ©Ÿèƒ½ã‚’用ã„ãŸã‚·ãƒ£ãƒ¼ãƒ‰æ§‹æˆã‚’ã—ã¦ã¾ã—ã¦ã€2014å¹´3月ç¾åœ¨6シャードã«ãª
「JSONæ–‡å—列ã¸ã®ã‚¤ãƒ³ã‚¸ã‚§ã‚¯ã‚·ãƒ§ãƒ³ã€ã¨ã€Œãƒ‘ラメータã®è¿½åŠ ã€
「JSONæ–‡å—列ã¸ã®ã‚¤ãƒ³ã‚¸ã‚§ã‚¯ã‚·ãƒ§ãƒ³ã€ã¨ã€Œãƒ‘ラメータã®è¿½åŠ ã€ï¼šNoSQLを使ã†ãªã‚‰çŸ¥ã£ã¦ãŠããŸã„ã‚»ã‚ュリティã®è©±ï¼ˆ2）（1/2 ページ） MongoDBを用ã„ãŸWebアプリケーションã§ç”Ÿã˜ã‚‹å¯èƒ½æ€§ãŒã‚ã‚‹4種類ã®è„†å¼±æ€§ã®ã†ã¡ã€ä»Šå›žã¯ã€ŒJSONæ–‡å—列ã¸ã®ã‚¤ãƒ³ã‚¸ã‚§ã‚¯ã‚·ãƒ§ãƒ³ã€ã¨ã€Œãƒ‘ラメータã®è¿½åŠ ã€ã®ãƒ¡ã‚«ãƒ‹ã‚ºãƒ ã¨å¯¾ç–ã«ã¤ã„ã¦èª¬æ˜Žã—ã¾ã™ã€‚ å‰å›žã®ã€Œã€Žæ¼”ç®—åã®ã‚¤ãƒ³ã‚¸ã‚§ã‚¯ã‚·ãƒ§ãƒ³ã€ã¨ã€ŽSSJIã€ã€ã§ã¯ã€MongoDBを用ã„ãŸWebアプリケーションã§ç”Ÿã˜ã†ã‚‹è„†å¼±æ€§ã®ã†ã¡ã€Œæ¼”ç®—åã®ã‚¤ãƒ³ã‚¸ã‚§ã‚¯ã‚·ãƒ§ãƒ³ã€ã¨ã€ŒSSJIã€ã«ã¤ã„ã¦ã€æ”»æ’ƒã®å®Ÿä¾‹ã¨å¯¾ç–ã«ã¤ã„ã¦è§£èª¬ã—ã¾ã—ãŸã€‚今回ã¯ã•ã‚‰ã«ã€ã€ŒJSONæ–‡å—列ã¸ã®ã‚¤ãƒ³ã‚¸ã‚§ã‚¯ã‚·ãƒ§ãƒ³ã€ã¨ã€Œãƒ‘ラメータã®è¿½åŠ ã€ã«ã¤ã„ã¦èª¬æ˜Žã—ã¾ã™ã€‚ JSONæ–‡å—列ã¸ã®ã‚¤ãƒ³ã‚¸ã‚§ã‚¯ã‚·ãƒ§ãƒ³ ã“ã‚Œã¾ã§è¦‹ã¦ããŸã‚ˆã†ã«ã€PHP言語ã«ãŠã„ã¦ã¯é€£æƒ³é…列を指定ã—ã¦ãƒ‡ãƒ¼ã‚¿ã®ç™»éŒ²å‡¦ç†ã‚„検索処ç†ã‚’実行ã§ãã¾ã™ã€‚ã—ã‹ã—åž‹ã®æ‰±ã„ãŒåŽ³æ ¼
MySQLをインストールã—ãŸã‚‰ã€å¿…ãšç¢ºèªã™ã¹ã10ã®è¨å®š | Yakst
MySQL Performance Blogã®ç¿»è¨³ã€‚インストール後ã«å¿…ãšè¨å®šã‚’確èªã—ãªã‘ã‚Œã°ãªã‚‰ãªã„è¨å®šãƒ‘ラメータ10ã¤ã‚’挙ã’ã€ãã®æ„味を解説ã™ã‚‹ã€‚MySQLã®è¨å®šå¤‰æ›´æ™‚ã®ã€ä¸€èˆ¬çš„ãªæ³¨æ„点もåˆã‚ã›ã¦ã€‚ January 28, 2014 By Stephane Combaudon 我々ãŒãƒ‘フォーマンス監査ã®ä»•äº‹ã‚’ã™ã‚‹æ™‚ã«ã¯ã€MySQLã®è¨å®šã®ãƒ¬ãƒ“ューã¨æ”¹å–„æ案を求ã‚られる。大抵ã®å ´åˆã€ãŸãã•ã‚“ã®ã‚ªãƒ—ションãŒã‚ã‚‹ä¸ã§ã»ã‚“ã®ã„ãã¤ã‹ã®è¨å®šã—ã‹å¤‰æ›´ã™ã‚‹ã‚ˆã†ã«æ案ã—ãªã„ã“ã¨ã«ã€å¤šãã®é¡§å®¢ã¯é©šã。ã“ã®è¨˜äº‹ã®ã‚´ãƒ¼ãƒ«ã¯ã€ã‚‚ã£ã¨ã‚‚é‡è¦ãªè¨å®šã‚’ã„ãã¤ã‹æŒ™ã’ã¦ã¿ã‚‹ã“ã¨ã«ã‚る。 æ—¢ã«ã“ã†ã„ã£ãŸæ案ã¯éŽåŽ»ã«ã‚‚ã—ã¦ã„ã‚‹ãŒæ•°å¹´å‰ã®ã‚‚ã®ã§ã€ãれ以æ¥MySQLã®ä¸–ç•Œã§ã¯ãŸãã•ã‚“ã®å¤‰åŒ–ãŒã‚ã£ãŸã®ã 。 話ã®å‰ã« 熟練ã—ãŸäººã§ã‚‚ã€é‡å¤§ãªãƒˆãƒ©ãƒ–ルを引ãèµ·ã“ã™ãƒŸã‚¹ã‚’ã—ã§ã‹ã™ã“ã¨ãŒã‚る。従ã£ã¦ã€ã“ã“ã«æŒ™ã’ãŸã‚‚ã®ã‚’盲目的ã«é©ç”¨ã™ã‚‹å‰ã«ã€
富士通もIAサーãƒã€SSDストレージã€OSã€ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã‚’åž‚ç›´çµ±åˆã¸ã€‚ç´„20å€ã®æ€§èƒ½å‘上を実ç¾ã¨
ãƒãƒ¼ãƒ‰ã¨ã‚½ãƒ•ãƒˆã‚’ベンダãŒã‚らã‹ã˜ã‚最é©ã«çµ„ã¿åˆã‚ã›ãŸè£½å“ã€ã„ã‚ゆる垂直統åˆè£½å“ãŒã‚¨ãƒ³ã‚¿ãƒ¼ãƒ—ãƒ©ã‚¤ã‚ºå¸‚å ´ã§ã‚‚1ã¤ã®ãƒˆãƒ¬ãƒ³ãƒ‰ã«ãªã£ã¦ã„ã¾ã™ã€‚ オラクルãŒåŒç¤¾ã®ã‚µãƒ¼ãƒã¨ä»®æƒ³åŒ–ソフトウェアã€OSãªã©ã‚’åž‚ç›´çµ±åˆã—ãŸã€ŒExadataã€ã‚„「Exalogicã€ã§æˆåŠŸã™ã‚‹ã¨ã€IBMã‚‚åŒç¤¾ã®IAサーãƒã¨ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã‚’組ã¿åˆã‚ã›ãŸã€ŒPure Systemsã€ã‚’今年ã®4月ã«ç™ºè¡¨ã—ã€åž‚ç›´çµ±åˆã«å‚å…¥ã—ã¦ãã¾ã—ãŸã€‚ ã¾ãŸã‚ã‚‹æ„味ã§ã¯ã‚¯ãƒ©ã‚¦ãƒ‰ã‚‚ã€ã‚¯ãƒ©ã‚¦ãƒ‰ãƒ™ãƒ³ãƒ€ã«ã‚ˆã£ã¦ãƒãƒ¼ãƒ‰ã‹ã‚‰ã‚½ãƒ•ãƒˆã¾ã§åž‚ç›´çµ±åˆã•ã‚ŒãŸã‚·ã‚¹ãƒ†ãƒ ã«ã‚ˆã£ã¦ã‚µãƒ¼ãƒ“スãŒæä¾›ã•ã‚Œã¦ã„ã‚‹ã¨è€ƒãˆã‚‹ã“ã¨ãŒã§ãã‚‹ã§ã—ょã†ã€‚ åž‚ç›´çµ±åˆã•ã‚ŒãŸè£½å“ã¯ã€ãã®çµ„ã¿åˆã‚ã›ã‚’ベンダã«å§”ãる代ã‚ã‚Šã«ã€è£½å“ã®æ€§èƒ½ã€å®‰å®šæ€§ãŒãƒ™ãƒ³ãƒ€ã«ã‚ˆã£ã¦ä¿è¨¼ã•ã‚Œã€ä¿å®ˆã‚„トラブルシュートも一元化ã§ãã‚‹ã¨ã„ã†ãƒ¡ãƒªãƒƒãƒˆãŒã‚ã‚Šã¾ã™ã€‚ 富士通ãŒåž‚ç›´çµ±åˆè£½å“ã¸å‚å…¥ ãã®åž‚ç›´çµ±åˆã•ã‚ŒãŸè£½å“ã‚’ã€å¯Œå£«é€šãŒç™ºè¡¨ã—ã¾ã—ãŸã€‚自社製ã®ã‚µ
Redis勉強会資料(2015/06 update)
Redis勉強会ã®è³‡æ–™ã§ã™ã€‚2013å¹´ã«åˆç‰ˆã‚’アップã—ã¾ã—ãŸã€‚2015å¹´6月ã«Redis-Clusterã®å†…容を追記ã—ã¦å†ã‚¢ãƒƒãƒ—ã‚’è¡Œã£ã¦ã„ã¾ã™ã€‚
MongoDBã®Capped Collectionã¨Tailable Cursorを使ã£ãŸRealTimeAccess集計 - Y's note
Index RealTimeAccess集計 Capped Collection Tailable Cursor ã¾ã¨ã‚ RealTimeAccess集計 RealTimeAccess集計をã™ã‚‹ãŸã‚ã«MongoDBã®åˆ©ç”¨ã‚’考ãˆã¾ã™ã€‚サーãƒãƒ¼ã®æ§‹æˆã¯ä¸Šå›³ã®ã‚ˆã†ãªã‚¤ãƒ¡ãƒ¼ã‚¸ã§å„種ApplicationServerã‹ã‚‰Fluentdã§LogAggregatorã«RealTimeã§Logデータを転é€ã—ã€LogAggregator MasterãŒMongoDBã«Fluentdã§æ›¸ã込んã§è¡Œãã¾ã™ã€‚ã“ã“ã§è¨€ã†RealTimeAccess集計ã®æ©Ÿèƒ½è¦ä»¶ã‚’æ•´ç†ã™ã‚‹ã¨ä»¥ä¸‹ã®ã‚ˆã†ã«ãªã‚Šã¾ã™ã€‚ Access発生後ã€1分以内ã§é›†è¨ˆçµæžœã‚’Webツール上ã§ç¢ºèªã—ãŸã„。集計区間も1分å˜ä½ãªã©ã€‚ 複数æ¡ä»¶ãŒæŒ‡å®šå¯èƒ½ã§ã€æŸ”軟ãªCross集計ãŒã—ãŸã„。 RealTimeAccess集計ã®Systemè² è·ã‚’出æ¥ã‚‹é™ã‚ŠæŠ‘ãˆãŸã„。
AdServerã®ä»•çµ„ã¿
SmartNews TechNight Vol.5 : SmartNews Ads ã®é…信最é©åŒ–ã®ä»•çµ„ã¿ã¯ã©ã†ãªã£ã¦ã‚‹ã®ï¼Ÿ (エンジニア / SmartN...
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
http://blog.degita.net/entry/2013/02/20/42
{{#tags}}- {{label}}
{{/tags}}