程序員最寶貴的東西是生命，生命屬于程序員只有一次。一個(gè)程序員的一生應(yīng)該這樣度過(guò)：當(dāng)她回首往事的時(shí)候，她不會(huì)因?yàn)榇罱ōh(huán)境浪費(fèi)時(shí)間而悔恨，也不會(huì)因?yàn)榧簾o(wú)法運(yùn)行而羞恥。這樣，在她開發(fā)的時(shí)候，她能夠說(shuō)：“我的整個(gè)生命和全部精力，都已經(jīng)獻(xiàn)給了開發(fā)中最重要的事情——設(shè)計(jì)程序，實(shí)現(xiàn)程序和調(diào)Bug?！?——P醬。

P醬是公司新來(lái)的實(shí)習(xí)生妹子。聽說(shuō)是一個(gè)文科生。文科生應(yīng)該會(huì)去文案組或者策劃組吧。什么？來(lái)數(shù)據(jù)組？讓我來(lái)帶？

于是我和P醬生活工作在了一起。

P醬你會(huì)些什么？

“我叫P醬，在XX大學(xué)讀研二，愛好是拍照和被拍，大家可以在B站找到我跳舞的視頻，比如av170001。我的另外一個(gè)愛好是寫代碼……”

當(dāng)一個(gè)文科妹子說(shuō)自己喜歡寫代碼的時(shí)候，整個(gè)辦公室熱鬧了起來(lái)。

“P醬，聽說(shuō)你喜歡寫代碼，那你寫過(guò)什么東西嗎？”新人介紹會(huì)議結(jié)束以后，我問P醬。

“一般都是各種分析程序，我們的專業(yè)要做很多調(diào)查報(bào)告，他們都是用Excel來(lái)計(jì)算的。我喜歡用Python來(lái)把這些統(tǒng)計(jì)過(guò)程自動(dòng)化。后來(lái)也寫過(guò)自動(dòng)寫詩(shī)的程序、鬼畜視頻生成器等等?！?/p>

“真不敢相信你是文科生。這么說(shuō)你的興趣是數(shù)據(jù)分析方向咯？”

“其實(shí)我對(duì)師父你做的爬蟲很有興趣。但是聽說(shuō)會(huì)經(jīng)常和網(wǎng)站發(fā)生對(duì)抗？女孩子還是不要打打殺殺的好~”

于是我讓P醬負(fù)責(zé)對(duì)爬蟲的原始數(shù)據(jù)進(jìn)行清洗、整理并做簡(jiǎn)單的分析。

一種船新的數(shù)據(jù)儲(chǔ)存方式

“P醬，爬蟲抓到的原始數(shù)據(jù)是存放在MongoDB里面的，你的Python還不錯(cuò)吧，你試一試用Python來(lái)讀寫MongoDB看看?！?/p>

“MongoDB是什么呀？”

“是一個(gè)和MySQL不太一樣的數(shù)據(jù)庫(kù)?！?/p>

“MySQL我知道，MongoDB和MySQL有什么不一樣呢？”

“我舉個(gè)例子，當(dāng)你要插入數(shù)據(jù)的時(shí)候，你需要做的，就是‘插入’。咳咳，你不要臉紅，我是指你不需要寫SQL語(yǔ)句、不需要建表、不需要提前定義字段。僅僅只需要一行代碼就能夠?qū)崿F(xiàn)了。我這里給你寫了一篇文檔，講到了MongoDB的增刪改查，你試一試。數(shù)據(jù)庫(kù)已經(jīng)給你搭建好了，你直接連上去用吧”

半天以后。

“師父，我已經(jīng)會(huì)使用MongoDB啦。”

“你讀爬蟲的原始數(shù)據(jù)，主要涉及到的就是查詢操作，為了鞏固插入、修改和刪除的操作，再給你一個(gè)小任務(wù)吧。試一試寫一個(gè)人員管理系統(tǒng)吧?！?/p>

既然有關(guān)系，就整整齊齊放在一起看吧

“P醬，你看起來(lái)很高興的樣子啊?！?/p>

“因?yàn)槲矣X得MongoDB比起MySQL太簡(jiǎn)單了啊~”

“你確定？那我看看你怎么對(duì)整行數(shù)據(jù)去重的？”

“師父，我知道distinct關(guān)鍵字可以對(duì)一個(gè)字段去重。但是整行數(shù)據(jù)我是讀出來(lái)用Python來(lái)去重的。”

“這個(gè)時(shí)候你就要用到MongoDB的聚合查詢了。文檔已經(jīng)給你寫好了，拿去看吧?！?/p>

“還有還有，這里你把店鋪信息和菜單信息放在了兩個(gè)集合里面，我怎么樣才能把他們聯(lián)表查詢出來(lái)呢？”

“聯(lián)表查詢是MySQL里面的操作，在MongoDB里面，沒有表，只有集合，所以叫做聯(lián)集合查詢更恰當(dāng)一些。這也是要用到聚合查詢，也在這個(gè)文檔里面了?！?/p>

再給你一個(gè)玩具吧。

“P醬，之前讓你做的爬蟲數(shù)據(jù)監(jiān)控系統(tǒng)怎么樣了？”

“功能已經(jīng)做好了，但是有一個(gè)地方查詢起來(lái)特別慢。我已經(jīng)加過(guò)索引了，但還是很慢。懷疑是同時(shí)聯(lián)了四個(gè)集合的數(shù)據(jù)造成的?！?/p>

“這邊的數(shù)據(jù)實(shí)際上每小時(shí)才更新一次，你沒有必要每次刷新頁(yè)面都去查詢MongoDB的。我覺得是時(shí)候讓你用一下Redis做緩存了。”

“Redis就是那個(gè)內(nèi)存數(shù)據(jù)庫(kù)嗎？我知道我知道?！?/p>

“給你寫了一份文檔，包含Redis里面的各種數(shù)據(jù)類型和使用方式。你試一試把Redis和MongoDB結(jié)合起來(lái)看看能不能提高速度?！?/p>

你怎么擅自加功能?。?/strong>