大數據的分析時代

資料科學與大數據

在這個大數據時代，資料科學的狂潮不斷地推動著這個電話咭 世界。2015年4月，美國國家標準技術研究所（National Institute of Standards and Technology, NIST）發表了共包括7冊資料的「大數據互用性架構草案」。在第一冊定義篇中，資料科學被譽為新興的第四個科學典範（理論科學、實驗科學、計算科學與資料科學）：「資料科學是一透過完整資料生命周期流程，所產生的自原始資料到具行動力的知識的實驗性綜合體Neo skin lab 呃錢。」

資料科學，這第四個科學典範是2007年由格雷‧吉姆（Jim Gray）所命名，它代表直接由資料本身所產生的知識。NIST所定義的資料科學典範是「直接由資料，並透過一系列發現、假設與假設檢定的流程，萃取出具行動力的知識」。

所謂「Big Data」坊間有許多翻譯，包括大數據、巨量資料、海量資料等。NIST則定義為：由具有龐大資料量、高速度、多樣性（多重異質資料格式）、變異性等特徵的資料集所組成，它需要可擴延的架構來進行有效儲存、處理與分析。

巨量資料的特徵

今日可說是個大數據的時代！自從進入21世紀後，全球資料量呈現大爆炸式的增長，資料量從PB級躍升至ZB級。根據國際資料公司（IDC）發布的2012年研究報告，從2011年全球創建和複製的資料總量是1.8 ZB，並以每兩年增加一倍的速度快速增長。預計到2020年Neo skin lab 傳銷，全球產生的資料總量將超過 40 ZB，這是地球上所有海灘上沙粒數量的57倍。

谷歌（Google）公司每天處理超過24 PB的資料，每個月則超過400 PB。淘寶網有5億多名會員，線上商品超過10億件，每天交易平均金額高達新台幣6億元以上，每日所產生的資料量也超過 50 TB以上，然而這只是全球資料量的一小部分。

大數據時代產生的資料有許多特徵，這些特徵也引領資料科學在這些新興資料型態的分析上有著重大發展。巨量資料的最大特徵當然就是龐大的資料量，如一般桌上型電腦的記憶體是以GB為計量單位，硬碟的容量則是以TB為主。電腦運算須把資料載入到記憶體上，因此要處理龐大的PB或EB資料，就必須有新的儲存模式及計算模式，這也是資料科學的重要研發領域。

巨量資料的第二大特徵就是速度。高速有兩層涵義，第一層是資料產生的速度，每天社交網路Facebook、Twitter及通訊軟體Line所產生的資料就是一例。IDC指出，到2020年，全球所有資訊部門擁有伺服器的總量將較目前多出10倍，管理的資料也比現在多出50倍，全球將總共有35ZB的資料量。另一層則是處理的速度要求，以中國大陸淘寶網在每年11月11日光棍節的電子商務活動為例，淘寶網須針對交易資料即時呈現活動的交易現況，這是巨量資料分析的一大挑戰。

巨量資料通常有時效性，一旦傳送到運算伺服器，就要能即時取得分析結果才能發揮其最大價值。巨量資料的即時分析需要飛秒級的速度，甚至1秒內完成億萬級資料的處理和分析，這也是巨量資料分析的挑戰課題。

資料多樣性是巨量資料的第三大特徵Neo skin lab 黑店。一般商業交易所使用的資料大抵是以結構化資料為主，透過預先定義好的資料欄位進行儲存與運算。但除了結構化資料外，巨量資料還包含許多半結構化或非結構化資料。這些資料包括各類型生產機台所產生的日誌檔案、各式網路設備與伺服器產生的網路日誌檔、聲音、影片、圖片、地理位置資訊等，這類型資料的儲存與運算都需要新的運算架構。

上述所指的巨量資料主要以龐大的資料量（volume）、速度（velocity）與資料多樣性（variety）三大特徵為主，這就是大數據所謂的3V特徵。後續也有許多學研單位指出其他特徵包括真實性、價值與視覺化，這也凸顯了巨量資料的多面向觀點。

曾經的蔥蘢絢爛早已褪去了最初的繁華

流年，輾轉而過，轉眼暮秋，幾枚殘存的黃葉在枝頭還綻放著最後的美麗，幾經風霜，留下的是一份清冷，一份安然。歲月裏，誰的手還牽著曾經的暖仍舊不肯放下？待到雪花飄滿了庭院，我用流年的雪水煮一壺素素的清茶，把那些泛香的舊光陰一念通渠再念，是否你也會在每一個飄雪的季節裏，靜靜地翻閱著那闕傾城之戀？我不知道。但，我知道，那份時光給予的美好，會隨著時間越來越淺，淺到無痕……
　　
　　總是獨享著一個人的寂寞，總不能將過去和現實的縹緲看破，總是沉醉在文字的八百里煙波上，獨自漫步在季節深處。葉的離去是風的追求，還是樹的不挽留？我無法猜透，就像看到你離開時決然的背影，我無法抑制的悲痛。愛或不愛，也許註定都是一場命定的傷害。若有來世，我情願做一條水草，無心，無欲地蕩漾在康橋的柔波裏。
　　
　　記憶的長廊裏，曲曲折折，一處風景一首歌，有落寞也有浪漫，有歡樂也有憂傷。記憶，是一泓漾著漣漪的清泉，一旦觸碰，就擴散開去，紛亂成無數的碎影，當歲月的殘妝褪變成黑白的底色，當紅塵的風沙堆積成塚，當時光的腳步漸行漸遠，驀然回眸，悲首年華，情到深處人孤獨，愛至窮時盡滄桑；塵煙散盡，深已成為過往，你我已隔斷天涯。
　　
　　流光碎影輕攏著千年的落寞，將一卷長長的幽夢碎裂成幸福的詞章，於沉沉霧靄之中渺無痕跡，剪一段秋色裹住離傷，化羽，化絮，為灰，化為深秋的一滴露珠，滴落成行。
　　
　　我一直相信感覺，相信時間會沉澱所有的過往。有些人只適合擦肩而過，有些人只適合遠遠地欣賞，而有些人卻真真實實的活在你的身邊，從不曾走遠，只一 眼，就已經深深地烙印在了生命裏。緣聚緣散，一如時光，來去無痕；染指蒼涼，素箋流落，滲透著傾城的落寞，掩映著無言的憂鬱，觸摸著纏綿的往昔，任起舞的 思緒，氤氳了回憶的薄涼。
　　
　　紅塵中，有誰能真正放下過往，讓心靜如佛前的那朵蓮花？也許，前世，我便是陌上那叢帶著記憶的花草，等候你的路過，收藏你翩翩四季的剪影。或者，只因 有了你的記憶，才讓我今生紅塵的路走得如此艱辛。明知秋深有紅葉墜地的無奈，冬寒有雪落柴扉等不來歸人的惆悵，卻依舊為經年徘徊。往事，是散落一地的花 瓣，有的隨風而逝，有的零落成泥碾作塵，是否，故園風雪後，依舊香如故？
　　
　　也許，破碎的美麗，才會擁有悲傷的絕美。而那通渠般海枯石爛，山崩地裂的愛情本難存在，滄海桑田，多少是是非非，在時間的侵蝕之下面目全非。
　　
　　日子流沙般從指縫中悄悄滑落，只留下生活的淡淡印痕。清風幾度漫拂柳，相思心畔醉流年。滄海桑田，終抵不過塵埃落定；歲月變遷，一蓑煙雨零亂了不舍的情懷；漸變浮光，帶來些許的溫存，小軒窗下，吹皺夢裏多少傷？
　　
　　往事如煙，瞬間便盈滿了記憶。拂落石案上一片殘葉，上面依舊蜿蜒著深淺不一的暗紋，像你掌心的手紋，錯落著歲月的溝壑。只是，再也品不到你掌中那盞清 茶，再也握不住你掌心的溫暖，經年，你煎我煮的茶根，惟有在記憶深處彌漫著淺香。傾聽花瓣墜地的聲音，暗香彌漫。枝生千葉，風過，亦有聲。往事纏綿，如綿 長的雨絲，剪不斷，理還亂。染了千年寂寞的瑤琴，銀白色的琴弦顫落多少風花雪月，蔥白如雪的指尖輕輕一點，便暈開千萬縷如絲如織的婉約心事。
　　
　　季節的轉變，流年的浮華，那些人生路 上的相聚與別離，宛如生命裏起起落落的風景。一些遇見，註定會擦肩而過；一些人，註定會刻骨銘心；一些過往，註定會恒久飄香。歲月在滑落的淚瑩中呻吟，時 光被遺落在冰涼的指尖裏，留下了淺淺地生命痕跡。流年未央，鶯歌婉轉，於塵世的煙火中，守著最初的自己，雖清淺如水，卻也恬靜安然。生活，終將是美好，總 有一些情愫，凝結成眉眼間的欣喜，溫婉了一懷薄涼。盈一分灑脫，和時光道安然，那些漸行漸遠的念，終成逝水沉香，溫潤了經年的時光，千帆過後，終將是風輕 雲淡。
　　
　　歲月是一杯清茶，靜靜地品酌，你會發現，在它的眼中，沒有化不開的思念，沒有解不開的情愁，沒有沖不淡的眷戀，沒有抹不去的煩憂。靜靜站在滔滔的歲月浪潮中，默看紅塵過往，攜著朵朵浪花，緩緩而來，漸漸遠去！深深淺淺的緣份，演繹著一些美麗，一些感動，一些溫存，一些眷戀，拼湊成多彩、無悔的人生！
　　
　　時光，是鋪了一地的落花；人生，是碎了一地的光陰。日出日落，花開花謝，走不完的路，唱不完的歌。四季輪回，人生的季節，總是來來往往，歡樂有時，憂傷有時。用一顆恬淡的心，淡觀花開，靜聽雨落。
　　
　　笑看流年，讓歲月沉浸在微笑的 容顏裏，讓生活在平淡的日子裏享受美好，讓流年在柔弱的筆尖下記下溫存。掬一捧陽光蕩滌心靈，擷一瓣花開輕撚紅塵。每個清晨都有一縷陽光相伴，其實幸福一 直藏在淺薄的日子裏。季節的午後，坐擁生活深處洋溢的溫暖，擦肩而過後的薄涼也不過是歲月裏的一抹風景。一回回的懂得，總有一些人在過往的故事裏留存了點點的感動，總有一些牽掛難以割捨，總有一席氤氳困擾於夢。人生山一程水一程，走過的坑坑窪窪將會是歲月裏深深淺淺的印記，只有經過了崎嶇的山路，才能體會到腳下的踏實，在繁華喧囂的世界裏坐看藏在內心的寂靜；在青山綠水裏笑看人生起伏。
　　
　　秋，是個儲存的季節。面對即將來臨的冬季，我要用一秋的收穫來填補它的蕭瑟！季節流轉中，總會得到或失去，學會隨遇而安，接受已改變的，適應所不能改變的，相信那些歲月帶不走的，才是心之所屬，才是真正屬於自己的。
　　
　　時間會飄遠，歲月會流失，記憶會定格。上善通渠公司若水，守一隅淨心；人在旅途，且行且懂得。執一段陽光的心境，綻放最美的自己。回眸，抖落一地風塵，然後優雅地轉身，微笑著與這個季節告別。