2019年4月12日星期五

五萬首《全唐詩》的統計分析, 是否有煮鶴焚琴之感。


五萬首《全唐詩》的秘密

今日又抄書,網絡資料。




大數據分析五萬首《全唐詩》,發現了這些秘密。



讀了那麼多唐詩,你知道,唐詩中出現頻率最高的字是什麼?唐詩中描寫最多的季節是哪一個?唐詩描寫最多的感情是哪一種?唐詩、宋詞、元曲又有哪些區別呢?

在資訊時代,咱們就用高科技來解決這些問題,通過基於人工智慧的語義分析技術,

對《全唐詩》進行深度的文本數據分析,發現了一些有趣的秘密。

《全唐詩》是清康熙年間編校的一本唐詩合集,歷時一年多編校成文。收錄詩人,凡二千二百餘人,收錄詩作四萬八千九百餘首。

《全唐詩》中出現頻率最高的字:人

去掉一些常見的虛詞,

如“之”、“乎”、“者”、“也”。

出現頻率最高的字是“人”。

人生得意須盡歡,莫使金樽空對月。
清明時節雨紛紛,路上行人欲斷魂。
故人西辭黃鶴樓,煙花三月下揚州。
千山鳥飛絕,萬徑人蹤滅。
故人具雞黍,邀我至田家。

其他高頻字如

“山”、“風”、“月”、“日”、“天”、“雲”、“春”

等都是在寫景的詩句裏經常出現的意象。

海上生明月,天涯共此時。
大漠孤煙直,長河落日圓。
黃河遠上白雲間,一片孤城萬仞山。
東風不與周郎便,銅雀春深鎖二喬。
人面不知何處去,桃花依舊笑春風。

《全唐詩》中最常見的148個字排名如下:



《全唐詩》中出現最多的季節:春

詩人們最愛寫哪個季節?
經過分析,依次排名為:

春、秋、夏(暑)、冬。


春:19,806
秋:13,946
夏: 2,624
冬: 1,218

在唐詩裏,傷春、惜春是常見的春詩題材,事實上,寫春的詩俯拾皆是,標題中帶春的就有不少:
如張若虛的《春江花月夜》
韓愈的《春雪》
杜甫《春望》
白居易《錢塘湖春行》
孟浩然《春曉》

這些都是耳熟能詳的名篇。

《全唐詩》中出現最多的顏色:綠

字頻最高的是:白
找了51個古語中常用的顏色的單字。
注意是古漢語語境中的顏色稱謂:

其中以紅色系(紅、丹、朱、赤、絳等)、
黑色系(暗、玄、烏、冥、墨等)、
綠色系(綠、碧、翠、蒼等)及
白色系(白、素、皎、皓等)為主,

這些顏色及其對應的字頻如下表所示:
白:19.87%

黑:12.93%
綠:39.05%
紅: 9.36%
其他:24.79%

據統計,“白”字的字頻最高,但綠色系的占比高於白色系!總結就是:單字裏白色出現最多,色系裏是綠色占比最高!綠色和白色占比最高。

在唐詩中,
“綠”“碧”“蒼”“翠”等大都用於寫景,
“綠樹”、“碧水”、“蒼松”、“翠柳”等,
這些高頻字從側面反映出全唐詩中描寫
景物、寄情山水的詩句占比很大,
透露出平靜、清新和閒適之感。
綠樹村邊合,青山郭外斜。
碧玉妝成一樹高,萬條垂下綠絲絛。
孤帆遠影碧空盡,唯見長江天際流。
天門中斷楚江開,碧水東流至此回。
映階碧草自春色,隔葉黃鸝空好音。

在唐詩中

白色常渲染出一種韶華易逝、悲涼的氣氛,
常見的有“白髮”、“白雲”、“白雪”。
白頭搔更短,渾欲不勝簪。
白雪卻嫌春色晚,故穿庭樹作飛花。
君不見,高堂明鏡悲白髮,朝如青絲暮成雪。
白雲一片去悠悠,青楓浦上不勝愁。

唐詩中出現最多的感情:悲
詩詞君根據詩歌中常見的主題類別,
情緒類別分為:
悲:愁、慟、痛、寡、哀、傷、嗟…
懼:讒、謗、患、罪、詐、懼、誣…
樂:悅、欣、樂、怡、洽、暢、愉…
怒:怒、雷、吼、霆、霹、猛、轟…
思:思、憶、懷、恨、吟、逢、期…
喜:喜、健、倩、賀、好、良、善…
憂:恤、憂、痾、慮、艱、遑、厄…


下面是對《全唐詩》近5萬首詩的情緒分析結果,展示如下:




出乎很多人的意料,
代表大唐氣象的唐詩應該以積極昂揚的情緒為主,可最後卻是“悲”、“思”、“憂”
這樣的情緒佔據主流,而 “喜”、“樂”這樣的情緒卻佔據末流!
比如唐詩中常見的幾種情結:
如“悲秋情結”、“別離情結”、
“薄暮情結”和“悲怨情結”,
都體現出濃重的“悲情”色彩。

在唐詩名句中,“悲”隨處可見:
前不見古人,後不見來者。
念天地之悠悠,獨愴然而涕下。
從時間與空間兩個角度把悲涼拉長了。
君不見,高堂明鏡悲白髮,朝如青絲暮成雪
感慨時間流逝,這種傷悲超越時間。
無邊落木蕭蕭下,不盡長江滾滾來。
萬裏悲秋常作客,百年多病獨登臺。
老病殘軀,孤苦無依獨登臺,
心中悲涼陡然而生。
在天願作比翼鳥,在地願為連理枝。
天長地久有時盡,此恨綿綿無絕期。
相愛而不能相聚,生死遺恨,沒有盡頭!

《全唐詩》比對《全宋詞》比對《全元曲》
通過文本對比《全唐詩》、《全宋詞》、《全元曲》,發現它們特點如下:

唐詩:雄渾高華
用字清澹高華、含蓄,詩味較濃,寄情山水和金戈鐵馬的特徵明顯,可以聯想到唐詩流派中典型的山水田園派和盛唐邊塞詩,它們大都反映大唐詩人志趣高遠、投效報國的情懷。

大漠孤煙直,長河落日圓。
此地一為別,孤蓬萬裏征。
三顧頻煩天下計,兩朝開濟老臣心。
秦時明月漢時關,萬里長征人未還。
黃河遠上白雲間,一片孤城萬仞山。

宋詞:婉約柔美
宋詞中所用的字多婉約、宛轉柔美,表現的多是兒女情長,生活點滴,這也難怪,由於長期以來詞多趨於婉約柔美,人們便形成了以婉約為正宗的觀念。

月上柳梢頭,人約黃昏後。
一曲新詞酒一杯,去年天氣舊亭臺。
十年生死兩茫茫,不思量,自難忘。
檻菊愁煙蘭泣露,羅幕輕寒,燕子雙飛去。
紅酥手,黃滕酒,滿城春色宮牆柳。

元曲:通俗率真
元曲中所用的字生活氣息濃重,通俗易懂、接地氣、詼諧、灑脫和率真,充分反映了其民間戲曲的特徵,這與蒙元治下的漢族知識份子被打壓,很多文人鬱鬱不得志、轉入到民間戲曲的創作中來有關。

枕上十年事,江南二老憂,都到心頭。
傷心秦漢,生民塗炭,讀書人一聲長歎。
人生百年有幾,念良辰美景,休放虛過。
問從來誰是英雄?一個農夫,一個漁翁。
離了利名場,鑽入安樂窩,閑快活!