大數據視角下的社會化媒體對證券市場的影響研究

本書分為以下八章：

第一章、導論。主要介紹選題背景、研究的意義、研究的思路和方法、全書的結構安排以及主要創新點。
第二章、文獻綜述。主要對社會化媒體量化、市場情緒和社會化媒體對證券市場波動影響三個方面的理論和文獻進行了系統的回顧和梳理。本章為研究社會化媒體量化、剖析社會化媒體信息與證券市場波動的關係和防範系統性金融風險研究提供強有力的支持和論證。
第三章、系統總體設計。從系統總體設計的角度、自上向下對本書的邏輯模塊和流程進行概述、對系統的數據處理流程進行說明、明確證券市場社會化媒體效應智能解決方案中模塊之間的關係、理順系統從數據抓取到文本信息處理情感提取、再到利用深度學習神經網路對社會化媒體與證券市場波動的影響進行關聯分析的流程。確保系統模塊完整和研究順利推進。
第四章、社會化媒體量化與投資者情緒提取研究。首先對社會化媒體信息的抓取、過濾、預處理和詞彙量化過程進行了描述；隨後提出依據中文語句的語法和語義結構構建中文語句卷積神經網路（CSCNN）核心算法對文本情感極性進行判定；接著對情感判定模型進行了比較研究。
第五章、投資者情緒指數的構造。借鑑傳統指數構造原理、利用社會化媒體平台文本信息結構特點、創新性地提出基於內容相似度矩陣、引用關係矩陣和回復關係矩陣的社會化媒體文本語句權重SentenceRrak算法計算語句權重、結合用戶影響力因子、閱讀數量因子和點讚數量因子、構造了社會化媒體投資者情緒指數（SMISI）、為後續研究提供了重要的特徵變量。
第六章、SMISI對證券市場波動的量化研究。通過實證研究、首先將SMISI與Fama五因子模型結合、驗證了SMISI對證券市場收益率的系統性影響；接著利用VAR模型研究SMISI對證券市場波動影響的深度和廣度。隨後提出基於社會化媒體情緒驅動的S－LSTM深度神經網路模型核心算法、更加準確地捕捉社會化媒體投資者情緒對證券市場的影響效應、並通過模擬的方式驗證了SMISI在量化投資中應用的可行性。
第七章、面向證券市場策略的SMQIP檢驗與分析。從市場監管者、上市公司和投資者三個不同的角度剖析了社會化媒體信息引導市場情緒、導致證券市場資產價格波動、甚至影響金融穩定的內在機理。並利用具體案例從以上三個角度分別驗證了基於大數據的證券市場社會化媒體效應量化智能平台（SMQIP）的應用可行性。
第八章、總結、不足與研究展望、對全書進行了總結、對研究中存在的不足進行了分析和反思、對於金融智能領域的研究熱點和方向以及未來可能進行的研究計劃進行了展望。


本書的主要創新點包括以下三個方面：

創新點一：提出了一個基於深度學習的公眾情緒文本挖掘方法、綜合考慮文本內容和質量的影響、以捕捉社會化媒體中的公眾情緒。
創新點二：基於社會化媒體大數據、研究和優化了證券市場情緒指數的構建方法。在研究社會化媒體信息量化及其對證券市場波動的影響中、發現社會化媒體信息不僅對個股存在顯著影響、股票板塊指數也同樣會對社會化媒體信息中的情緒傾向有所反應。
創新點三：集成情緒判定、文本賦權和情緒指數市場效應評估等核心算法、構建了情緒對證券市場波動的影響分析的系統原型。

謝志龍，西南財經大學經濟資訊工程學院教師。分別於2000年、2006年獲得西南財經大學理學學士、管理學碩士。現為西南財經大學在讀博士。2011年到2012年英國雪菲爾大學訪問學者。主持中央高校基本科研專案一項，參與教育部人文社科專案兩項。研究興趣包括金融智慧，大資料分析，資料採擷，人工智慧，機器學習，自然語言處理，深度神經網路，演算法交易等。

截至2017年年底，中國證券市場的上市公司數量已達到3485家，總市值達到567086.077億元。證券市場已經成為中國國民經濟的重要組成部分。證券市場是「國民經濟的晴雨表」，證券市場的穩定不僅是經濟健康發展的基石，同時在維護社會穩定、防範系統性金融風險方面也發揮著重要的作用。黨的十九大和2018年全國「兩會」明確指出，中國未來的風險主要在金融領域，要防範金融風險。現在證券監管部門已經把監控作為了第一要務。中國在短短的28年間經歷了多次的「牛」「熊」更替，其中的主要原因是投資者情緒過度樂觀或者過度恐慌，「追漲殺跌」「盲目跟風」「羊群效應」等造成了證券市場的大幅波動。市場情緒是各類投資者情緒的綜合體現，在中國證券市場中，個人投資者占比為99.73%，其情緒將對市場產生巨大的影響，並且個人投資者的情緒化交易行為相對於機構投資者來說更加普遍。現代行為金融學認為，股票價格不僅僅由股票的內在價值決定，受信息影響的投資者的心理與行為對股票的價格決定和變動也具有重大影響。
通過對現有文獻的梳理發現，目前研究投資者的情緒對證券市場波動影響時，通常使用間接情緒指標和直接情緒指標對投資者情緒進行測量。間接情緒指標採用客觀的測量來從側面反應投資者的情緒，但由於其基於歷史交易數據構建，在衡量投資者情緒時有明顯的滯後性；直接情緒指標可通過對投資者進行問卷調查獲得，但調查時的情緒不代表其投資決策時的情緒，這樣測量的誤差較大，並且調查成本較高。隨著互聯網的出現和發展，人們獲取信息更加便利和快捷。互聯網已經成了人們最主要的信息獲取渠道。投資者在各社會化媒體平臺中獲取、發布和傳播證券市場相關信息，其中蘊含著大量投資者的情緒。爆炸式的媒體信息吸引了學術界和業界大量研究人員嘗試使用自然語言處理技術和傳統機器學習模型來挖掘媒體信息中的投資者情緒以及分析其對證券市場波動的影響。然而受信息技術和跨學科領域的限制，目前的相關研究對社會化媒體信息挖掘的角度不夠完整，提取的投資者情緒不具代表性，使用的分析方法已無法適用於大數據背景下海量社會化媒體對證券市場影響的研究。
因此，本書利用定向分佈式爬蟲從社會化媒體平臺獲取完整的文本信息，提出中文語句卷積神經網路（Chinese Sentence Convolutional Neural Network，CSCNN）核心算法可以根據中文語法和語義結構提取文本情緒，結合社會化媒體文本信息的結構特點構建出社會化媒體投資者情緒指數（Social Media Investor Sentiment Index，SMISI），在基於社會化媒體情緒驅動的長短期記憶深度神經網路（Sentiment－driven Long Short－Term Memory，S－LSTM）核心算法基礎上搭建證券市場的社會化媒體效應量化智能平臺（Social Media Quantitative Intelligent Platform，SMQIP），用於探析社會化媒體投資者情緒對證券市場影響的深度和廣度。從結構上看，本書由八章組成，具體內容為：
第1章　導論，主要介紹選題背景、研究的意義、研究的思路和方法、全書的結構安排以及主要創新點。
第2章　文獻綜述，主要對社會化媒體量化、市場情緒和社會化媒體對證券市場波動影響三個方面的理論和文獻進行了系統的回顧和梳理。本章為研究社會化媒體量化、剖析社會化媒體信息與證券市場波動和防範系統性金融風險研究提供了強有力的支持和論證。
第3章　系統總體設計，從系統總體設計的角度，自上向下對本書的邏輯模塊和流程進行概述，對系統的數據處理流程進行說明，明確證券市場社會化媒體效應智能解決方案中模塊之間的關係，理順系統從數據抓取到文本信息處理情感提取，再到利用深度學習神經網路對社會化媒體與證券市場波動的影響進行關聯分析的流程，以確保系統模塊完整和研究順利推進。
第4章　社會化媒體量化與投資者情緒提取研究，主要對社會化媒體文本信息量化和投資者情緒的提取進行研究。首先對社會化媒體信息的抓取、過濾、預處理和詞彙量化過程進行了描述；隨後提出依據中文語句的語法和語義結構構建中文語句卷積神經網路（CSCNN）核心算法對文本情感極性進行判定；接著對情感判定模型進行了比較研究。
第5章　投資者情緒指數的構造，借鑑傳統指數構造原理，利用社會化媒體平臺文本信息結構特點，創新性地提出基於內容相似度矩陣、引用關係矩陣和回復關係矩陣的社會化媒體文本語句權重Sentence Rank算法計算語句權重，結合用戶影響力因子、閱讀數量因子和點讚數量因子，構造了社會化媒體投資者情緒指數（SMISI），為後續研究提供了重要的特徵變量。
第6章　SMISI對證券市場波動的量化研究， 通過實證研究， 首先將SMISI與Fama五因子模型結合，驗證了SMISI對證券市場收益率的系統性影響；接著利用VAR模型研究SMISI對證券市場波動影響的深度和廣度。隨後提出基於社會化媒體情緒驅動的S－LSTM深度神經網路模型核心算法，更加準確地捕捉社會化媒體投資者情緒對證券市場的影響效應，並通過模擬的方式驗證了SMISI在量化投資中應用的可行性。
第7章　面向證券市場策略的SMQIP檢驗與分析，從市場監管者、上市公司和投資者三個不同的角度剖析了社會化媒體信息引導市場情緒，導致證券市場資產價格波動，甚至影響金融穩定的內在機理。並利用具體案例從以上三個角度分別驗證了基於大數據的證券市場社會化媒體效應量化智能平台（SMQIP）的應用可行性。
第8章　總結、不足與研究展望，對全書進行了總結，對研究中存在的不足進行了分析和反思，對於金融智能領域的研究熱點和方向以及未來可能進行的研究計劃進行了展望。
本書在現有研究的基礎之上，沿著「社會化媒體———投資者情緒———證券市場波動」的主線，對基於大數據的證券市場媒體效應進行了量化分析，主要的創新之處有以下三個方面：
第一，提出了一個基於深度學習的公眾情緒文本挖掘方法，綜合考慮文本內容和質量的影響，以捕捉社會化媒體中的公眾情緒。本書利用中文語句卷積神經網路對證券市場環境下的文本信息進行情感判定，結合社會化媒體結構特性，創新性地提出一套基於信息內容和發布結構的公眾情緒提取方法，利用論壇特有的結構即發帖、回復、轉發和引用等構建內容和結構的關聯圖，進而得到綜合關聯關係矩陣，從散亂的、高噪音的論壇信息討論中挖掘出主導性言論。綜合考慮社會化媒體信息的重要性和情感極性，提取出公眾對上市公司、板塊或整體市場的情緒傾向。
第二，基於社會化媒體大數據，研究和優化了證券市場情緒指數的構建方法。本書創新性地利用統計學中指數構造原理，對正面情緒和負面情緒給予不同權重，構造了證券市場的社會化媒體投資者情緒指數（SMISI），並結合證券市場歷史交易數據，從大數據角度系統剖析社會化媒體對證券市場波動的影響機理和傳導機制，為金融學領域經典問題的研究提供了大數據驅動的探索思路；同時，結合成分股的社會化媒體情感指數，細分了社會化媒體主板情感指數、中小板情感指數和創業板情感指數等。這些指數對於金融市場監管者監控證券市場波動、上市公司決策和投資者投資組合時都有重要的參考價值。
第三，集成情緒判定、文本賦權和情緒指數市場效應評估等核心算法，構建了情緒對證券市場波動影響分析的系統原型，並應用於本書的研究中。本書開創性地通過以社會化媒體情緒為驅動的時序神經網路，通過改造LSTM單元，增加情緒增強門，改變了遺忘門、輸入門和輸出門數據結構，解決了深度神經網路中連續時序數據和離散時序數據融合的問題。基於此搭建的基於大數據的證券市場社會化媒體效應量化智能平臺（SMQIP），可以為市場監管機構、上市公司、投資者以及相關領域研究者提供理論參考和決策支持。以社會化媒體情緒為驅動的時序神經網路結構也可為其他領域對連續時序數據和離散時序數據問題的解決開拓新的思路。

1　導論 …………………………………………………………………… （1）
　1.1　選題背景和研究意義 ……………………………………………… （1）
1.1.1　選題背景 ……………………………………………………… （1）
1.1.2　研究意義 ……………………………………………………… （6）
　1.2　研究思路、研究方法和研究結構 ………………………………… （9）
1.2.1　研究思路和研究方法 ………………………………………… （9）
1.2.2　研究結構 …………………………………………………… （12）
1.3　本書主要創新點 ………………………………………………… （14）
2　文獻綜述……………………………………………………………… （17）
　2.1　證券市場波動相關理論 ………………………………………… （17）
2.1.1　現代經典金融理論相關分析 ……………………………… （17）
2.1.2　行為金融理論相關分析 …………………………………… （19）
2.1.3　中國證券市場有效性研究及情緒影響分析 ……………… （22）
2.1.4　證券市場相關理論評述 …………………………………… （24）
　2.2　投資者情緒與證券市場

截至2017年年底，中國證券市場的上市公司數量已達到3485家，總市值達到567086.077億元。證券市場已經成為中國國民經濟的重要組成部分。證券市場是「國民經濟的晴雨表」，證券市場的穩定不僅是經濟健康發展的基石，同時在維護社會穩定、防範系統性金融風險方面也發揮著重要的作用。黨的十九大和2018年全國「兩會」明確指出，中國未來的風險主要在金融領域，要防範金融風險。現在證券監管部門已經把監控作為了第一要務。中國在短短的28年間經歷了多次的「牛」「熊」更替，其中的主要原因是投資者情緒過度樂觀或者過度恐慌，「追漲殺跌」「盲目跟風」「羊群效應」等造成了證券市場的大幅波動。市場情緒是各類投資者情緒的綜合體現，在中國證券市場中，個人投資者占比為99.73%，其情緒將對市場產生巨大的影響，並且個人投資者的情緒化交易行為相對於機構投資者來說更加普遍。現代行為金融學認為，股票價格不僅僅由股票的內在價值決定，受信息影響的投資者的心理與行為對股票的價格決定和變動也具有重大影響。
通過對現有文獻的梳理發現，目前研究投資者的情緒對證券市場波動影響時，通常使用間接情緒指標和直接情緒指標對投資者情緒進行測量。間接情緒指標採用客觀的測量來從側面反應投資者的情緒，但由於其基於歷史交易數據構建，在衡量投資者情緒時有明顯的滯後性；直接情緒指標可通過對投資者進行問卷調查獲得，但調查時的情緒不代表其投資決策時的情緒，這樣測量的誤差較大，並且調查成本較高。隨著互聯網的出現和發展，人們獲取信息更加便利和快捷。互聯網已經成了人們最主要的信息獲取渠道。投資者在各社會化媒體平臺中獲取、發布和傳播證券市場相關信息，其中蘊含著大量投資者的情緒。爆炸式的媒體信息吸引了學術界和業界大量研究人員嘗試使用自然語言處理技術和傳統機器學習模型來挖掘媒體信息中的投資者情緒以及分析其對證券市場波動的影響。然而受信息技術和跨學科領域的限制，目前的相關研究對社會化媒體信息挖掘的角度不夠完整，提取的投資者情緒不具代表性，使用的分析方法已無法適用於大數據背景下海量社會化媒體對證券市場影響的研究。
因此，本書利用定向分佈式爬蟲從社會化媒體平臺獲取完整的文本信息，提出中文語句卷積神經網路（Chinese Sentence Convolutional Neural Network，CSCNN）核心算法可以根據中文語法和語義結構提取文本情緒，結合社會化媒體文本信息的結構特點構建出社會化媒體投資者情緒指數（Social Media Investor Sentiment Index，SMISI），在基於社會化媒體情緒驅動的長短期記憶深度神經網路（Sentiment－driven Long Short－Term Memory，S－LSTM）核心算法基礎上搭建證券市場的社會化媒體效應量化智能平臺（Social Media Quantitative Intelligent Platform，SMQIP），用於探析社會化媒體投資者情緒對證券市場影響的深度和廣度。從結構上看，本書由八章組成，具體內容為：
第1章　導論，主要介紹選題背景、研究的意義、研究的思路和方法、全書的結構安排以及主要創新點。
第2章　文獻綜述，主要對社會化媒體量化、市場情緒和社會化媒體對證券市場波動影響三個方面的理論和文獻進行了系統的回顧和梳理。本章為研究社會化媒體量化、剖析社會化媒體信息與證券市場波動和防範系統性金融風險研究提供了強有力的支持和論證。
第3章　系統總體設計，從系統總體設計的角度，自上向下對本書的邏輯模塊和流程進行概述，對系統的數據處理流程進行說明，明確證券市場社會化媒體效應智能解決方案中模塊之間的關係，理順系統從數據抓取到文本信息處理情感提取，再到利用深度學習神經網路對社會化媒體與證券市場波動的影響進行關聯分析的流程，以確保系統模塊完整和研究順利推進。
第4章　社會化媒體量化與投資者情緒提取研究，主要對社會化媒體文本信息量化和投資者情緒的提取進行研究。首先對社會化媒體信息的抓取、過濾、預處理和詞彙量化過程進行了描述；隨後提出依據中文語句的語法和語義結構構建中文語句卷積神經網路（CSCNN）核心算法對文本情感極性進行判定；接著對情感判定模型進行了比較研究。
第5章　投資者情緒指數的構造，借鑑傳統指數構造原理，利用社會化媒體平臺文本信息結構特點，創新性地提出基於內容相似度矩陣、引用關係矩陣和回復關係矩陣的社會化媒體文本語句權重Sentence Rank算法計算語句權重，結合用戶影響力因子、閱讀數量因子和點讚數量因子，構造了社會化媒體投資者情緒指數（SMISI），為後續研究提供了重要的特徵變量。
第6章　SMISI對證券市場波動的量化研究， 通過實證研究， 首先將SMISI與Fama五因子模型結合，驗證了SMISI對證券市場收益率的系統性影響；接著利用VAR模型研究SMISI對證券市場波動影響的深度和廣度。隨後提出基於社會化媒體情緒驅動的S－LSTM深度神經網路模型核心算法，更加準確地捕捉社會化媒體投資者情緒對證券市場的影響效應，並通過模擬的方式驗證了SMISI在量化投資中應用的可行性。
第7章　面向證券市場策略的SMQIP檢驗與分析，從市場監管者、上市公司和投資者三個不同的角度剖析了社會化媒體信息引導市場情緒，導致證券市場資產價格波動，甚至影響金融穩定的內在機理。並利用具體案例從以上三個角度分別驗證了基於大數據的證券市場社會化媒體效應量化智能平台（SMQIP）的應用可行性。
第8章　總結、不足與研究展望，對全書進行了總結，對研究中存在的不足進行了分析和反思，對於金融智能領域的研究熱點和方向以及未來可能進行的研究計劃進行了展望。
本書在現有研究的基礎之上，沿著「社會化媒體———投資者情緒———證券市場波動」的主線，對基於大數據的證券市場媒體效應進行了量化分析，主要的創新之處有以下三個方面：
第一，提出了一個基於深度學習的公眾情緒文本挖掘方法，綜合考慮文本內容和質量的影響，以捕捉社會化媒體中的公眾情緒。本書利用中文語句卷積神經網路對證券市場環境下的文本信息進行情感判定，結合社會化媒體結構特性，創新性地提出一套基於信息內容和發布結構的公眾情緒提取方法，利用論壇特有的結構即發帖、回復、轉發和引用等構建內容和結構的關聯圖，進而得到綜合關聯關係矩陣，從散亂的、高噪音的論壇信息討論中挖掘出主導性言論。綜合考慮社會化媒體信息的重要性和情感極性，提取出公眾對上市公司、板塊或整體市場的情緒傾向。
第二，基於社會化媒體大數據，研究和優化了證券市場情緒指數的構建方法。本書創新性地利用統計學中指數構造原理，對正面情緒和負面情緒給予不同權重，構造了證券市場的社會化媒體投資者情緒指數（SMISI），並結合證券市場歷史交易數據，從大數據角度系統剖析社會化媒體對證券市場波動的影響機理和傳導機制，為金融學領域經典問題的研究提供了大數據驅動的探索思路；同時，結合成分股的社會化媒體情感指數，細分了社會化媒體主板情感指數、中小板情感指數和創業板情感指數等。這些指數對於金融市場監管者監控證券市場波動、上市公司決策和投資者投資組合時都有重要的參考價值。
第三，集成情緒判定、文本賦權和情緒指數市場效應評估等核心算法，構建了情緒對證券市場波動影響分析的系統原型，並應用於本書的研究中。本書開創性地通過以社會化媒體情緒為驅動的時序神經網路，通過改造LSTM單元，增加情緒增強門，改變了遺忘門、輸入門和輸出門數據結構，解決了深度神經網路中連續時序數據和離散時序數據融合的問題。基於此搭建的基於大數據的證券市場社會化媒體效應量化智能平臺（SMQIP），可以為市場監管機構、上市公司、投資者以及相關領域研究者提供理論參考和決策支持。以社會化媒體情緒為驅動的時序神經網路結構也可為其他領域對連續時序數據和離散時序數據問題的解決開拓新的思路。