sponsored links

大資料時代,別掉進統計陷阱

統計是經濟社會管理的重要依據,也是現代(社會)科學研究的重要技術手段,在大資料出現以前更是如此。然而,任何技術都具有兩面性,具有雙刃劍作用,只有正確使用才能產生好的效果,否則,濫用或錯誤運用,其破壞性也是不容小覷的。

大資料時代,別掉進統計陷阱

善於運用統計是科學理性的表現,是進步的標誌之一。最典型例子,大概20多年前,天氣預報往往會用肯定性的語言,如今天小雨,或陰天,或晴天,或小雨轉多雲等。但發現群眾意見很大,因為依據天氣預報來安排日程,往往出錯。於是後來的表述就更科學一些了,採用統計或機率的方法,如降水機率50%,或者溼度80%。

小資料時代,統計學在研究宏觀現象時非常有效,用於微觀現象則要慎重,但如果正確運用則具有意想不到的效果。比如,量子力學、統計力學在理解很多熱力學概念(例如熵、溫度、氣體狀態)的起源方面取得了巨大成功,尤其是在普朗克1911年提出光量子的統計原理後,與量子理論的結合進一步完善了統計力學的基礎。

大資料時代,別掉進統計陷阱

大資料學科的出現,在一定程度上豐富了統計學的內容,提升了統計技術。大多數情況下,可以運用雲計算直接分析整體(全樣本)大資料,而不必要進行抽樣,以樣本推斷總體,這就改變了傳統科學研究的線性思維,而用直接面對複雜科學的系統思維,更多考慮要素之間的相關性,而不是因果關係。但這並不能否定統計思維的作用,因為大資料學科中包括了統計學中資料分析的基本方法,如迴歸分析、分類模型、整合模型、聚類模型等,描述的性質也是統計學語言,仍然需要統計思維來發現規律。

我們經常會在媒體上看到各種各樣違背常識或是與我們想象中不同的驚人結論,每當看到這樣的結論時,公眾都會產生疑惑,時間長了人們可能逐漸不再相信媒體報道的資料。越來越多不靠譜的結論讓人們很難再相信它們。

這不是統計思維的問題,而是使用統計技術的人出現了錯誤。對於公眾來說,瞭解統計技術,具備統計思維,更有利於識別和判斷資訊的有效性。否則,一旦統計結論和實際情況的偏差並且不能讓我們意識到,我們就會很輕易地相信了這些結論。所以,在學習使用統計思維時,透過思考如何避免常見的統計陷阱是非常有必要的。我們這樣做不僅可以避免相信錯誤結論,而且能夠讓我們對於統計思維的本質有更深層次的思考。

大資料時代,別掉進統計陷阱

一些作者尤其是學生,喜歡用調查資料來論證,用定量方法進行分析,從研究的角度考慮,這是提高科學性增進結論可靠性的有效技術路線。但問題是很多作者只是停留在形式上,並不考慮抽樣框如何確定、技術是否合理,資料是否可靠,即使用了定量分析,也不能把結論與分析結合起來,有時都不知道為什麼要研究這個問題,於是,大量的研究成為無效勞動,出現很多偽命題偽研究,浪費時間和資源。

大資料時代的到來,對於公眾來說,提升統計思維顯得非常必要。但要避免統計陷阱。一是要思考資料的來源和方法。當看到結論時,我們要同時思考輔助結論推匯出來的源資料是如何進行採集、錄入、加工到輸出的,這中間是否存在影響結論客觀公正性的問題。二是統計方法是否合適。日常工作生活中,我們要結合研究目的、資料型別及特點,來選擇合適的方式。例如,平均值適合的情況是樣本分佈呈正態分佈或是橄欖球形狀的,在偏態分佈或是兩極分化嚴重的隨機現象中,更合適的方式是採用分位數。三是避免大資料忽悠。所有的分析工作最終都是為了得到一個結論,有了結論就會做出相應的決策,這些決策一般都會帶來較為重要的影響,所以發現結論錯誤是非常重要且非常有必要的。常見的結論謬誤是以偏概全,即將結論的影響因素只歸結到了少數幾種因素,對於某些重要因素並沒有考慮到。

來源 | 科普時報強國號

分類: 旅遊
時間: 2022-02-12

相關文章

感受別樣金秋 體味融合之美
10月4日,遊客在尉犁縣羅布人村寨景區遊覽.李飛攝 記者 任江 絢爛,是新疆秋天的底色.金秋十月,秋高氣爽,天山南北秋意正濃,新疆向天南海北的遊客們展現了最美的一面. 金秋的天山南北,是一幅幅動人的油 ...

北京環球影城火爆、梅西樂園告吹,體育如何分主題公園一杯羹?

北京環球影城火爆、梅西樂園告吹,體育如何分主題公園一杯羹?
體育大生意第2663期,歡迎關注領先的體育產業資訊平臺 文|羅冉峰 體育大生意記者 2021年中秋假期的焦點旅遊點,一定包括9月20日正式開業的北京環球影城.繼上海迪士尼樂園後,再有國際性的影視主題公 ...

此生必去的新疆怎麼玩?看完這篇就夠了

此生必去的新疆怎麼玩?看完這篇就夠了
"新疆是我在祖國去過的最好玩的地方!" "羊肉串太好吃了,後悔沒多吃幾串!" "真不該入的坑--新疆." "原來動漫裡的場景是真實 ...

我心嚮往之||長白山推出全新自由行玩法

我心嚮往之||長白山推出全新自由行玩法
9月15日,"乘醉美高鐵 賞大美長白"長白山秋冬季文旅產品(長春)推介會成功舉辦,會上推出全新自由行玩法,受到眾人青睞. "火山鑄熔岩,一池蘊三江,雪谷湧溫泉,林海納百川 ...

中國建築又一項世界之最!新雪國金頂酒店建有638米高穿山電梯

中國建築又一項世界之最!新雪國金頂酒店建有638米高穿山電梯
新雪國金頂酒店由香港構詩建築.同圓設計集團.北京元道聯袂打造.作為新雪國度假區的頂級度假酒店,將是未來世界最高穿山電梯的終點,同時也是800m落差高階雪道的起點. 1.速度&激情 新雪國金頂酒 ...

這十家酒店告訴你日本人心中的奢華

這十家酒店告訴你日本人心中的奢華
你心中的日本是什麼樣子?是漫天櫻花在空中飄飛,交織成粉一團.白一片的雲彩?是動漫裡澄澈湛藍的天空,橫平豎直的街道?還是那座總是頂著一層"奶蓋"的富士山?隨著日本成為越來越多人出境遊 ...

冬奧旅遊驚豔國慶黃金週,北京冬奧產業鏈加速升溫

冬奧旅遊驚豔國慶黃金週,北京冬奧產業鏈加速升溫
體育大生意第2683期,歡迎關注領先的體育產業資訊平臺 文|林森 體育大生意記者 後疫情時代的首個十一國慶黃金週,全國文化.旅遊.商業.餐飲等市場消費呈現出一片持續升溫的景象.作為即將舉辦2022冬奧 ...

這8處金秋自駕遊線路,總有一款適合你(附線路地圖)

這8處金秋自駕遊線路,總有一款適合你(附線路地圖)
以下內容摘自<汽車自駕遊>雜誌 看點1 沿海 漫長的海岸線,串聯起地質構造迥異的海岸自然風景.串聯起風貌獨特的多彩人文--我們駕車穿行其間,連綴起這些海岸的是一個個不知名的港灣.漁村,大海 ...

藏在湖南的大草原,被譽為“北江之源的一滴眼淚”,距市區60公里

藏在湖南的大草原,被譽為“北江之源的一滴眼淚”,距市區60公里
藏在湖南的大草原,被譽為"北江之源的一滴眼淚",距市區60公里 很多人認為大草原是內蒙古自治區的專利,確實是,因為我們所看到的畫面都是來自於內蒙古自治區.這裡有我國最大的草原,牧民 ...

北京有個風景秀美的村莊,溪流疊水,野花遍地,現在去正好

北京有個風景秀美的村莊,溪流疊水,野花遍地,現在去正好
道路旁野花盛開 潺潺溪水村中流過 環境優美 風景怡人 北京市昌平區南口鎮 羊臺子村 是一座靜謐的小山村 這裡群山環繞, 形成了秀麗清幽的自然景觀. 假日從京城驅車1.5小時 就能來這裡體驗另外一種生活 ...

嫁給相戀16年的初戀,32歲黃雅莉活成城市版李子柒:寶藏女孩實錘了

嫁給相戀16年的初戀,32歲黃雅莉活成城市版李子柒:寶藏女孩實錘了
中國設計微刊,專注「家居.時尚.創意」設計分享 設計空間 | 書畫藝術 | 生活美學 來源:藝非凡 ID:efifan 黃雅莉結婚了. 對方是戀愛長跑16年的初戀,訊息一出,很多人深感詫異. 如果不是 ...

讀《唐詩三百首·一詩一畫》:當黎明破曉時分

讀《唐詩三百首·一詩一畫》:當黎明破曉時分
中國小康網 獨家專稿 <唐詩三百首·一詩一畫> 作者:郝雪山 定價:98.00元 出版社:山西教育出版社 文|張凡 一首詩可以在一百年.兩百年,甚至上千年後被一讀再讀,並且激起人們心中無盡 ...

隱藏在湖南的大草原,被稱“北江之源的一滴眼淚”,距市區60公里

隱藏在湖南的大草原,被稱“北江之源的一滴眼淚”,距市區60公里
夏天的炎熱已經悄悄的褪去,秋天也已經來到,大家對於秋天都有一種嚮往之情,秋天是一個非常美好的季節,是一個擁有五顏六色的季節. 秋天的到來讓很多小夥伴都想去感受一下大自然的美好,在一望無際的草原上感受秋 ...

舒適又時髦的出行搭配指南

舒適又時髦的出行搭配指南
對於每年四季分明的地方, 每個季節我們都與大自然有個約定. 比如: 春天要踏青, 夏天要觀海, 冬天要賞雪, 那麼現在秋天已到, 就該登山了. 在赴每個約的時候, 好像約定俗成的要穿合適應景的衣服, ...

遊在山海 愛在煙臺

遊在山海 愛在煙臺
來源:煙臺日報-大小新聞 煙臺,全國首批14個沿海開放城市之一, 一座擁有悠久歷史和燦爛文化的國家歷史文化名城. 這方土地,有"京劇碼頭"的韻.有"魯菜之都"的 ...

北方崑曲劇院“花式”吟崑曲 多元方式傳承初心
10月1日至7日,第五屆中國戲曲文化周在北京園博園舉辦.本屆中國戲曲文化周以"中國夢·中華魂·戲曲情"為主題,在傳承.融合.對話中,呈現"園林中的戲曲.戲曲中的園林&qu ...

東北十大冷門景點,人少景美好玩

東北十大冷門景點,人少景美好玩
每當節假日來的時候,一些著名的景點總是人很多,也沒法得到應有的服務,這時候可否考慮一些冷門景點?東北是中國的旅遊勝地,除了哈爾濱.大連.瀋陽這些知名的旅遊城市,也有不少是最近開始走紅的景點.筆者特意為 ...

小盞大道——生活中的茶文化
小盞大道 --生活中的茶文化 新甘肅·甘肅日報記者 尹航 李婷 梁實秋在<喝茶>一文中說,凡是有中國人的地方就有茶,有茶的地方,必有茶文化. 國人飲茶,開始於漢,盛行於唐,宋明之際,許多文 ...

華為開始聯想化?

華為開始聯想化?
電腦產品線正在成為華為硬體突圍的一個新方向. 9月13日晚的新品釋出會上,從桌上型電腦.膝上型電腦到平板電腦和商用PC,華為來了個全覆蓋式更新,還發布了首款一體機--華為MateStation X,最 ...

南嶽衡山的魅力在哪?今天帶你去一探究竟

南嶽衡山的魅力在哪?今天帶你去一探究竟
那年的秋天,應在衡山縣委機關工作的李同學之邀,我們幾個要好的同學相約,來到了時隔三十多年的曾經實習工作之地--衡山縣祝融鄉,尋覓以往在這裡工作學習生活了三個多月的足跡,追思一下那激情燃燒歲月的往事.倍 ...