论文部分内容阅读
大數據應用,優勢巨大
今時今日,大數據已經應用到各行各業,發揮著不可替代的作用,創造著不可估量的價值。說起大數據,大家都已經耳目能詳,但是大多數人對它的認識都仍然比較狹隘。顧名思義,大數據首先體現在數據的量級很“大”,可數據是一個比較抽象的東西,我們該怎麼去描述數據的“大”呢?這裏面就涉及到一些專業領域的東西了。
“大數據”是一個涵蓋多種技術的概念,簡單地說,是指無法在一定時間內用常規軟體工具對其內容進行抓取、管理和處理的數據集合,是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的資訊資產。其類型繁多,包括文字、音頻、視頻、圖片、地理位置資訊等。而大數據同過去的海量數據亦有所區別,其基本特徵可以用“5個V”來總結,首先,是Volume(大量),其數據體量巨大,從TB級別,躍升到PB級別;其次是Variety(多樣),數據類型繁多;三是Value(低價值密度),以視頻為例,連續不間斷監控過程中,可能有用的數據僅僅有一兩秒;四是Velocity(高速),處理速度快;其五,Veracity(真實性),大數據中的內容是與真實世界中的發生息息相關的,研究大數據就是從龐大的網絡數據中提取出能夠解釋和預測現實事件的過程。
在大數據的分析應用層面,我們必然要關注大數據是否會產生價值,大數據的意義在哪?如果花很多資源去收集和獲取數據,卻不能產生價值或者價值很低的話,那麼就失去了它的意義。因此,價值含量、挖掘成本是大數據應用中最主要的考量。對於很多行業而言,如何利用這些大規模數據是贏得競爭的關鍵。也就是說,大數據技術的戰略意義不在於掌握龐大的數據資訊,而在於對這些含有意義的數據進行專業化處理。如果把大數據比作一種產業,那麼這種產業實現盈利的關鍵,在於提高對數據的“加工能力”,通過“加工”實現數據的“增值”。這其中又涉及到技術的層面如何獲取數據,進而對海量的數據進行處理、解讀,以致達到對問題之說明與解決。即以一般企業而言,通過相關數據和分析可以幫助它們降低成本、提高效率、開發新產品、做出更明智的業務決策等等。
大數據的應用層面很廣,包括社交數據分析、行銷平臺數據分析,比如透過電商平臺購買商品,從而產生交易數據、物流數據等,以及電子支付、巴士到站、旅客引流、巴士的地理位置等,這些層面都產生大數據出來。隨著大數據時代的來臨,我們可以看到,物聯網、雲計算、移動互聯網、車聯網、手機、平板電腦、PC以及遍佈地球各個角落的各種各樣的感測器,這些都是數據來源或者承載的方式。如今大數據的深度和廣度遠不止這些,大數據已經在人類社會實踐中發揮著巨大的優勢,其利用價值也超乎想像。
旅遊大數據,效益突出
大數據運用在澳門旅遊業界最為突出。早在2014年,我們就開始講旅遊大數據,通過論壇、探討會以及政府部門溝通等不同場合,探索大數據平臺的應用。事實上,在數據已成為戰略資源的今天,大數據已經成為快速把握旅遊業運行規律,開展業務和服務模式創新,引領產業轉型升級的必然選擇。大數據在旅遊行業的應用場景主要體現在旅遊市場細分、旅遊行銷診斷、景區動態監測、遊客引流導流、旅遊輿情監測等方面。通過旅遊大數據,對遊客畫像及旅遊輿情進行分析,可以有效提升協同管理和公共服務能力,推動旅遊服務、旅遊行銷、旅遊管理、旅遊體驗提升等。
比如旅客在來澳門之前,我們如何通過大數據行銷進行旅遊推廣,以及對每年數以千萬的旅客進行大數據管理。旅客在澳門的消費、遊覽等,都會留下軌跡,這些活動軌跡都是可記錄、可追蹤、可計算的,並且通過數據的形式得以展現出來,進而對這些海量數據提取分析,形成旅遊大數據管理,以此清晰地描述整個景區的旅客動態;對各景區客流量、車流量、遊客來源、投訴建議統計、周邊消費情況的監控統計;還能進行遊客來源地分析,常住地分析,遊客出行地分析。甚至是社區經濟的活化,針對一些比較偏僻但富有旅遊價值的街區,結合旅客的行為分析和地理環境數據的匹配,進行推廣引流。
除了引流之外,旅客的活動還會產生資金流,他去到一個街區,所進行的消費:買過什麼,住哪裡,都有消費軌跡,並由消費產生資金流數據。此外,還可以獲得顧客評價,對澳門的旅遊體驗和商家的服務等形成服務評價的體系,產生社交數據,透過社交數據的反映,進而可評估澳門的旅遊經濟活動水準如何,客流情況等,同時旅客評價也可以回饋給商家、政府等,能夠幫助旅遊產業上下游各個環節進行科學而且精準的方案調整和決策支持。乃至對於旅客離澳之後,仍然可以通過大數據的管理維護旅客關係,根據他過往的喜好,推送特定的服務項目、優惠等,向旅客進行二次、三次的推廣。
由此可以看到,以數據流引領技術流、資金流、人才流、物資流,已經越來越深刻影響社會分工協作的組織模式,促進社會經濟活動的和創新,對推動經濟高質量發展具有關鍵作用。當然,大數據不僅在旅遊產業上能發揮獨特效益,在智慧交通、氣象、電子政務、醫療、教育等,都可以為我們的社會運作提供更強的決策力、洞察發現力和流程優化能力支援。比如這次政府為應對疫情投放口罩,雖然有基礎的流程管理,但如果通過更高端的大數據管理來推進這個計劃,可以進一步提升效益,通過社交平臺,市民在家都可以瞭解哪個店還有多少口罩,有多少人排隊,直接預約,到了時間直接去取,不需要排隊,以避免人群聚集。
大數據產業,尚未形成
目前全球大數據企業主要分為兩大陣營。一部分屬於單純以大數據技術為核心的創新型公司,希望為市場帶來創新方案並推動技術發展。另有一些則是以資料庫/數據倉儲業務為主的知名公司,利用自身資源與技術優勢地位衝擊大數據領域。比如內地的百度公司為例,其核心在於雲計算+大數據,在為線民提供海量中文資訊的同時,進行商業推廣等綜合服務。在互聯網日益繁榮、BAT三巨頭觸角無所不達的今天,越來越多人的工作、生活、社交都逃不開百度、騰訊、阿裡等互聯網企業。 過去十年間,我們團隊在實踐中深耕大數據領域,研發出網絡網絡大數據挖掘平臺,以網絡技術對海量的網絡文本資訊進行採集、抽取,對數據進行採集、結構化、清洗,建立行業專屬的資料庫,同時透過機器學習及人工編碼方式,讓分析人員在平臺上執行科學嚴謹的數據分析方法,開展輿情分析、粉絲行為分析、消費者分析、旅客分析,目前服務的對象包括澳門、內地、香港的政府單位和企業,以及甚至臺灣地區的商業機構。
從宏觀大環境來說,澳門是一個高度自由開放的市場,有著與國際密切接軌的優勢,為大數據的收集和分析提供了良好的土壤。但另一方面,從業態發展形勢來看,澳門的優勢並不明顯,比如面臨著技術創新與支撐能力不強、大數據應用水準不高、產業支撐體系不完善、人才缺口大等困難和問題,仍需各方協力攻堅克難。此外,澳門市場空間小,在網絡環境、業務架構和技術能力等存在局限,而企業級規模所面臨的基礎設施投入又比較大,在這樣的情形下,大數據產業生態比較難形成。
目前,澳門對於大數據應用發展還要具備更高的視野,跳出地理空間的限制,跳出澳門這個小市場,利用網絡和雲技術,去拓展更廣的市場。
所以儘管大數據產業已經成為新型經濟單元,但澳門的大數據分析應用都還沒有達到產業的層面。促使大數據的發展,離不開好的經濟環境、基礎設施、政策措施和應用的用戶環境,只有這些因素都足夠成熟,才會吸引大家投入,才能看得到產業的前景,現時澳門還有很長的路要走。很多數據僅僅分散在各個板塊環節裏,相互之間的關聯度不高,未能形成一個體系化、結構化的數據分析應用系統,而且大數據有數據沉澱、數據挖掘和數據呈現這樣的規律,並非一朝一夕就可以形成。尤其現在,大家還只是把大數據當作資訊的形式,然而大數據並不是單純的資訊科技,除了IT技術有關,還跟服務的模式、商業的模式和技術密切相關。
全球知名諮詢公司代表麥肯錫稱:“大數據,已經滲透到當今每一個行業和業務職能領域,成為重要的生產因素。”一言以蔽之,時下所有的科技創新服務都離不開大數據,大數據就是科技的靈魂和骨髓。可以說,澳門社會對大數據的認知和應用都仍處於比較初級的階段,不少市民或企業的思想還很保守,甚至還存在一些恐懼的心理,擔心數據和隱私洩露,這可能是對數據安全和隱私方面的過度解讀或誤解。
數據資訊安全對我們每個人固然都有很重要的意義,但數據安全有著嚴格的規範標準,比如電子支付,過去很多人顧慮其安全性的問題,但時至今天,電子支付已經被越來越廣泛使用,卻鮮少見其引發的重大安全事故。如果本澳社會沒有在這些問題上達成共識的話,那麼大數據這一技術綜合就難以發揮其獨特的效應。這一工作關鍵有賴於政府層面出臺一個比較清晰明確的定位,提升社會對大數據的認識度、接受度和應用度,同時形成配套的行業和產業政策,通過政策制定措施,配合智慧城市項目和創新產業業的發展。
今時今日,大數據已經應用到各行各業,發揮著不可替代的作用,創造著不可估量的價值。說起大數據,大家都已經耳目能詳,但是大多數人對它的認識都仍然比較狹隘。顧名思義,大數據首先體現在數據的量級很“大”,可數據是一個比較抽象的東西,我們該怎麼去描述數據的“大”呢?這裏面就涉及到一些專業領域的東西了。
“大數據”是一個涵蓋多種技術的概念,簡單地說,是指無法在一定時間內用常規軟體工具對其內容進行抓取、管理和處理的數據集合,是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的資訊資產。其類型繁多,包括文字、音頻、視頻、圖片、地理位置資訊等。而大數據同過去的海量數據亦有所區別,其基本特徵可以用“5個V”來總結,首先,是Volume(大量),其數據體量巨大,從TB級別,躍升到PB級別;其次是Variety(多樣),數據類型繁多;三是Value(低價值密度),以視頻為例,連續不間斷監控過程中,可能有用的數據僅僅有一兩秒;四是Velocity(高速),處理速度快;其五,Veracity(真實性),大數據中的內容是與真實世界中的發生息息相關的,研究大數據就是從龐大的網絡數據中提取出能夠解釋和預測現實事件的過程。
在大數據的分析應用層面,我們必然要關注大數據是否會產生價值,大數據的意義在哪?如果花很多資源去收集和獲取數據,卻不能產生價值或者價值很低的話,那麼就失去了它的意義。因此,價值含量、挖掘成本是大數據應用中最主要的考量。對於很多行業而言,如何利用這些大規模數據是贏得競爭的關鍵。也就是說,大數據技術的戰略意義不在於掌握龐大的數據資訊,而在於對這些含有意義的數據進行專業化處理。如果把大數據比作一種產業,那麼這種產業實現盈利的關鍵,在於提高對數據的“加工能力”,通過“加工”實現數據的“增值”。這其中又涉及到技術的層面如何獲取數據,進而對海量的數據進行處理、解讀,以致達到對問題之說明與解決。即以一般企業而言,通過相關數據和分析可以幫助它們降低成本、提高效率、開發新產品、做出更明智的業務決策等等。
大數據的應用層面很廣,包括社交數據分析、行銷平臺數據分析,比如透過電商平臺購買商品,從而產生交易數據、物流數據等,以及電子支付、巴士到站、旅客引流、巴士的地理位置等,這些層面都產生大數據出來。隨著大數據時代的來臨,我們可以看到,物聯網、雲計算、移動互聯網、車聯網、手機、平板電腦、PC以及遍佈地球各個角落的各種各樣的感測器,這些都是數據來源或者承載的方式。如今大數據的深度和廣度遠不止這些,大數據已經在人類社會實踐中發揮著巨大的優勢,其利用價值也超乎想像。
旅遊大數據,效益突出
大數據運用在澳門旅遊業界最為突出。早在2014年,我們就開始講旅遊大數據,通過論壇、探討會以及政府部門溝通等不同場合,探索大數據平臺的應用。事實上,在數據已成為戰略資源的今天,大數據已經成為快速把握旅遊業運行規律,開展業務和服務模式創新,引領產業轉型升級的必然選擇。大數據在旅遊行業的應用場景主要體現在旅遊市場細分、旅遊行銷診斷、景區動態監測、遊客引流導流、旅遊輿情監測等方面。通過旅遊大數據,對遊客畫像及旅遊輿情進行分析,可以有效提升協同管理和公共服務能力,推動旅遊服務、旅遊行銷、旅遊管理、旅遊體驗提升等。
比如旅客在來澳門之前,我們如何通過大數據行銷進行旅遊推廣,以及對每年數以千萬的旅客進行大數據管理。旅客在澳門的消費、遊覽等,都會留下軌跡,這些活動軌跡都是可記錄、可追蹤、可計算的,並且通過數據的形式得以展現出來,進而對這些海量數據提取分析,形成旅遊大數據管理,以此清晰地描述整個景區的旅客動態;對各景區客流量、車流量、遊客來源、投訴建議統計、周邊消費情況的監控統計;還能進行遊客來源地分析,常住地分析,遊客出行地分析。甚至是社區經濟的活化,針對一些比較偏僻但富有旅遊價值的街區,結合旅客的行為分析和地理環境數據的匹配,進行推廣引流。
除了引流之外,旅客的活動還會產生資金流,他去到一個街區,所進行的消費:買過什麼,住哪裡,都有消費軌跡,並由消費產生資金流數據。此外,還可以獲得顧客評價,對澳門的旅遊體驗和商家的服務等形成服務評價的體系,產生社交數據,透過社交數據的反映,進而可評估澳門的旅遊經濟活動水準如何,客流情況等,同時旅客評價也可以回饋給商家、政府等,能夠幫助旅遊產業上下游各個環節進行科學而且精準的方案調整和決策支持。乃至對於旅客離澳之後,仍然可以通過大數據的管理維護旅客關係,根據他過往的喜好,推送特定的服務項目、優惠等,向旅客進行二次、三次的推廣。
由此可以看到,以數據流引領技術流、資金流、人才流、物資流,已經越來越深刻影響社會分工協作的組織模式,促進社會經濟活動的和創新,對推動經濟高質量發展具有關鍵作用。當然,大數據不僅在旅遊產業上能發揮獨特效益,在智慧交通、氣象、電子政務、醫療、教育等,都可以為我們的社會運作提供更強的決策力、洞察發現力和流程優化能力支援。比如這次政府為應對疫情投放口罩,雖然有基礎的流程管理,但如果通過更高端的大數據管理來推進這個計劃,可以進一步提升效益,通過社交平臺,市民在家都可以瞭解哪個店還有多少口罩,有多少人排隊,直接預約,到了時間直接去取,不需要排隊,以避免人群聚集。
大數據產業,尚未形成
目前全球大數據企業主要分為兩大陣營。一部分屬於單純以大數據技術為核心的創新型公司,希望為市場帶來創新方案並推動技術發展。另有一些則是以資料庫/數據倉儲業務為主的知名公司,利用自身資源與技術優勢地位衝擊大數據領域。比如內地的百度公司為例,其核心在於雲計算+大數據,在為線民提供海量中文資訊的同時,進行商業推廣等綜合服務。在互聯網日益繁榮、BAT三巨頭觸角無所不達的今天,越來越多人的工作、生活、社交都逃不開百度、騰訊、阿裡等互聯網企業。 過去十年間,我們團隊在實踐中深耕大數據領域,研發出網絡網絡大數據挖掘平臺,以網絡技術對海量的網絡文本資訊進行採集、抽取,對數據進行採集、結構化、清洗,建立行業專屬的資料庫,同時透過機器學習及人工編碼方式,讓分析人員在平臺上執行科學嚴謹的數據分析方法,開展輿情分析、粉絲行為分析、消費者分析、旅客分析,目前服務的對象包括澳門、內地、香港的政府單位和企業,以及甚至臺灣地區的商業機構。
從宏觀大環境來說,澳門是一個高度自由開放的市場,有著與國際密切接軌的優勢,為大數據的收集和分析提供了良好的土壤。但另一方面,從業態發展形勢來看,澳門的優勢並不明顯,比如面臨著技術創新與支撐能力不強、大數據應用水準不高、產業支撐體系不完善、人才缺口大等困難和問題,仍需各方協力攻堅克難。此外,澳門市場空間小,在網絡環境、業務架構和技術能力等存在局限,而企業級規模所面臨的基礎設施投入又比較大,在這樣的情形下,大數據產業生態比較難形成。
目前,澳門對於大數據應用發展還要具備更高的視野,跳出地理空間的限制,跳出澳門這個小市場,利用網絡和雲技術,去拓展更廣的市場。
所以儘管大數據產業已經成為新型經濟單元,但澳門的大數據分析應用都還沒有達到產業的層面。促使大數據的發展,離不開好的經濟環境、基礎設施、政策措施和應用的用戶環境,只有這些因素都足夠成熟,才會吸引大家投入,才能看得到產業的前景,現時澳門還有很長的路要走。很多數據僅僅分散在各個板塊環節裏,相互之間的關聯度不高,未能形成一個體系化、結構化的數據分析應用系統,而且大數據有數據沉澱、數據挖掘和數據呈現這樣的規律,並非一朝一夕就可以形成。尤其現在,大家還只是把大數據當作資訊的形式,然而大數據並不是單純的資訊科技,除了IT技術有關,還跟服務的模式、商業的模式和技術密切相關。
全球知名諮詢公司代表麥肯錫稱:“大數據,已經滲透到當今每一個行業和業務職能領域,成為重要的生產因素。”一言以蔽之,時下所有的科技創新服務都離不開大數據,大數據就是科技的靈魂和骨髓。可以說,澳門社會對大數據的認知和應用都仍處於比較初級的階段,不少市民或企業的思想還很保守,甚至還存在一些恐懼的心理,擔心數據和隱私洩露,這可能是對數據安全和隱私方面的過度解讀或誤解。
數據資訊安全對我們每個人固然都有很重要的意義,但數據安全有著嚴格的規範標準,比如電子支付,過去很多人顧慮其安全性的問題,但時至今天,電子支付已經被越來越廣泛使用,卻鮮少見其引發的重大安全事故。如果本澳社會沒有在這些問題上達成共識的話,那麼大數據這一技術綜合就難以發揮其獨特的效應。這一工作關鍵有賴於政府層面出臺一個比較清晰明確的定位,提升社會對大數據的認識度、接受度和應用度,同時形成配套的行業和產業政策,通過政策制定措施,配合智慧城市項目和創新產業業的發展。