大數據與數據湖政策法規(guī)重點基礎知識點

大數據與數據湖政策法規(guī)重點基礎知識點一、大數據與數據湖概述1.大數據概念a.大數據定義：大數據是指規(guī)模巨大、類型多樣、價值密度低的數據集合。b.大數據特點：數據量大、數據類型多、處理速度快、價值密度低。c.大數據應用領域：金融、醫(yī)療、教育、交通、物流等。2.數據湖概念a.數據湖定義：數據湖是一種存儲和管理大數據的分布式文件系統(tǒng)。b.數據湖特點：支持多種數據格式、高擴展性、低成本、易于管理。c.數據湖應用場景：數據挖掘、機器學習、數據分析等。3.大數據與數據湖的關系a.數據湖是大數據存儲的基礎設施。b.大數據是數據湖存儲的核心內容。c.數據湖為大數據應用提供支持。二、大數據與數據湖政策法規(guī)1.國家政策法規(guī)a.《中華人民共和國網絡安全法》：明確大數據、數據湖等網絡安全要求。b.《中華人民共和國數據安全法》：規(guī)范數據收集、存儲、處理、傳輸等活動。c.《中華人民共和國個人信息保護法》：保護個人隱私，規(guī)范個人信息處理。2.行業(yè)政策法規(guī)a.金融行業(yè)：中國發(fā)布的《金融科技發(fā)展規(guī)劃（20192021年）》。b.醫(yī)療行業(yè)：國家衛(wèi)生健康委員會發(fā)布的《關于促進大數據與醫(yī)療衛(wèi)生深度融合發(fā)展的指導意見》。c.交通行業(yè)：交通運輸部發(fā)布的《交通運輸大數據發(fā)展十三五規(guī)劃》。3.地方政策法規(guī)a.北京：發(fā)布《北京市大數據發(fā)展行動計劃（20182020年）》。b.上海：發(fā)布《上海市大數據發(fā)展十三五規(guī)劃》。c.廣東：發(fā)布《廣東省大數據發(fā)展十三五規(guī)劃》。三、大數據與數據湖基礎知識點1.大數據技術a.分布式存儲技術：如Hadoop、Spark等。b.數據挖掘技術：如聚類、分類、關聯(lián)規(guī)則等。c.機器學習技術：如深度學習、強化學習等。2.數據湖技術a.分布式文件系統(tǒng)：如HDFS、Alluxio等。b.數據湖管理系統(tǒng)：如Hive、SparkSQL等。c.數據湖安全與隱私保護：如Kerberos、HDFS權限控制等。3.大數據與數據湖應用案例a.金融行業(yè)：利用大數據技術進行風險控制、欺詐檢測等。b.醫(yī)療行業(yè)：利用大數據技術進行疾病預測、個性化治療等。c.交通行業(yè)：利用大數據技術進行交通流量預測、智能交通管理等。1.國家互聯(lián)網信息辦公室.(2017).中華人民共和國網絡安全法.北京：中國法制出版社.2.國家互聯(lián)網信息辦公室.(2017).中華人民共和國數據安全法.北京：中國法制出版社.3.國家互聯(lián)網信息辦公室.(2017).中華人民共和國個人信息保護法.北京：中國法制出版社.4.中國.(2019).金融科技發(fā)展規(guī)劃（20192021年）.北京：中國.5.國家衛(wèi)生健康委員會.(2017).關于促進大數據與醫(yī)療衛(wèi)生深度融合發(fā)展的指導意見.北京：國家衛(wèi)生健康委員會.6.交通運輸部.(2016).交通運輸大數據發(fā)展十三五規(guī)劃.北京：交通運輸部.7.北京市經濟和信息化委員會.(2018).北京市大數據發(fā)展行動計劃（20182020年）.北京：北京市經濟和信息化委員會.8.上海市經濟和信息化委員會.(2017).上海市大數據發(fā)展十三五規(guī)劃