幫助中心 | 我的帳號 | 關於我們

大數據應用技術與實踐(大數據技術微課版工業和信息化精品系列教材)

  • 作者:編者:于麗娜//李瑋//左楠|責編:鹿征
  • 出版社:人民郵電
  • ISBN:9787115620965
  • 出版日期:2024/03/01
  • 裝幀:平裝
  • 頁數:158
人民幣:RMB 42 元      售價:
放入購物車
加入收藏夾

內容大鋼
    本書依托一個大數據綜合項目—電影市場的預測,按照大數據技術在該項目開發中的應用過程,將本書內容分為10個工作任務,包括初識Hadoop、搭建Hadoop集群、數據上傳、配置Hadoop高可用、數據清洗、使用MapReduce統計電影上映情況與排序、數據建倉、數據分析、數據遷移和數據可視化。書中的具體工作任務有助於讀者綜合運用大數據知識及各種工具軟體,實現大數據項目整體過程的操作。
    本書附有配套資源,包括源代碼、教學設計、教學課件等。
    本書可作為高等院校本、專科大數據相關專業的教材,也可供大數據相關從業人員參考。

作者介紹
編者:于麗娜//李瑋//左楠|責編:鹿征

目錄
工作任務1  初識Hadoop
  任務概述
  學習目標
    任務1.1  了解大數據
      【知識鏈接】
      1.1.1  什麼是大數據
      1.1.2  大數據的特徵
      1.1.3  研究大數據的意義
    任務1.2  了解大數據的應用場景
      【知識鏈接】
      1.2.1  醫療行業的應用
      1.2.2  金融行業的應用
      1.2.3  零售行業的應用
    任務1.3  了解Hadoop
      【知識鏈接】
      1.3.1  Hadoop的發展歷程
      1.3.2  Hadoop的優勢
      1.3.3  Hadoop的生態體系
      1.3.4  Hadoop的版本
  任務小結
  課後習題
  相關閱讀——「第七次全國人口普查」中的大數據技術應用
工作任務2  搭建Hadoop集群
  任務概述
  學習目標
  預備知識——集群和虛擬機
    任務2.1  安裝虛擬機
      【任務描述】
      【知識鏈接】
      2.1.1  VMware軟體
      2.1.2  Linux操作系統
      2.1.3  Hadoop集群
      【任務實施】
    任務2.2  克隆虛擬機
      【任務描述】
      【知識鏈接】
      2.2.1  克隆和備份的區別
      2.2.2  VMware的克隆類型
      【任務實施】
    任務2.3  網路配置
      【任務描述】
      【知識鏈接】
      【任務實施】
    任務2.4  SSH服務配置
      【任務描述】
      【知識鏈接】
      【任務實施】
    任務2.5  Hadoop集群搭建
      【任務描述】
      【知識鏈接】

      【任務實施】
  任務小結
  課後習題
  相關閱讀——名副其實的「網路大國」
工作任務3  數據上傳
  任務概述
  學習目標
  預備知識——HDFS概述
    任務3.1  使用Shell命令將電影數據上傳到Hadoop
      【任務描述】
      【知識鏈接】
      3.1.1  HDFS架構組成
      3.1.2  HDFS的Shell操作
      【任務實施】
    任務3.2  使用Java API上傳電影數據
      【任務描述】
      【知識鏈接】
      3.2.1  HDFS寫數據流程
      3.2.2  HDFS讀數據流程
      3.2.3  NameNode和SecondaryNameNode工作機制
      3.2.4  DataNode工作機制
      【任務實施】
  任務小結
  課後習題
  相關閱讀——根伺服器
工作任務4  配置Hadoop高可用
  任務概述
  學習目標
  預備知識——伺服器的可用性和高可用性
    任務4.1  配置ZooKeeper集群
      【任務描述】
      【知識鏈接】
      4.1.1  Hadoop中的單點故障
      4.1.2  ZooKeeper組件
      【任務實施】
    任務4.2  配置HDFS-HA集群
      【任務描述】
      【知識鏈接】
      【任務實施】
    任務4.3  配置HDFS-HA集群自動故障轉移
      【任務描述】
      【知識鏈接】
      4.3.1  自動故障轉移機制概述
      4.3.2  ZKFC
      【任務實施】
  任務小結
  課後習題
  相關閱讀——航天裝備的高可用
工作任務5  數據清洗
  任務概述

  學習目標
  預備知識——數據清洗概述
    任務5.1  清洗電影數據
      【任務描述】
      【知識鏈接】
      5.1.1  MapReduce組件
      5.1.2  MapReduce編程思想
      5.1.3  Hadoop序列化
      【任務實施】
    任務5.2  數據分區
      【任務描述】
      【知識鏈接】
      5.2.1  切片與MapTask並行度決定機制
      5.2.2  MapReduce工作流程
      【任務實施】
  任務小結
  課後習題
  相關閱讀——深度學習開源平台飛槳
工作任務6  使用MapReduce統計電影上映情況與排序
  任務概述
  學習目標
  預備知識——數據統計概述
    任務6.1  統計每部電影上映的次數
      【任務描述】
      【任務實施】
    任務6.2  統計每部電影的上映天數和平均票房
      【任務描述】
      【任務實施】
    任務6.3  按平均票房降序排列
      【任務描述】
      【任務實施】
  任務小結
  課後習題
  相關閱讀——許寶騄,中國統計學家的
  先驅
工作任務7  數據建倉
  任務概述
  學習目標
  預備知識——資料庫與數據倉庫
    任務7.1  安裝與配置Hive
      【任務描述】
      【知識鏈接】
      7.1.1  Hive概述
      7.1.2  Hive和資料庫比較
      7.1.3  Hive架構原理
      【任務實施】
    任務7.2  將元數據遷移到MySQL
      【任務描述】
      【任務實施】
    任務7.3  使用Hive進行數據建倉

      【任務描述】
      【知識鏈接】
      7.3.1  HQL的數據類型
      7.3.2  HQL的數據定義語言
      7.3.3  HQL的數據操作語言
      【任務實施】
  任務小結
  課後習題
  相關閱讀——資料庫泄露
工作任務8  數據分析
  任務概述
  學習目標
  預備知識——數據分析概述
    任務8.1  查詢某年全年電影數據
      【任務描述】
      【知識鏈接】
      8.1.1  Hive數據導出
      8.1.2  Hive查詢
      【任務實施】
    任務8.2  統計周平均票房
      【任務描述】
      【知識鏈接】
      【任務實施】
    任務8.3  統計北京和上海某年一季度票房收入
      【任務描述】
      【任務實施】
  任務小結
  課後習題
  相關閱讀——誠信意識
工作任務9  數據遷移
  任務概述
  學習目標
  預備知識——數據遷移概述
    任務9.1  安裝和配置Sqoop
      【任務描述】
      【知識鏈接】
      【任務實施】
    任務9.2  遷移清洗后的電影數據
      【任務描述】
      【知識鏈接】
      9.2.1  導入數據
      9.2.2  導出數據
      【任務實施】
    任務9.3  遷移日平均票房數據
      【任務描述】
      【任務實施】
    任務9.4  遷移周平均票房數據
      【任務描述】
      【任務實施】
    任務9.5  遷移北京和上海某年一季度票房數據

      【任務描述】
      【任務實施】
  任務小結
  課後習題
  相關閱讀——刪庫事件
工作任務10  數據可視化
  任務概述
  學習目標
  預備知識——數據可視化概述
    任務10.1  使用Spring Boot搭建Web系統
      【任務描述】
      【任務實施】
    任務10.2  顯示全部電影數據
      【任務描述】
      【任務實施】
    任務10.3  使用柱狀圖顯示電影的日平均票房
      【任務描述】
      【任務實施】
    任務10.4  使用餅圖顯示電影的周平均票房
      【任務描述】
      【任務實施】
    任務10.5  使用折線圖顯示北京和上海某年一季度電影票房走勢
      【任務描述】
      【任務實施】
  任務小結
  課後習題
  相關閱讀——中華人民共和國2022年國民經濟和社會發展統計公報

  • 商品搜索:
  • | 高級搜索
首頁新手上路客服中心關於我們聯絡我們Top↑
Copyrightc 1999~2008 美商天龍國際圖書股份有限公司 臺灣分公司. All rights reserved.
營業地址:臺北市中正區重慶南路一段103號1F 105號1F-2F
讀者服務部電話:02-2381-2033 02-2381-1863 時間:週一-週五 10:00-17:00
 服務信箱:bookuu@69book.com 客戶、意見信箱:cs@69book.com
ICP證:浙B2-20060032