数据挖掘入门:商业与科学视角的价值

需积分: 10 4 下载量 72 浏览量 更新于2024-07-20 收藏 6.76MB PDF 举报
《数据挖掘入门》是一本经典的英文教材,由Tan、Steinbach和Kumar合著,于2004年4月18日发布。该书旨在引导读者理解数据挖掘的基本概念,特别强调在当今信息爆炸的时代背景下其重要性。随着互联网的发展、电子商务的兴起以及日常生活中大量数据的积累,诸如购物记录、银行交易等,数据的收集和存储速度达到了前所未有的水平(GB/hour)。这些数据来源于卫星遥感、天空扫描的望远镜、基因表达研究的微阵列,甚至是科学模拟产生的海量数据。 商业视角来看,数据挖掘之所以重要,是因为它能够帮助企业提高服务质量,实现客户关系管理的个性化,从而在竞争激烈的市场环境中获得优势。例如,通过分析购物数据,商家可以了解消费者的购买习惯,提供定制化的产品推荐,提升客户满意度和忠诚度。 科学角度上,数据挖掘有助于科学家们处理和分析这些庞大而复杂的数据集。它可以帮助他们进行数据分类和聚类,以便更好地理解数据背后的模式和规律。此外,数据挖掘还可以支持假设形成,对科学研究中的未知领域进行探索,比如天文学中的星系分析,生物学中的基因表达分析,以及气候模型中的大数据处理。 然而,传统的数据处理技术在面对如此大规模的数据时往往显得力不从心。这就需要引入数据挖掘的方法和技术,如机器学习算法、数据预处理、关联规则挖掘、聚类分析等,来发掘隐藏在数据中的有价值的信息和知识。 《数据挖掘入门》这本书为读者提供了一个系统性的框架,帮助他们掌握如何有效地从海量数据中挖掘出有用的信息,无论是为了商业决策还是科学研究,都是极其关键的技能。随着科技的不断进步,数据挖掘的应用将越来越广泛,成为现代企业和科研机构不可或缺的一部分。
2009-07-08 上传
关于数据挖掘应用的一本不错的书 1 Introduction to Data Mining Principles . . . . . . . . . . . . . . . . . . . . 1 1.1 Data Mining and Knowledge Discovery. . . . . . . . . . . . . . . . . . . . 2 1.2 Data Warehousing and Data Mining - Overview . . . . . . . . . . . . 5 1.2.1 Data Warehousing Overview . . . . . . . . . . . . . . . . . . . . . 7 1.2.2 Concept of Data Mining . . . . . . . . . . . . . . . . . . . . . . . . . 8 1.3 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20 1.4 Review Questions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20 2 Data Warehousing, Data Mining, and OLAP . . . . . . . . . . . . . . . 21 2.1 Data Mining Research Opportunities and Challenges . . . . . . . . 23 2.1.1 Recent Research Achievements . . . . . . . . . . . . . . . . . . . 25 2.1.2 Data Mining Application Areas . . . . . . . . . . . . . . . . . . . 27 2.1.3 Success Stories . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 29 2.1.4 Trends that Affect Data Mining . . . . . . . . . . . . . . . . . . 30 2.1.5 Research Challenges . . . . . . . . . . . . . . . . . . . . . . . . . . . . 31 2.1.6 Test Beds and Infrastructure . . . . . . . . . . . . . . . . . . . . . 33 2.1.7 Findings and Recommendations . . . . . . . . . . . . . . . . . . 33 2.2 Evolving Data Mining into Solutions for Insights . . . . . . . . . . . 35 2.2.1 Trends and Challenges . . . . . . . . . . . . . . . . . . . . . . . . . . 36 2.3 Knowledge Extraction Through Data Mining . . . . . . . . . . . . . . 37 2.3.1 Data Mining Process . . . . . . . . . . . . . . . . . . . . . . . . . . . . 39 2.3.2 Operational Aspects . . . . . . . . . . . . . . . . . . . . . . . . . . . . 50 2.3.3 The Need and Opportunity for Data Mining . . . . . . . 51 2.3.4 Data Mining Tools and Techniques. . . . . . . . . . . . . . . . 52 2.3.5 Common Applications of Data Mining . . . . . . . . . . . . . 55 2.3.6 What about Data Mining in Power Systems? . . . . . . . 56 2.4 Data Warehousing and OLAP . . . . . . . . . . . . . . . . . . . . . . . . . . . 57 2.4.1 Data Warehousing for Actuaries . . . . . . . . . . . . . . . . . . 57 2.4.2 Data Warehouse Components . . . . . . . . . . . . . . . . . . . . 58 2.4.3 Management Information . . . . . . . . . . . . . . . . . . . . . . . . 59 2.4.4 Profit Analysis . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 60 2.4.5 Asset Liability Management . . . . . . . . . . . . . . . . . . . . . . 60 2.5 Data Mining and OLAP . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 61 2.5.1 Research . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 61 2.5.2 Data Mining . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68 2.6 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 72 2.7 Review Questions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 72 3 Data Marts and Data Warehouse . . . . . . . . . . . . . . . . . . . . . . . . . . 75 3.1 Data Marts, Data Warehouse, and OLAP . . . . . . . . . . . . . . . . . 77 3.1.1 Business Process Re-engineering . . . . . . . . . . . . . . . . . . 77 3.1.2 Real-World Usage . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78 3.1.3 Business Intelligence . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78 3.1.4 Different Data Structures . . . . . . . . . . . . . . . . . . . . . . . . 82 3.1.5 Different Users . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 84 3.1.6 Technological Foundation . . . . . . . . . . . . . . . . . . . . . . . . 86 3.1.7 Data Warehouse . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 87 3.1.8 Informix Architecture . . . . . . . . . . . . . . . . . . . . . . . . . . . 87 3.1.9 Building the Data Warehouse/Data Mart Environment . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 88 3.1.10 History . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 91 3.1.11 Nondetailed Data in the Enterprise Data Warehouse 92 3.1.12 Sharing Data Among Data Marts . . . . . . . . . . . . . . . . . 93 3.1.13 The Manufacturing Process . . . . . . . . . . . . . . . . . . . . . . 93 3.1.14 Subdata Marts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 95 3.1.15 Refreshment Cycles . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 95 3.1.16 External Data . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 96 3.1.17 Operational Data Stores (ODS) and Data Marts . . . . 97 3.1.18 Distributed Metadata . . . . . . . . . . . . . . . . . . . . . . . . . . . 98 3.1.19 Managing the Warehouse Environment . . . . . . . . . . . . 100 3.1.20 OLAP . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 102 3.2 Data Warehousing for Healthcare . . . . . . . . . . . . . . . . . . . . . . . . 107 3.2.1 A Data Warehousing Perspective for Healthcare . . . . 107 3.2.2 Adding Value to your Current Data . . . . . . . . . . . . . . . 107 3.2.3 Enhance Customer Relationship Management . . . . . . 108 3.2.4 Improve Provider Management . . . . . . . . . . . . . . . . . . . 109 3.2.5 Reduce Fraud . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 109 3.2.6 Prepare for HEDIS Reporting . . . . . . . . . . . . . . . . . . . . 110 3.2.7 Disease Management . . . . . . . . . . . . . . . . . . . . . . . . . . . . 110 3.2.8 What to Expect When Beginning a Data Warehouse Implementation . . . . . . . . . . . . . . . . . . . . . . 110 3.2.9 Definitions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 111 3.3 Data Warehousing in the Telecommunications Industry . . . . . 112 3.3.1 Implementing One View . . . . . . . . . . . . . . . . . . . . . . . . . 118 3.3.2 Business Benefit . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 120 3.3.3 A Holistic Approach . . . . . . . . . . . . . . . . . . . . . . . . . . . . 121 3.4 The Telecommunications Lifecycle . . . . . . . . . . . . . . . . . . . . . . . . 122 3.4.1 Current Enterprise Environment . . . . . . . . . . . . . . . . . . 122 3.4.2 Getting to the Root of the Problem . . . . . . . . . . . . . . . 123 3.4.3 The Telecommunications Lifecycle . . . . . . . . . . . . . . . . 125 3.4.4 Telecom Administrative Outsourcing . . . . . . . . . . . . . . 127 3.4.5 Choose your Outsourcing Partner Wisely . . . . . . . . . . 127 3.4.6 Security in Web-Enabled Data Warehouse . . . . . . . . . 128 3.5 Security Issues in Data Warehouse . . . . . . . . . . . . . . . . . . . . . . . . 129 3.5.1 Performance vs Security . . . . . . . . . . . . . . . . . . . . . . . . . 130 3.5.2 An Ideal Security Model . . . . . . . . . . . . . . . . . . . . . . . . . 131 3.5.3 Real-World Implementation . . . . . . . . . . . . . . . . . . . . . . 131 3.5.4 Proposed Security Model . . . . . . . . . . . . . . . . . . . . . . . . 136 3.6 Data Warehousing: To Buy or To Build a Fundamental Choice for Insurers . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 140 3.6.1 Executive Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 140 3.6.2 The Fundamental Choice . . . . . . . . . . . . . . . . . . . . . . . . 140 3.6.3 Analyzing the Strategic Value of Data Warehousing . 141 3.6.4 Addressing your Concerns . . . . . . . . . . . . . . . . . . . . . . . 142 3.6.5 Introducing FellowDSSTM . . . . . . . . . . . . . . . . . . . . . . . 146 3.7 Summary . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 148 3.8 Review Questions . . . . . . . . . . . . . .