学习data mining的7个步骤

2024-06-01 05:58
文章标签 学习 步骤 data mining

本文主要是介绍学习data mining的7个步骤,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

学习data mining的7个步骤(可以并行进行,或按不同次序进行)

1.语言:学习R, Python, SQL, 提交到 KDnuggets
2.工具:学习使用data mining和visualization工具
3.教材:阅读introductory textbook to understand the fundation.
4.教育:参加在线研讨会(webinars),加入课程,拿到data scicence方面的degree或certificate
5.数据:检查可用数据资源,可参考此处:http://www.kdnuggets.com/news/subscribe.html
6.比赛:参加双周期email的data mining竞赛
7.与其他数据科学加交流,可通过社交网络,群组,会议的方式。

下面详细对以上7个步骤做以说明:
1.学习语言
KDnuggets对最受流行的data mining语言做了个调查,见
http://www.kdnuggets.com/2013/08/languages-for-analytics-data-mining-data-science.html
发现最流行的语言是R,Python和SQL。
以下是这些语言的学习资源:
Data Science with R(e-book): www.kdnuggets.com/2013/02/free-e-book-on-data-science-with-r.html

Getting Start with Python for Data Science:
https://www.kaggle.com/wiki/GettingStartedWithPythonForDataScience

Python for Data Analysis: Agile Tools for Real World Data
http://shop.oreilly.com/product/0636920023784.do

An Indispensable Python: Data sourcing to Data science
http://www.datasciencecentral.com/profiles/blogs/an-indispensable-python-data-sourcing-to-data-science

W3 Schools Learning SQL
http://www.w3schools.com/sql/

2.Data mining需要的工具。
针对Data mining不同的任务,需要使用不同的工具。所以要想能完整地完成数据分析工作需要掌握一系列工具,使之形成一个工具集。

起步工具:可以使用开源的免费工具,如:
KNIME: www.knime.org
RapidMiner: http://rapidminer.com/products/rapidminer-studio/
Weka: www.cs.waikato.ac.nz/ml/weka/

在分析工作中常用到的一个工具:
SAS:http://www.sas.com/en_us/home.html
这是一个商业化工作,使用广泛

其他流行的工具包括:
MATLAB,
StatSoft STATISTICA,
Microsoft SQL Server
Tableau
IBM SPSS Moderler
Rattle
详见:http://www.kdnuggets.com/polls/2013/analytics-big-data-mining-data-science-software.html

可视化工具:
Microsoft Excel
R graphics: http://cran.r-project.org/web/views/Graphics.html(特别是其中的ggplot2: http://cran.r-project.org/web/packages/ggplot2/index.html)
Tableau: http://www.tableau.com/(非常出色)
TIBCO Spotfire
Miner3D

3.教材
有大量与data mining和data science相关的教材,详见
http://www.kdnuggets.com/publications/books.html
以下是几本推荐的:
n 《Data Mining and Analysis: Fundamental Concepts and Algorithms》,by Mohammed Zaki and Wagner Meira Jr.见
http://www.kdnuggets.com/2013/09/data-mining-analysis-fundamental-concepts-algorithms-download-pdf-draft.html

n 《Data Mining: Practical Machine Learning Tools and Techniques》by Ian Witten, Eibe Frank, and Mark Hall, from the authors of Weka, and using Weka extensively in examples.
见:http://www.cs.waikato.ac.nz/ml/weka/book.html

n 《The Elements of Statistical Learning, Data Mining,Inference, and Predictionm》by Trevor Hastie, Robert Tibshirani, Jerome Friedman这是一本从数学角度出发的不错的概述性书籍
见:http://statweb.stanford.edu/~tibs/ElemStatLearn/

n 《LIONbook: Learning and Intelligent Optimization》, by Roberto Battiti and Mauro Brunato, 本书网上有免费版。
见:http://www.lionsolver.com/LIONbook/

n 《Mining of Massive Datasets Book》 by A. Rajaraman, J. Ullman.
见:http://www.kdnuggets.com/2012/08/mining-massive-datasets-book-revised.html

n 《StatSoft Electronic Statistics Textbook™ (free)》, 本书包含了许多data mining有关的话题
见:http://www.statsoft.com/Textbook

4.教育:在线研讨会(Webinars),课程,Certificates和学位
在线研讨会资源:http://info.hortonworks.com/Retail-Insights-Big-Data-Hadoop.html

在线课程:http://www.kdnuggets.com/education/index.html

特别要提到的几个课程:
Coursera上的Machine Learning,Andrew Ng任课
edX上的Learning from data,Caltech Professsor Yaser Abu-Mostafa任课:http://www.kdnuggets.com/2013/09/edx-learning-from-data-free-online-course.html
Syracuse iSchool的Open Online Course in Applied Data Science:
http://ischool.syr.edu/future/cas/datascience.aspx
在线幻灯片:http://www.kdnuggets.com/data_mining_course/index.html
此外,最好能拿到Certificates in Data Mining, and Data Science(见
http://www.kdnuggets.com/education/analytics-data-mining-certificates.html
)或取得Data Science方面的高级学位,如MS。参考
http://www.kdnuggets.com/education/index.html

5.数据
学习数据分析,需要分析数据,参考
http://www.kdnuggets.com/datasets/index.html
这里包括:
l Government, Federal, State, City, Local and public data sites and portals:http://www.kdnuggets.com/datasets/government-local-public.html
l Data APIs, Hubs, Marketplaces, Platforms, Portals, and Search Engines:http://www.kdnuggets.com/datasets/api-hub-marketplace-platform.html
l Free Public Datasets:http://www.kdnuggets.com/2011/02/free-public-datasets.html

6.竞赛
可以参加一些竞赛,如
http://www.kaggle.com/
中的,参赛者可以从初学者竞赛开始进行,如
http://www.kdnuggets.com/2012/10/beginner-competition-titanic-survival-via-machine-learning.html

7.交流:会议,群组和社交网络
可以加入许多组织,参考Top 30 LinkedIn Groups for Analytics, Big Data, Data Mining, and Data Science:
http://www.kdnuggets.com/2013/04/top-30-linkedin-groups-analytics-big-data-data-mining-data-science.html

AnalyticBridge是关于数据和分析科学的一个活跃组织。
http://www.analyticbridge.com/

也可以加入许多关于数据分析,大数据,数据挖掘,数据科学和知识发现方面的会议:http://www.kdnuggets.com/meetings/index.html

最后,应该考虑加入ACM SKGKDD组织,它组织了年度KDD会议,这是该领域领军的研究性会议:http://www.sigkdd.org/

这篇关于学习data mining的7个步骤的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1020163

相关文章

vite搭建vue3项目的搭建步骤

《vite搭建vue3项目的搭建步骤》本文主要介绍了vite搭建vue3项目的搭建步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学... 目录1.确保Nodejs环境2.使用vite-cli工具3.进入项目安装依赖1.确保Nodejs环境

Nginx搭建前端本地预览环境的完整步骤教学

《Nginx搭建前端本地预览环境的完整步骤教学》这篇文章主要为大家详细介绍了Nginx搭建前端本地预览环境的完整步骤教学,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录项目目录结构核心配置文件:nginx.conf脚本化操作:nginx.shnpm 脚本集成总结:对前端的意义很多

Linux云服务器手动配置DNS的方法步骤

《Linux云服务器手动配置DNS的方法步骤》在Linux云服务器上手动配置DNS(域名系统)是确保服务器能够正常解析域名的重要步骤,以下是详细的配置方法,包括系统文件的修改和常见问题的解决方案,需要... 目录1. 为什么需要手动配置 DNS?2. 手动配置 DNS 的方法方法 1:修改 /etc/res

使用EasyPoi快速导出Word文档功能的实现步骤

《使用EasyPoi快速导出Word文档功能的实现步骤》EasyPoi是一个基于ApachePOI的开源Java工具库,旨在简化Excel和Word文档的操作,本文将详细介绍如何使用EasyPoi快速... 目录一、准备工作1、引入依赖二、准备好一个word模版文件三、编写导出方法的工具类四、在Export

Ubuntu向多台主机批量传输文件的流程步骤

《Ubuntu向多台主机批量传输文件的流程步骤》:本文主要介绍在Ubuntu中批量传输文件到多台主机的方法,需确保主机互通、用户名密码统一及端口开放,通过安装sshpass工具,准备包含目标主机信... 目录Ubuntu 向多台主机批量传输文件1.安装 sshpass2.准备主机列表文件3.创建一个批处理脚

docker编写java的jar完整步骤记录

《docker编写java的jar完整步骤记录》在平常的开发工作中,我们经常需要部署项目,开发测试完成后,最关键的一步就是部署,:本文主要介绍docker编写java的jar的相关资料,文中通过代... 目录all-docker/生成Docker打包部署文件配置服务A的Dockerfile (a/Docke

Oracle数据库在windows系统上重启步骤

《Oracle数据库在windows系统上重启步骤》有时候在服务中重启了oracle之后,数据库并不能正常访问,下面:本文主要介绍Oracle数据库在windows系统上重启的相关资料,文中通过代... oracle数据库在Windows上重启的方法我这里是使用oracle自带的sqlplus工具实现的方

Nginx部署HTTP/3的实现步骤

《Nginx部署HTTP/3的实现步骤》本文介绍了在Nginx中部署HTTP/3的详细步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录前提条件第一步:安装必要的依赖库第二步:获取并构建 BoringSSL第三步:获取 Nginx

SpringBoot路径映射配置的实现步骤

《SpringBoot路径映射配置的实现步骤》本文介绍了如何在SpringBoot项目中配置路径映射,使得除static目录外的资源可被访问,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一... 目录SpringBoot路径映射补:springboot 配置虚拟路径映射 @RequestMapp

Python与MySQL实现数据库实时同步的详细步骤

《Python与MySQL实现数据库实时同步的详细步骤》在日常开发中,数据同步是一项常见的需求,本篇文章将使用Python和MySQL来实现数据库实时同步,我们将围绕数据变更捕获、数据处理和数据写入这... 目录前言摘要概述:数据同步方案1. 基本思路2. mysql Binlog 简介实现步骤与代码示例1