Machine Learning by Andrew Ng on Coursera Week1(Coursera机器学习课程第一周总结)

本文主要是介绍Machine Learning by Andrew Ng on Coursera Week1(Coursera机器学习课程第一周总结),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Machine Learning  by Andrew Ng on Coursera 

      机器学习是近年来的一大热门学科,本人对此非常感兴趣,正好本学期学校开设机器学习MOOC课程,可以学习Coursera正版机器学习课程,于是决定每周在此总结学习的内容与大家分享。

Week1:

第一周的内容不多,主要是介绍一些基础知识,初步讲解代价函数和梯度下降法。

What is machine learning? –A computerprogram is said to learn from experience E with respect to some class of tasksT and performance measure P. If its performance as tasks in T, as measured byP, improves with experience E.

Supervised Learning 监督学习:

 know what correct output should look like.

  • regression continuous output (eg : predict the house price) 
  • classification discrete output (eg : predict whether the tumor is malignant or benign)

Unsupervised Learning 非监督学习:

Approach problems with little or no idea what our results should look like.

Model Representation:

m = Number of training examples

x = input variable/features

y = output variable/target variable

(x,y) = one training example



Cost Function 代价函数








代价函数越小,函数对原数据对拟合越好。如上图可以看出,时,对原数据拟合的最好,通过了所有的点,此时可以看到,取到最小值0。


同样,在二维特征的情况下,如上图所示,的图像为一个三维曲面,同样,在取最小值时,函数的拟合情况最好。

因此学习算法的优化目标是找到一组  的值来将  最小化。

Gradient Descent梯度下降:

知道了cost function的作用以及其与函数拟合情况的关系后,就需要有方法来求出使代价函数最小的参数值,其中之一即是gradient descent。

gradient descent的原理:想象一下你正站立在山上 想要快速下山,在梯度下降算法中,我们要做的就是旋转360度,看看我们的周围,并问自己,如果我想尽快走下山,这些小碎步需要朝什么方向?在山上的新起点上,你环顾四周,并决定从什么方向将会最快下山,然后又迈进了一小步,又是一小步,并依此类推,直到局部最低点的位置。

repeat until convergence{


}


 means assign b to a。

 is the learning rate, it can control the update step-size of 

if  is too small, gradient descent can be slow;

if  is too large, gradient descent can overshoot the minimum, it may fail to converge, or even diverge.



如上图所示,执行梯度下降时,据你设定的初始值的不同,你可能会得到不同的局部最优解。

这篇关于Machine Learning by Andrew Ng on Coursera Week1(Coursera机器学习课程第一周总结)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/771519

相关文章

Spring 依赖注入与循环依赖总结

《Spring依赖注入与循环依赖总结》这篇文章给大家介绍Spring依赖注入与循环依赖总结篇,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录1. Spring 三级缓存解决循环依赖1. 创建UserService原始对象2. 将原始对象包装成工

MySQL中查询和展示LONGBLOB类型数据的技巧总结

《MySQL中查询和展示LONGBLOB类型数据的技巧总结》在MySQL中LONGBLOB是一种二进制大对象(BLOB)数据类型,用于存储大量的二进制数据,:本文主要介绍MySQL中查询和展示LO... 目录前言1. 查询 LONGBLOB 数据的大小2. 查询并展示 LONGBLOB 数据2.1 转换为十

Unity新手入门学习殿堂级知识详细讲解(图文)

《Unity新手入门学习殿堂级知识详细讲解(图文)》Unity是一款跨平台游戏引擎,支持2D/3D及VR/AR开发,核心功能模块包括图形、音频、物理等,通过可视化编辑器与脚本扩展实现开发,项目结构含A... 目录入门概述什么是 UnityUnity引擎基础认知编辑器核心操作Unity 编辑器项目模式分类工程

Python学习笔记之getattr和hasattr用法示例详解

《Python学习笔记之getattr和hasattr用法示例详解》在Python中,hasattr()、getattr()和setattr()是一组内置函数,用于对对象的属性进行操作和查询,这篇文章... 目录1.getattr用法详解1.1 基本作用1.2 示例1.3 原理2.hasattr用法详解2.

在Java中实现线程之间的数据共享的几种方式总结

《在Java中实现线程之间的数据共享的几种方式总结》在Java中实现线程间数据共享是并发编程的核心需求,但需要谨慎处理同步问题以避免竞态条件,本文通过代码示例给大家介绍了几种主要实现方式及其最佳实践,... 目录1. 共享变量与同步机制2. 轻量级通信机制3. 线程安全容器4. 线程局部变量(ThreadL

Spring Boot 与微服务入门实战详细总结

《SpringBoot与微服务入门实战详细总结》本文讲解SpringBoot框架的核心特性如快速构建、自动配置、零XML与微服务架构的定义、演进及优缺点,涵盖开发环境准备和HelloWorld实战... 目录一、Spring Boot 核心概述二、微服务架构详解1. 微服务的定义与演进2. 微服务的优缺点三

Java通过驱动包(jar包)连接MySQL数据库的步骤总结及验证方式

《Java通过驱动包(jar包)连接MySQL数据库的步骤总结及验证方式》本文详细介绍如何使用Java通过JDBC连接MySQL数据库,包括下载驱动、配置Eclipse环境、检测数据库连接等关键步骤,... 目录一、下载驱动包二、放jar包三、检测数据库连接JavaJava 如何使用 JDBC 连接 mys

JavaSE正则表达式用法总结大全

《JavaSE正则表达式用法总结大全》正则表达式就是由一些特定的字符组成,代表的是一个规则,:本文主要介绍JavaSE正则表达式用法的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下... 目录常用的正则表达式匹配符正则表China编程达式常用的类Pattern类Matcher类PatternSynta

SQL中JOIN操作的条件使用总结与实践

《SQL中JOIN操作的条件使用总结与实践》在SQL查询中,JOIN操作是多表关联的核心工具,本文将从原理,场景和最佳实践三个方面总结JOIN条件的使用规则,希望可以帮助开发者精准控制查询逻辑... 目录一、ON与WHERE的本质区别二、场景化条件使用规则三、最佳实践建议1.优先使用ON条件2.WHERE用

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和