当前位置: 首页 > news >正文

吴恩达《机器学习》课程总结(2)单变量线性回归

2.1模型表示

(1)监督学习中的回归问题案例房价预测

(2)监督算法的工作方式

案例中:m表示训练集的数量,x代表特征/输入变量,y代表目标变量/输出变量,(x,y)代表实例,(x(i),y(i))代表第i个观察实例,h代表假设/函数/输入到输出的映射。

(3)房价预测的一种表达方式:h(Θ)=Θ+Θx,只有一个变量,所以成为当变量线性回归问题。

2.2代价函数

(1)对于回归问题常用的代价函数是平方误差代价函数:

我们的目标选取合适的参数Θ使得误差函数最小,即直线最逼近真实情况。

2.3代价函数的直观理解I

2.4代价函数的直观理解II

2.5梯度下降

需要注意:参数是要同时更新的;不要算出一个倒数更新一个倒数,再用更新后的式子去计算其他倒数,这样是不对的。

其中α叫学习率,表示沿着下降程度最大的方向迈出的步子大小。

2.6梯度下降的直观理解

(1)梯度下降法可以最小化任何代价函数,而不仅仅局限于线性回归中的代价函数。

(2)当越来越靠近局部最小值时,梯度值会变小,所以即使学习率不变,参数变化的幅度也会随之减小。

 

(3)学习率过小时参数变化慢,到达最优点的时间长,学习率大时,可能导致代价函数无法收敛,甚至发散。

(4)梯度就是某一点的斜率。

2.7梯度下降的线性回归 

相关文章:

  • 获取本工程的真实路径
  • jQuery $.each()常见的几种使用方法
  • 实战Nginx负载均衡高冗余高可用WEB架构
  • 谈谈如何在面试中发掘程序猿的核心竞争力 什么是程序员的核心竞争力?
  • 基于SpringMVC+Spring+MyBatis实现秒杀系统【业务逻辑】
  • 嵌套ViewPager问题
  • 【微服务No.4】 API网关组件Ocelot+Consul
  • python的全局变量
  • 源码阅读:SDWebImage(十一)——SDImageCache
  • Jetty:配置安全
  • PYTHON RE正则表达式
  • 运维技术规划
  • Effective Java Item3:Enforce the singleton property with a private constructor or an enum type
  • 小程序 自动导航
  • Spark: 基本架构及原理
  • [nginx文档翻译系列] 控制nginx
  • 【React系列】如何构建React应用程序
  • create-react-app做的留言板
  • linux安装openssl、swoole等扩展的具体步骤
  • macOS 中 shell 创建文件夹及文件并 VS Code 打开
  • windows下使用nginx调试简介
  • yii2权限控制rbac之rule详细讲解
  • 回顾2016
  • 如何设计一个比特币钱包服务
  • 使用putty远程连接linux
  • Salesforce和SAP Netweaver里数据库表的元数据设计
  • SAP CRM里Lead通过工作流自动创建Opportunity的原理讲解 ...
  • 如何在招聘中考核.NET架构师
  • 小白应该如何快速入门阿里云服务器,新手使用ECS的方法 ...
  • ​软考-高级-系统架构设计师教程(清华第2版)【第1章-绪论-思维导图】​
  • $forceUpdate()函数
  • (11)工业界推荐系统-小红书推荐场景及内部实践【粗排三塔模型】
  • (ResultSet.TYPE_SCROLL_INSENSITIVE,ResultSet.CONCUR_READ_ONLY)讲解
  • (动态规划)5. 最长回文子串 java解决
  • (附源码)spring boot基于Java的电影院售票与管理系统毕业设计 011449
  • (力扣记录)1448. 统计二叉树中好节点的数目
  • (算法)N皇后问题
  • (原)Matlab的svmtrain和svmclassify
  • (转)菜鸟学数据库(三)——存储过程
  • .naturalWidth 和naturalHeight属性,
  • .net core 6 使用注解自动注入实例,无需构造注入 autowrite4net
  • .NET Framework .NET Core与 .NET 的区别
  • .NET 依赖注入和配置系统
  • .Net6使用WebSocket与前端进行通信
  • .net安装_还在用第三方安装.NET?Win10自带.NET3.5安装
  • .NET版Word处理控件Aspose.words功能演示:在ASP.NET MVC中创建MS Word编辑器
  • .NET开发人员必知的八个网站
  • /deep/和 >>>以及 ::v-deep 三者的区别
  • @Repository 注解
  • @RequestParam详解
  • @vue/cli 3.x+引入jQuery
  • @取消转义
  • [ NOI 2001 ] 食物链
  • [ANT] 项目中应用ANT
  • [C#]猫叫人醒老鼠跑 C#的委托及事件