24小时热门版块排行榜    

查看: 1933  |  回复: 8

微笑去坚持

金虫 (正式写手)

[交流] 最速下降法 已有8人参与

请问最速下降法的搜索步长可以是常数吗,其计算结果于按照优化方法得到的搜索步长差别大吗,谢谢
回复此楼

» 猜你喜欢

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

hyit_lxq

木虫 (小有名气)


小木虫: 金币+0.5, 给个红包,谢谢回帖
最速下降法的搜索步长约为 (gk'*gk)/(gk'*Gk*gk), 可见:用常数作为步长不可取。
~ ~ ~
2楼2013-07-07 11:40:43
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

33331515

新虫 (小有名气)


小木虫: 金币+0.5, 给个红包,谢谢回帖
理论上用2楼那个步长,在这次迭代中下降最多

你如果去固定步长,那个最优点即使在你边上,你都不一定到的了

比如

你现在 -1点,极小值值在0点,你的步长设为常数2

请问你如何走到0去????
3楼2013-07-11 22:20:18
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

laosam280

禁虫 (正式写手)

本帖内容被屏蔽

4楼2013-07-12 10:21:07
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

zengguang534

新虫 (小有名气)


小木虫: 金币+0.5, 给个红包,谢谢回帖
一般用共轭梯度法求解,效果更佳!可保证在有限几步达到最优解。
5楼2013-07-12 11:28:44
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yinhu1988

木虫 (著名写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
固定步长不可取,很有可能走过了目标函数不降反升,除非你将步长设定为极小的数,但是这样每次迭代更新很少。
君子务本,静水流深
6楼2013-07-14 20:53:45
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

cooooldog

铁杆木虫 (著名写手)

ส็็็

为啥研究这种落后的算法? 显然直接上手最好的算法
ส็็็็็็็็็็็็็็็็็็็็
7楼2013-07-16 10:39:40
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

mywangdi

新虫 (初入文坛)


小木虫: 金币+0.5, 给个红包,谢谢回帖
如果梯度是Lipschitz连续的,Lipschitz常数为L,常步长可在(0,2/L)中选取,得到梯度序列收敛到0
当然,对强凸函数也可以取常步长
见“张立卫,单锋,最优化方法,科学出版社,2010”
为祖国的数学事业添砖加瓦
8楼2014-03-18 18:55:30
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

紫陌缱绻

铜虫 (初入文坛)


小木虫: 金币+0.5, 给个红包,谢谢回帖
可取常步长,但有限制条件,满足里普希斯条件下最速下降可取常步长。

[ 发自手机版 http://muchong.com/3g ]
所有目的地
9楼2014-03-19 18:14:29
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 微笑去坚持 的主题更新
普通表情 高级回复 (可上传附件)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 基金啊基金 +3 longfie172 2026-08-20 3/150 2026-08-21 00:04 by wuchongjun
[基金申请] 科研孤儿太难了 +14 我4大白菜 2026-08-20 15/750 2026-08-20 22:33 by 袁向阳007
[基金申请] 今天系统多次维护,明天很可能放榜! +10 zju2000 2026-08-16 11/550 2026-08-20 20:02 by cl479861084
[基金申请] 时间戳变了,能看出什么问题? +18 基诺咪客 2026-08-17 23/1150 2026-08-20 17:19 by Godzela
[基金申请] 只有每年这种时候来逛逛小木虫 +21 yaoyewhu2008 2026-08-20 22/1100 2026-08-20 17:03 by yaoyewhu2008
[基金申请] 重要消息,中午系统在维护 +11 yuleib84 2026-08-18 12/600 2026-08-20 11:09 by xskun
[基金申请] 今天基金会出结果吗?20260819 +14 kkkl_v 2026-08-19 15/750 2026-08-20 08:21 by sunzitan
[基金申请] filecode,4个jtjc了 +11 ziyangfang 2026-08-19 13/650 2026-08-19 21:28 by aasahr
[基金申请] 今天放榜吗? +14 布布和一二 2026-08-19 15/750 2026-08-19 18:07 by gltch
[基金申请] filecode=后面第一个是大写字母 +10 wangze12014 2026-08-14 12/600 2026-08-19 16:56 by 苦难博士
[基金申请] 2027广东省杰青 +4 奶牛小黑 2026-08-15 10/500 2026-08-19 11:02 by wanfengnew
[基金申请] 朋友圈看到的 +6 wangzilk 2026-08-18 8/400 2026-08-19 10:55 by Haru815
[基金申请] 什么时候开奖? +6 CrisMessi 2026-08-18 6/300 2026-08-19 08:06 by Equinoxhua
[论文投稿] 投稿咨询 +4 wwm09 2026-08-17 6/300 2026-08-18 15:36 by wwm09
[基金申请] 时间戳又变了8-15 +14 archvillain 2026-08-15 26/1300 2026-08-18 13:37 by phantomgost
[基金申请] 今天维护系统维护 祝所有人 高中 +8 gjjjzhong 2026-08-18 9/450 2026-08-18 13:01 by 家与远方
[基金申请] 93BebMhtakh前后11位开头都是大写 +4 且听虎啸 2026-08-17 5/250 2026-08-18 00:49 by 蔡棒棒菂
[基金申请] 感觉是下周放榜了 +6 angus9576 2026-08-17 11/550 2026-08-17 23:57 by angus9576
[精细化工] 招聘 金属平磨液,抛光液研发工程师 +3 小天0311 2026-08-14 3/150 2026-08-16 07:31 by H9PLUS
[基金申请] 各位道友,我要去昆明玩几天,回来见。 +7 Tide man 2026-08-14 8/400 2026-08-15 01:11 by arzu_hma
信息提示
请填处理意见