最优化方法Python计算:一元函数搜索算法——二分法

news2025/1/8 20:12:20

设一元目标函数 f ( x ) f(x) f(x)在区间 [ a 0 , b 0 ] ⊆ R [a_0,b_0]\subseteq\text{R} [a0,b0]R(其长度记为 λ \lambda λ)上为单峰函数,且在 ( a 0 , b 0 ) (a_0,b_0) (a0,b0)内连续可导,即其导函数 f ′ ( x ) f'(x) f(x) ( a 0 , b 0 ) (a_0,b_0) (a0,b0)内连续。在此增强的条件下,可以加速迭代计算压缩区间的过程。仍然设置计算精度为 ε > 0 \varepsilon>0 ε>0。首次迭代,即 k = 1 k=1 k=1时,插入点取 a 1 ′ = a 0 + b 0 2 a'_1=\frac{a_0+b_0}{2} a1=2a0+b0。若 f ′ ( a 1 ′ ) = 0 f'(a'_1)=0 f(a1)=0,即 a 1 ′ a'_1 a1 f ( x ) f(x) f(x) [ a 0 , b 0 ] [a_0,b_0] [a0,b0]的驻点,由单峰函数性质值, a 1 ′ a'_1 a1 f ( x ) f(x) f(x) ( a 0 , b 0 ) (a_0,b_0) (a0,b0)内维一的极小值点 x 0 x_0 x0,停止迭代。否则,若 f ′ ( a 1 ′ ) > 0 f'(a'_1)>0 f(a1)>0,意味着 f ( x ) f(x) f(x)沿 a 1 ′ a'_1 a1的左边方向下降(见下图(a)),故 x 0 ∈ ( a 0 , a 1 ′ ) x_0\in(a_0,a'_1) x0(a0,a1)。取压缩区间 [ a 1 , b 1 ] = [ a 0 , a 1 ′ ] [a_1,b_1]=[a_0,a'_1] [a1,b1]=[a0,a1]。若 f ′ ( a 1 ′ ) < 0 f'(a'_1)<0 f(a1)<0,则 f ( x ) f(x) f(x)沿 a 1 ′ a'_1 a1的右边方向下降(见下图(b)),必有 x 0 ∈ ( a 1 ′ , b 0 ) x_0\in(a'_1,b_0) x0(a1,b0),取压缩区间为 [ a 1 , b 1 ] = [ a 1 ′ , b 0 ] [a_1,b_1]=[a'_1,b_0] [a1,b1]=[a1,b0]。无论哪种情形, [ a 1 , b 1 ] [a_1,b_1] [a1,b1]的长度为 λ / 2 \lambda/2 λ/2,即压缩比为 0.5 0.5 0.5。用此策略,继续迭代,直至得到 a k ′ a'_k ak,使得 f ′ ( a k ′ ) = 0 f'(a'_k)=0 f(ak)=0 λ / 2 k < ε \lambda/2^k<\varepsilon λ/2k<ε,停止迭代, a k + b k 2 \frac{a_k+b_k}{2} 2ak+bk即为最小值点 x 0 x_0 x0的近似值。这一方法由于每次都将当前区间作对分,故称为“二分法”。回顾黄金分割法,迭代计算压缩区间的压缩比为 1 − ρ = 1 − 0.382 = 0.618 > 0.5 1-\rho=1-0.382=0.618>0.5 1ρ=10.382=0.618>0.5,所以二分法比黄金分割法效率稍有提高。在这里插入图片描述
将上述算法实现为如下的Python函数:

from scipy.optimize import OptimizeResult
bisection(fun,bracket,gtol,**options):
    a0,b0=bracket						#单峰区间端点
    a1=(a0+b0)/2						#中点
    f1,_=der_scalar(fun,a1)				#中点处导数
    k=1									#迭代次数
    while abs(f1)>gtol:					#重复迭代
        k+=1
        if f1<0:						#导数为负
            a0=a1						#修改左端点
        else:							#导数为正
            b0=a1						#修改右端点
        a1=(a0+b0)/2					#更新中点
        f1,_=der_scalar(fun,a1)			#更新中点处导数
    bestx=a1    
    besty=fun(bestx)
    return OptimizeResult(fun=besty, x=bestx, nit=k)

程序中第2-17行定义用二分策略计算目标函数局部最优解的bisection函数。参数fun表示目标函数 f ( x ) f(x) f(x),bracket表示初始单峰区间 ( a 0 , b 0 ) (a_0,b_0) (a0,b0),gtol表示容错误差 ε \varepsilon ε,options用来使minimize_scalar将gtol等实际参数传递给bisection。第3行读取单峰区间(详见博文《连续函数的单峰区间计算》)左右端点a0和b0。第4行计算单峰区间的中点为a1。第5行调用der_scalar函数(详见博文《一元函数导数的数值计算》)计算 f ( x ) f(x) f(x)在区间中点处的导数为f1。第6行将迭代次数k初始化为1。第7-14行的while循环执行重复迭代,直至当前区间中点处的导数绝对值接近0。循环体中,第8行迭代次数k自增1,第9~12行的if-else分支根据当前中点处导数的符号,决定下一次迭代的单峰区间。第13行更新当前区间中点,第14行更新中点处导数。第15、16行用a1分别设置最优解bestx和最优解处函数值besty。第17行用besty、bestx、k构造OptimizeResult对象并返回。
例1 用bisection函数计算函数 f ( x ) = x 2 + 4 cos ⁡ x f(x)=x^2+4\cos{x} f(x)=x2+4cosx x = 1 x=1 x=1附近的局部最优解。
:下列代码计算本例。

import numpy as np
from scipy.optimize import minimize_scalar
f=lambda x:x**2+4*np.cos(x)
bracket=myBracket(f,1)
res=minimize_scalar(f,bracket,method=bisection, options={'eps':1.48e-8})
print(res)

程序很简单,第3行定义目标函数 f ( x ) f(x) f(x)为f。第4行调用myBracket函数计算 f ( x ) f(x) f(x) x = 1 x=1 x=1近旁的单峰区间。第5行调用scipy.optimize的minimize_scalar函数,传递f、bracket和bisection函数,计算 f ( x ) f(x) f(x) x = 1 x=1 x=1近旁的局部最优解。运行程序,输出

fun: 2.3168084197882135
nit: 26
x: 1.895494265556336

bisection以容错误差 ε = 1.48 × 1 0 − 8 \varepsilon=1.48\times10^{-8} ε=1.48×108,迭代26次,算得最优解近似值为1.895494265556336,最优解处函数近似值为2.3168084197882135。
例2 物资需从位于陆地的城市 A A A运送到位于水中的海岛 B B B,假定各点间距离如题图中所示,且物资在陆地及水中的运输速度分别为1和 1 2 \frac{1}{2} 21。试确定海岸线上码头建造位置 x x x,使得物资运输时间最短。
在这里插入图片描述
:根据题意,算得目标函数(即物资运送时间) f ( x ) = 1 + x 2 + 2 1 + ( 2 − x ) 2 f(x)=\sqrt{1+x^2}+2\sqrt{1+(2-x)^2} f(x)=1+x2 +21+(2x)2 0 ≤ x ≤ 2 0\leq x\leq2 0x2。解析方法解决此问题,需算得其导数
f ′ ( x ) = x 1 + x 2 − 2 ( 2 − x ) 1 + ( 2 − x ) 2 . f'(x)=\frac{x}{\sqrt{1+x^2}}-\frac{2(2-x)}{\sqrt{1+(2-x)^2}}. f(x)=1+x2 x1+(2x)2 2(2x).
令其为0,算得驻点 x 0 x_0 x0。然后根据二阶导数 f ′ ′ ( x 0 ) f''(x_0) f′′(x0)的符号,判断 x 0 x_0 x0是否为极小值点。为求驻点 x 0 x_0 x0,需解方程 x 1 + x 2 = 2 ( 2 − x ) 1 + ( 2 − x ) 2 \frac{x}{\sqrt{1+x^2}}=\frac{2(2-x)}{\sqrt{1+(2-x)^2}} 1+x2 x=1+(2x)2 2(2x)。这将导致解高次方程
3 x 4 − 12 x 3 + 15 x 2 − 16 x + 16 = 0. 3x^4-12x^3+15x^2-16x+16=0. 3x412x3+15x216x+16=0.
手算的工作量极大。下面我们用黄金分割法数值地计算这个问题,代码如下。

import numpy as np									#导入numpy
from scipy.optimize import minimize_scalar			#导入minimize_scalar
f=lambda x:np.sqrt(1+x**2)+2*np.sqrt(1+(2-x)**2)	#设置目标函数
bracket=myBracket(f, 0)								#计算包围最优解的区间
res=minimize_scalar(f, bracket,method=bisection,	#用二分法计算f(x)的最有接近似值
                    options={'eps':1.48e-8})
print(res)

程序第3行设置目标函数 f ( x ) f(x) f(x)。第4行调用myBracket函数计算0附近包围 f ( x ) f(x) f(x)最优解 x 0 x_0 x0的区间bracket。 第5~6行调用minimize_scalar函数,传递f、bracket、bisection以及提供给bisection的eps等参数,用二分法计算 f ( x ) f(x) f(x)的最优解近似值。运行程序,输出

 fun: 4.037643276202614
 nit: 23
   x: 1.5382642555236816

意味着最优解 x 0 x_0 x0的近似值为1.5383, f ( x 0 ) f(x_0) f(x0)的近似值为4.0377。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/484550.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

TinyJAMBU的制动原理——一种轻量化的认证密码

关于TinyJAMBU的定义和介绍在另一篇博文已经介绍过了&#xff0c;这里只对其动作原理进行描述和说明。 对应的博文链接如下&#xff1a;TinyJAMBU&#xff1a;一种轻量化密码介绍 首先&#xff0c;该密码是一个流密码体系的块密码框架。其加密模式整体上来看是块密码&#xff0…

P4903 心碎

这是一道洛谷里的题目 难度级别&#xff1a;普及/提高- 题目提供者&#xff1a;大神cyd 题目背景 NOIP2015初赛。CYD大神在他的母校跪掉了。初赛那天&#xff0c;他回到原来的教室参观了一下&#xff0c;发现那张遍布了N个洞的课桌还摆在那里——那是他初中时和XHY同学坐过…

优思学院|8D和DMAIC两种方法应如何选择?

在现代的商业环境中&#xff0c;客户投诉是一个非常常见的问题。当客户不满意产品或服务时&#xff0c;他们往往会向企业发出投诉。质量管理部门是一个负责处理这些投诉的重要部门&#xff0c;因为它们需要确保产品和服务的质量满足客户的期望。改善方法是质量管理部门用来解决…

作为一名程序员,如何写出一手让同事膜拜的漂亮代码?

整洁的代码 有意义的命名 函数命名 变量命名 函数的定义 注释的规范 代码的长度 代码的对齐 我写代码已经有好几年了&#xff0c;最近看了一本书叫做《代码整洁之道》。我发现这本书中介绍的一些内容对我来说非常有启发性。书中提到的一些方法和技巧让我重新审视了自己的…

疑难问题定位案例复盘(三)

今天我们分享一个数据库被异常改写的案例&#xff0c;通过该案例我们可以学习总结出常规的文件被改写问题定位思路。 问题现象 1、测试环境在进行特定压力测试时发现页面登陆异常&#xff0c;且调试日志多个进程持续打印“数据库打开失败”日志。 2、测试环境在进行多个压力测…

Unity教程||Unity添加中文字体||Unity知识记录--制作UI粒子特效

Unity添加中文字体 ## 1、拷贝字体文件 拷贝C:\Windows\Fonts文件夹下&#xff0c;华文细黑常规文件到项目中 ## 2、下载中文字库 链接: https://pan.baidu.com/s/1KW31KB5vEImZHUWvQ9PLEQ 提取码: bgug 3、添加字体字库 选择Window->TextMeshPro->Font Asset Crea…

HTML的基础语法

文章目录 前言一.HTML结构1.1 什么是html语言1.2 html的结构是什么 二.HTML常见标签2.1 文本格式标签标题标签段落标签换行标签格式化标签图片标签超链接标签 2.2 表格标签2.3 表单标签from标签input标签文本框密码框单选框复选框普通按钮提交按钮清空按钮选择文件select标签te…

延迟队列与SpringBoot实战

延迟队列与SpringBoot实战 概念 延时队列,队列内部是有序的&#xff0c;最重要的特性就体现在它的延时属性上&#xff0c;延时队列中的元素是希望在指定时间到了以后或之前取出和处理&#xff0c;简单来说&#xff0c;延时队列就是用来存放需要在指定时间被处理的元素的队列 …

基于jQuery------购物车案例

目录 基于jQuery------购物车案例 案例&#xff1a;购物车案例模块-增减商品数量分析 案例&#xff1a;购物车案例模块-修改商品小计分析 案例&#xff1a;购物车案例模块-计算总计和总额 案例&#xff1a;购物车案例模块-删除商品模块 案例&#xff1a;购物车案例模块-选…

从‘discover.partitions‘=‘true‘分析Hive的TBLPROPERTIES

从’discover.partitions’true’分析Hive的TBLPROPERTIES 前言 Hive3.1.2先建表&#xff1a; show databases ;use db_lzy;show tables ;create external table if not exists test_external_20230502(id int,comment1 string,comment2 string ) stored as parquet ;creat…

C语言通过控制台命令行传入参数

Linux 与 windows运行c语言程序 切换到对应目录下 1. gcc hello.c -o hello 2.Linux: ./hello Windows: hello.exe int main(){}默认无参数 但在一些情况下想要直接通过在上述过程中第二步就传入参数而不是使用scanf..之类的输入语句就需要使用有参数的main方法: int main() {…

Docker--harbor私有库部署与管理

目录 一、本地私有仓库 搭建本地私有仓库 Docker容器的重启策略 二、Harbor 1、什么是Harbor 2、Harbor特性 3、Harbor的构成 三、Harbor部署 实验步骤 1、安装Docker-Compose服务 2、部署Harbor服务 1、下载或上传Harbor安装程序 2、修改Harbor安装的配置文件 3、…

基于TI板MSP430 玩转PID

文章目录 前言一、整体框架二、PID算法1. 位置式PID2. 增量式PID3. 比例外置式PID4. 积分限幅、输出限幅和PID参数整定5. 位置式PID和增量式PID的区别及抉择 三、初值获取1. 定时器输入捕获2. 外部中断3. ADC采样 前言 具体啥是PID&#xff0c;我这里不做介绍&#xff0c;网上…

SpringMVC(后)SSM整合

10、文件上传和下载 10.1、文件下载 ResponseEntity用于控制器方法的返回值类型&#xff0c;该控制器方法的返回值就是响应到浏览器的响应报文 使用ResponseEntity实现下载文件的功能 RequestMapping("/testDown") public ResponseEntity<byte[]> testResp…

【Hello Algorithm】复杂度 二分法

作者&#xff1a;小萌新 专栏&#xff1a;算法 作者简介&#xff1a;大二学生 希望能和大家一起进步 本篇博客简介&#xff1a;介绍算法的复杂度 对数器和二分法 复杂度 对数器 二分法 复杂度常数时间操作非常数时间操作时间复杂度空间复杂度 二分法有序数组中找一个值寻找有序…

树的存储和遍历

文章目录 6.5 树与森林6.5.1 树的存储结构1. 双亲表示法(顺序存储结构)2 孩子链表表示法3 孩子兄弟表示法(二叉树表示法) 6.5.2 森林与二叉树的转换1 树转换成二叉树2 二叉树转换成树3 森林转换成二叉树4 二叉树转换成森林 6.5.3 树和森林的遍历1. 树的遍历2. 森林的遍历 6.6 赫…

数据库篇:表设计、创建编辑以及导出导入数据

微信小程序云开发实战-答题积分赛小程序系列 数据库篇:表设计、添加编辑以及导出导入数据 原型: 最终实现界面截图:

Moqui REST API的两种实现方法

实现Restful API的方法 实现REST API有两种方法。第一种&#xff1a; The main tool for building a REST API based on internal services and entity operations is to define resource paths in a Service REST API XML file such as the moqui.rest.xml file in moqui-fr…

chatGPT国内可用镜像源地址

chatGPT国内可用镜像源地址 彷丶徨丶 关注 IP属地: 湖北 0.811 2023.03.15 16:02:16 字数 1,152 阅读 249,582 如果你正在尝试访问Chatgpt网站&#xff0c;但由于某些原因无法访问该网站&#xff0c;那么你可以尝试使用Chatgpt的国内镜像网站。以下是一些Chatgpt国内镜像网站的…

java基础知识——27.动态代理

这篇文章&#xff0c;我们来学一下java的动态代理 目录 1.动态代理的介绍 2.具体的代码实现 1.动态代理的介绍 动态代理&#xff1a;无侵入式的额外给代码增加功能 很不好理解&#xff0c;下面&#xff0c;我们通过两个例子来说明一下什么是动态代理&#xff1a; 例一&a…