2023-01-10数学建模中的数据处理方法

一. 曲线插值和拟合

数模比赛中,常常需要根据已知的函数点进行数据、模型的处理和分析,而有时候现有的数据是极少的,不足以支撑分析的进行,这时就需要使用一些数学的方法,“模拟产生”一些新的但又比较靠谱的值来满足需求,这就是插值的作用。

一维插值

对表格给出的函数,求出没有给出的函数

y = interp1(x0,y0,x,"method") # 分段线性插值,1是指一维
y = spline(x0,y0,x) # 三次样条插值
% x0,y0是已知节点的坐标,同维向量; y对应于x处的插值,同维向量
% method["nearest"(最近邻),"linear","spline","cubic"(三次多项式插值) ]

  1. 将每两个相邻的节点用直线连接起来,如此形成的一条折线就是分段线性插值函数。每一个小段都确定一个函数表达式,叠加起来作为最终的表达式。

不进行分段时,插值点越多,最终函数的次数越高,而高次多项式会在插值的区间内发生严重的震荡现象——“龙格现象”。因此更倾向于使用分段低次多项式来近似原函数。

x = 0:2*pi;  %生成[0,2*pi]之间的整数值
y = sin(x);  %生成相应的函数值
plot(x,y,"or");%绘制一下点
xx = 0:0.01:2*pi;%这个是查询点的坐标向量
yy = interp1(x,y,xx,'linear');  %yy就是查询点向量对应的函数值向量了
plot(x,y,"o",xx,yy,"r");

xx=1.23;%只查询一个元素也是可以的
yy = interp1(x,y,xx,'linear');
plot(x,y,"o",xx,yy,"r");
分段线性插值函数
  1. 分段三次Hermite(埃尔米特)插值
    不仅要求插值函数过相应的已知点,还要求函数曲线在已知点处一阶导数值等于原函数的导数值,这也是为什么三次埃尔米特在已知点处更为平滑,且与原曲线更为相近。
    使用三次多项式作为每一个小段的插值多项式,相对于线性函数,三次多项式更为平滑。
    p = pchip(x,y,newx) %在MATLAB中至少需要4个点
    interp1(x,y,xx,'pchip')

    分段三次Hermite

  2. 三次样条插值
    所谓样条曲线,就是把一根具有弹性的细长木条(样条)在几个样点处用压铁压住,其余位置自由弯曲。这样子,由样条形成的曲线就称之为样条曲线。样条曲线实际上是由分段三次曲线连接而成,且在连接点处具有连续的二阶导数,从数学上加以概括就得到三次样条的概念。


以上这些等式条件,提供了4n-2个方程,但如果我们需要4n个三次多项式,就需要解出4n个未知数,也就是需要4n个方程。剩下的两个方程,我们称之为边界条件

如果存在边界条件,则我们使用csape函数进行三次样条插值。
pp = csape(x,y)

解题思路
三种插值结果比较

可以看到,三次样条插值最接近原曲线,分段线性插值与原曲线相差最远。在实际使用中,三次样条插值函数也比较多。

此外,还有n维数据插值,使用到的函数是interpn

二维插值
temps = [82,81,80,82,84;79,63,61,65,87;84,84,82,85,86];
mesh(temps)     % 根据原始数据绘出温度分布图,可看此图粗糙度
width = 1:5;depth = 1:3;
di = 1:0.2:3;wi = 1:0.2:5;
[WI,DI] = meshgrid(wi,di);  %增加了节点数目
ZI = interp2(width,depth,temps,WI,DI,"cubic"); %三阶插值
surfc(WI,DI,ZI)
运行结果
黄河调水调沙问题

问题:(1)给出估计任意时刻的排沙量及总排沙量的方法(2)确定排沙量与水流量的关系
视频讲解
`思路':排沙量 = 水流量×含沙量

已知给定观测时刻是等间距的,那么各次观测时刻(离开始时刻6月29日零时)分别为`t = 3600(12i - 4),i = 1,2,...,24
记第i次观测时水流量为vi,含沙量为ci,则含沙量yi = vi×ci
考虑到实际中的排沙量应该是时间的连续函数,为提高模型精度,采用三次样条函数进行插值。
求出y = y(t)与时间的关系,进行积分,就可以得到总的排沙量

对于问题(2),研究排沙量与水流量的关系,从试验数据可以看出,开始排沙量是随着水流量的增加而增长,而后是随着水流量的减少而减少。显然,变化规律并非是线性的关系,为此,把问题分为两部分,从开始水流量增加到最大值 2720m/s(即增长的过程)为第一阶段,从水流量的最大值到结束为第二阶段,分别来研究水流量与排沙量的关系。

曲线拟合

拟合类似于插值,都是函数逼近的一种手段。区别在于,插值函数必须经过所有已知点,而拟合得到的函数,只需要满足在某种意义下,已知点与该函数曲线的“误差”最小。
也就是说,拟合是在平面上找到一条连续的曲线,使得所有已知点到这条曲线的总距离最小。这样我们就有理由使用这条曲线来近似原函数曲线了。

  1. 一元线性拟合
    找到一条直线 y= kx+b 使得所有的已知点与该直线的总距离最小,也就是总偏差最小。
    衡量标准——最小二乘法

    公众号:我是陈小白

  2. 非线性函数的线性化

公众号:我是陈小白

因此在函数拟合前一定要先进行作图(散点图)

画散点图

从散点图可以看出,第一阶段基本上是线性关系。第一阶段和第二阶段都准备用一次和二次曲线来拟合,哪一个模型的剩余标准差小就选取哪一个模型。

第一阶段拟合
第二阶段拟合

最终结果
% 一: y=250.5655v-373384.4661
% 二: y=0.167v*2-180.4668v+72421.0982

其他解法: 黄河小浪底调水调沙灰色数学研究

  1. 评价拟合效果
y_hat = k*x+b; % y的拟合值
SSR = sum((y_hat-mean(y)).^2)  % 回归平方和
SSE = sum((y_hat-y).^2) % 误差平方和
SST = sum((y-mean(y)).^2) % 总体平方和
SST-SSE-SSR   % 5.6843e-14  =   5.6843*10^-14   matlab浮点数计算的一个误差
R_2 = SSR / SST
  1. matlab拟合工具箱
    Curve Fitting
    在命令行输出“cftool”
    界面

拟合也存在着一个典型的问题,即过拟合现象。如果你的参数个数要比变量的个数还要多,那么在具体拟合的时候,很可能会得到很小的SSE。单从拟合的角度而言是没问题的,但是这种过拟合,可能无法合理地解释实际问题,因此在拟合的时候需要注意过拟合的问题。其实插值,例如拉格朗日插值这种可以得到一个单一函数的插值方法,我们就可以将它理解为过拟合。虽然它的SSE=0,已经达到了最好,但无论是用来预测未来,还是用来解释现象,插值函数都不是一个很好的选择。

2. 数值积分

3. 优化问题

线性规划有约束极小问题
非线性规划有约束极小问题
非线性无约束极小问题
非线性最小二乘问题
二次规划

4. 回归分析

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 228,398评论 6 532
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 98,510评论 3 416
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 176,346评论 0 374
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 62,972评论 1 311
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 71,739评论 6 410
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 55,196评论 1 324
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 43,260评论 3 441
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 42,413评论 0 288
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 48,951评论 1 336
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 40,779评论 3 354
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 42,980评论 1 369
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 38,522评论 5 359
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 44,217评论 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 34,647评论 0 26
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 35,887评论 1 286
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 51,659评论 3 391
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 47,967评论 2 374

推荐阅读更多精彩内容