系统进程内存模型_weixin_34019144的博客-程序员宅基地

技术标签: shell  操作系统  c/c++  

32位进程虚拟地址空间

 

64位进程地址虚拟空间

32位机器上linux操作系统中的进程的地址空间大小是4G,其中0-3G是用户空间,3G-4G是内核空间。进程的地址空间存在于虚拟内存中。虚拟内存不能被禁用。

进程地址空间

 

进程地址空间

进程地址空间分为内核空间和用户空间  

因为每个进程可以通过系统调用进入内核,因此,Linux内核由系统内的所有进程共享。于是,从具体进程的角度来看,每个进程可以拥有4G字节的虚拟空间。

        A.正文段。这是由cpu执行的机器指令部分。通常,正文段是可共享的,所以即使是经常执行的程序(如文本编辑程序、C编译程序、shell等)在存储器中也只需要有一个副本,另外,正文段常常是只读的,以防止程序由于意外事故而修改器自身的指令。

  B.初始化数据段。通常将此段称为数据段,它包含了程序中需赋初值的变量。例如,C程序中任何函数之外的说明:

    int maxcount = 99;(全局变量)

  C.非初始化数据段。通常将此段称为bss段,这一名称来源于早期汇编程序的一个操作,意思是"block started by symbol",在程序开始执行之前,内核将此段初始化为0。函数外的说明:

  long sum[1000];

  使此变量存放在非初始化数据段中。

  D.栈。自动变量以及每次函数调用时所需保存的信息都存放在此段中。每次函数调用时,其返回地址、以及调用者的环境信息(例如某些机器寄存器)都存放在栈中。然后,新被调用的函数在栈上为其自动和临时变量分配存储空间。通过以这种方式使用栈,C函数可以递归调用。

  E.堆。通常在堆中进行动态存储分配。由于历史上形成的惯例,堆位于非初始化数据段顶和栈底之间。

  从上图我们看到栈空间是下增长的,堆空间是从下增长的,他们会会碰头呀?一般不会,因为他们之间间隔很大

 

内核态和用户态


      当一个任务(进程)执行系统调用而陷入内核代码中执行时,我们就称进程处于内核运行态(或简称为内核态)。此时处理器处于特权级最高的(0级)内核代码中执行。当进程处于内核态时,执行的内核代码会使当前进程的内核栈。每个进程都有自己的内核栈。当进程在执行用户自己的代码时,则称其处于用户运行态(用户态)。即此时处理器在特权级最低的(3级)用户代码中运行。当正在执行用户程序而突然被中断程序中断时,此时用户程序也可以象征性地称为处于进程的内核态。因为中断处理程序将使用当前进程的内核栈。这与处于内核态的进程的状态有些类似。
  内核空间中存放的是内核代码和数据,而进程的用户空间中存放的是用户程序的代码和数据。不管是内核空间还是用户空间。
  在linux操作系统中,每个进程都通过一个task_struct的结构体描叙,每个进程的地址空间都通过一个mm_struct描叙,c语言中的每个段空间都通过vm_area_struct表示,他们关系如下 :

    

  当运行一个程序时,操作系统需要创建一个进程,这个进程和程序之间都干了些什么呢?

  当一个程序被执行时,该程序的内容必须被放到进程的虚拟地址空间,对于可执行程序的共享库也是如此。可执行程序并非真正读到物理内存中,而只是链接到进程的虚拟内存中。

  当一个可执行程序映射到进程虚拟地址空间时,一组vm_area_struct数据结构将被产生。每个vm_area_struct数据结构表示可执行印象的一部分;是可执行代码,或是初始化的数据,以及未初始化的数据等。

  linux操作系统是通过sys_exec对可执行文件进行映射以及读取的,有如下几步:

  1.创建一组vm_area_struct

  2.圈定一个虚拟用户空间,将其起始结束地址(elf段中已设置好)保存到vm_start和vm_end中。

  3.将磁盘file句柄保存在vm_file中

  4.将对应段在磁盘file中的偏移值(elf段中已设置好)保存在vm_pgoff中;

  5.将操作该磁盘file的磁盘操作函数保存在vm_ops中

  注意:这里没有对应 的页目录表项创建页表,更不存在设置页表项了。

                     

  假设现在程序中有一条指令需要读取上面vm_start--vm_end之间的某内容

  例如:mov [0x08000011],%eax,那么将会执行如下序列:

  1.cpu依据CR3(current->pgd)找到0x08000011地址对应的pgd[i],由于该pgd[i]内容保持为初始化状态即为0,导致cpu异常.

  2.do_page_fault被调用,在该函数中,为pgd[i]在内存中分配一个页表,并让该表项指向它,如下图所示:

                                                       

  注意:这里i为0x08000011高10位,j为其中间10位,此时pt表项全部为0(pte[j]也为0);

  3.为pte[j]分配一个真正的物理内存页面,依据vm_area_struct中的vm_file、vm_pgoff和vm_ops,调用filemap_nopage将磁盘file中vm_pgoff偏移处的内容读入到该物理页面中,如下图所示:

                                           

  ①。分配物理内存页面;       ②。从磁盘文件中将内容读取到物理内存页面中;

  从上面我们可以知道,在进程创建的过程中,程序内容被映射到进程的虚拟内存空间,为了让一个很大的程序在有限的物理内存空间运行,我们可以把这个程序的开始部分先加载到物理内存空间运行,因为操作系统处理的是进程的虚拟地址,如果在进行虚拟到物理地址的转换工程中,发现物理地址不存在时,这个时候就会发生缺页异常(nopage),接着操作系统就会把磁盘上还没有加载到内存中的数据加载到物理内存中,对应的进程页表进行更新。也许你会问,如果此时物理内存满了,操作系统将如何处理?

  下面我们看看linux操作系统是如何处理的:

  如果一个进程想将一个虚拟页装入物理内存,而又没有可使用的空闲物理页,操作系统就必须淘汰物理内存中的其他页来为此页腾出空间。

  在linux操作系统中,物理页的描叙如下:

  struct mem_map

  {

      1.本页使用计数,当该页被许多进程共享时计数将大于1.

      2.age描叙本页的年龄,用来判断该页是否为淘汰或交换的好候选

      3.map_nr描叙物理页的页帧号

  }

  如果从物理内存中被淘汰的页来自于一个映像或数据文件,并且还没有被写过,则该页不必保存,它可以丢掉。如果有进程在需要该页时就可以把它从映像或数据文件中取回内存。

  然而,如果该页被修改过,操作系统必须保留该页的内容以便晚些时候在被访问。这种页称为"脏(dirty)页",当它被从内存中删除时,将被保存在一个称为交换文件的特殊文件中。

  相对于处理器和物理内存的速度,访问交换文件要很长时间,操作系统必须在将页写到磁盘以及再次使用时取回内存的问题上花费心机。

  如果用来决定哪一页被淘汰或交换的算法不够高效的话,就可能出现称为"抖动"的情况。在这种情况下,页面总是被写到磁盘又读回来,操作系统忙于此而不能进行真正的工作。

  linux使用"最近最少使用(Least Recently Used ,LRU)"页面调度技巧来公平地选择哪个页可以从系统中删除。这种设计系统中每个页都有一个"年龄",年龄随页面被访问而改变。页面被访问越多它越年轻;被访问越少越老。年老的页是用于交换的最佳候选页。
 

转载于:https://my.oschina.net/manmao/blog/867427

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_34019144/article/details/91827328

智能推荐

MyBatis - 两种查询树形数据的方法详解(嵌套结果集、递归查询)_mybatis 根据parentid 嵌套_可可keketrtr的博客-程序员宅基地

树形结构数据在开发中十分常见,比如:菜单数、组织树, 利用MyBatis提供嵌套查询功能可以很方便地实现这个功能需求。而其具体地实现方法又有两种,下面分别通过样例进行演示。方法一:使用嵌套结果集实现1,准备工作(1)假设我们有如下一张菜单表menu,其中子菜单通过parendId与父菜单的id进行关联: (2)对应的实体类如下: 1..._mybatis 根据parentid 嵌套

Could not get JDBC Connection_cannotgetjdbcconnection-程序员宅基地

项目环境: JDK1.6+Tomcat7.078 部分报错信息: Caused by: org.springframework.jdbc.CannotGetJdbcConnectionException: Could not get JDBC Connection; nested exception is org.apache.commons.dbcp.SQLNestedExc..._cannotgetjdbcconnection

在Linux上安装hadoop教程_lxover3的博客-程序员宅基地

本篇文章是在Linux上装HDFS最全的教程,适合众多新手和老手学习

chemFoam的源码提取_ycwang125的博客-程序员宅基地

ok!经过一系列的铺垫,我们来尝试一下提取出openFOAM中的chemFoam程序的源码,然后用Makefile编译运行一下,这样可以帮助我们进行二次开发。呃。。。这个怎么说呢。。。openFOAM一个单独算例的程序依赖深度超过我的预期了。首先程序编译的过程是有记录的,保存如下路径下的文件:dyfluid@dyfluid:~/OpenFOAM/OpenFOAM-7/platforms/linux64GccDPInt32Opt/applications/solvers/combustion/chemFo

SAP表格维护生成器生成数据表维护视图程序_user714的博客-程序员宅基地

SAP 标准数据表中数据是通过前台的一系列操作进行维护的。少数情况下,可以直接在表中修改,但这是不被推荐的作法。在ABAP开发的过程中有时需要在数据字典中自定义数据表,而自定义数据表,也需要进行数据维护。除了自己定义报表程序来进行维护外,SAP还给我们提供了一种行之有效的方法,来建立前台维护自定义数据表的程序。这就是表格维护生成器。下面将介绍,表格维护生成器的具体用法。一、建立自定义的数据表。_表格维护生成器

elasticsearch--动态同义词_黑人子敬的博客-程序员宅基地

进行文档搜索时,有时候需要用到同义词搜索。我平时做简单搜索时,都是在代码测做分词,同义词做替换,然后拼写DSL搜索,但是碰到双向同义词和要求匹配度100%时,这种情况无法解决,所以需要在es测做同义词处理。动态同义词可以参考:https://blog.csdn.net/t_6666/article/details/56489275https://www.cnblogs.com...

随便推点

不支持原子性的-Redis-事务也叫事务吗?,网易资深Java架构师_不支持事务的redisconnection_前端好喜欢你的博客-程序员宅基地

事务是一个原子操作:事务中的命令要么全部被执行,要么全部都不执行这个原子操作,和关系型 DB 的原子性不太一样,它不能完全保证原子性,后边会介绍。Redis 事务的几个命令MULTI 命令用于开启一个事务,它总是返回 OK 。MULTI 执行之后, 客户端可以继续向服务器发送任意多条命令, 这些命令不会立即被执行, 而是被放到一个队列中, 当 EXEC命令被调用时, 所有队列中的命令才会被执行。另一方面, 通过调用 DISCARD , 客户端可以清.._不支持事务的redisconnection

mybatis第十一话 - mybaits getConnection连接数据库的源码分析_getconnectionmutex_有头发的程序猿!的博客-程序员宅基地

到本篇文章,整个Mybatis框架的分析应该是都完了,但是也在我心中产生了几个想法,为什么看不到连接数据库的源码,连接数据库的流程是怎么样的?为什么项目重启的第一次连接查询会很慢?本文主要探索一下mysql数据库的连接过程!上一篇:mybatis第十话 - mybaits整个事务流程的源码分析下一篇:mysql第一话 - mysql基于docker的安装及使用云想衣裳花想容,春风拂槛露华浓_getconnectionmutex

山东省第八届 ACM 省赛 fireworks (组合数+逆元)_acm fireworks_小坏蛋_千千的博客-程序员宅基地

Description Hmz likes to play fireworks, especially when they are put regularly. Now he puts some fireworks in a line. This time he put a trigger on each firework. With that trigger, each firewo_acm fireworks

《数据结构》实验课期末考试_数据结构实验考试_荼靡开至的博客-程序员宅基地

#代码是直接从提交的答题卡上复制的,可能格式啥有错#运行结果当时要求用自己的姓名就不粘过来了题目:1、(30分)利用自己的姓名拼音字母建立一个单链表(带头结点),注意,如果链表存在已知字母,则不能插入。输入格式样例:请输入姓名:LIMING建立的单链表输出为:L->I->M->N->G->^注:(1)输入自己姓名拼音,大写全拼,中间无空格;(2)如果链表长度小于5(不含),则在单链表尾部,反复插入单个字母A,直到链表长度等于5为止。2、在1所建立的单链表基础上_数据结构实验考试

spark点点滴滴 —— spark入门_简牧的博客-程序员宅基地

spark入门,概述,spark-shell的使用,spark api编程

Vue2:源码学习------patch流程_Tyreal芒果的博客-程序员宅基地

从vm._render函数开始,本质是执行createElement的过程,其中tag为App组件导出的对象,所以执行createComponent,传入tagcreateComponent过程对tag进行extend处理,返回组件构造器,给data注册hooks (后面用来组件实例化),创建组件vnode,传入data, 使用componentOptions来保存构造器,tag等等,返回App组件vnode回到_render函数, 给App组件vode设置parent属性,此时是undefined,.