如何申请足够大的内存空间?

时间:2022-07-29 04:29:53
系统总内存是128G, 现在要申请大概100G的内存来存储数据,请问有什么方法?

6 个解决方案

#1


如果只是你一个程序,可以,但是申请连续的内存可能会失败,建议申请多块内存。

#2


基本上实现不了吧,如果想申请总量为100G的内存,应该可以实现,根据各部分功能自己申请就好
可是如果直接申请100G,那基本上就是失败,因为在128G内存的机器上找到连续的100G应该很困难

可以适当改变一下思路,部分申请,使用完释放后再申请!!

#3


首先你的程序要是 64 位的,  然后再你程序刚启动的时候就申请. 这么大的内存就不要用堆了, 直接用操作系统的内存分配接口, VirtualAlloc/brk.
不必去考虑物理内存连不连续, 够不够之类的问题了. 只要你自己进程的地址空间有这么大的连续范围就行, 操作系统在把虚拟内存地址映射到物理内存时是按页映射的, 物理内存不连续你使用的时候也是连续的. 即使物理内存不够你也不必操心, 操作系统会为你做换页操作, 只是性能变慢而已.

#4


容量大小从小到大:栈≤全局数据≤堆≤文件≤硬盘≤磁盘阵列≤云存储
当程序需要使用比如2GB~1TB左右的存储时,最简单的办法恐怕得是用文件读写模拟内存读写了吧。windows参考_fseeki64函数,linux参考fseeko64函数。
FILE *fA;fA=fopen("A","rb+");_fseeki64(fA,10000000000i64*sizeof(int),SEEK_SET);fputc(fA,0);//int A[10000000000];
int B;
_fseeki64(fA,9999999999i64*sizeof(int),SEEK_SET);fread(&B,1,sizeof(int),fA);//B=A[9999999999];
_fseeki64(fA,9999999999i64*sizeof(int),SEEK_SET);fwrite(&B,1,sizeof(int),fA);//A[9999999999]=B;
fclose(fA);

#6


使用内存映射?

#1


如果只是你一个程序,可以,但是申请连续的内存可能会失败,建议申请多块内存。

#2


基本上实现不了吧,如果想申请总量为100G的内存,应该可以实现,根据各部分功能自己申请就好
可是如果直接申请100G,那基本上就是失败,因为在128G内存的机器上找到连续的100G应该很困难

可以适当改变一下思路,部分申请,使用完释放后再申请!!

#3


首先你的程序要是 64 位的,  然后再你程序刚启动的时候就申请. 这么大的内存就不要用堆了, 直接用操作系统的内存分配接口, VirtualAlloc/brk.
不必去考虑物理内存连不连续, 够不够之类的问题了. 只要你自己进程的地址空间有这么大的连续范围就行, 操作系统在把虚拟内存地址映射到物理内存时是按页映射的, 物理内存不连续你使用的时候也是连续的. 即使物理内存不够你也不必操心, 操作系统会为你做换页操作, 只是性能变慢而已.

#4


容量大小从小到大:栈≤全局数据≤堆≤文件≤硬盘≤磁盘阵列≤云存储
当程序需要使用比如2GB~1TB左右的存储时,最简单的办法恐怕得是用文件读写模拟内存读写了吧。windows参考_fseeki64函数,linux参考fseeko64函数。
FILE *fA;fA=fopen("A","rb+");_fseeki64(fA,10000000000i64*sizeof(int),SEEK_SET);fputc(fA,0);//int A[10000000000];
int B;
_fseeki64(fA,9999999999i64*sizeof(int),SEEK_SET);fread(&B,1,sizeof(int),fA);//B=A[9999999999];
_fseeki64(fA,9999999999i64*sizeof(int),SEEK_SET);fwrite(&B,1,sizeof(int),fA);//A[9999999999]=B;
fclose(fA);

#5


#6


使用内存映射?