华为手机内存扩容教程 Python有什么办法可以让程序去遍历比电脑内存大的数据？
Python有什么办法可以让程序去遍历比电脑内存大的数据？
您好，很高兴在这里交流。
具体要看什么样的数据啦，如果是大数据量的Excel数据，Python有天然的数据处理库pandas。
它具备Excel表的一切功能，从多表拼接，合并，查找，替换，到数据透视表，无所不能，特别适合千万级数据记录的大数量的处理。
一切顺利，加油。
c语言的指针可以遍历内存吗？
理论上可以，但实际操作的时候会遇到问题，因为目前的编译器都是在操作系统之上运行的，受操作系统统一控制，每次编译运行你的程序时，操作系统会分配给你当前的程序一块虚拟内存，你的代码中写的内存地址都是以这块虚拟内存为参照的，不能超出这个虚拟内存去访问其他区域。
挑战程序员同学，如何只用2GB内存从20/40/80亿个整数中找到出现次数最多的数？
一、用4字节表示的整数个数为2^32≈40亿，而用2字节表示的无符号整数个数为2^16≈6万。
二、2G=2^31B≈20亿字节。
三、要找出出现次数最多的数，则应记录每个数出现的次数，最快的方法是在内存中将每个数出现的次数记录下来，记录的方法则是内存地址对应数，相应地址的内存单元记录次数，但2G内存以字节为单位仅能记录20亿个数，且每个数出现的次数大于255将会出现溢出风险。因此，这一方案不可取。
四、这样只能将每个次出现的次数记录在磁盘上。这样在磁盘上建一个16G的文件，每4字节对应一个整数，可对应40亿个整数，并用于记录相应整数的出现的次数。
1、将文件初始化。
2、依次读取数据，并用无符号整数记录在磁盘文件中，如出现溢出，则该数为次数最多的数。
3、从文件中读取各数出现的次数，用一个变量A记录最高次数，再用一个变量B记录最高次数出现的数据个数，要用个文件依次记录最高次数出现的数。当最高次数增加时，A 1，B置1，文件中写入该数，同次数的数出现时，B 1，文件相应位置写入该数，直到全部读完。
这样根本不需2G内存。
版权声明：本文内容由互联网用户自发贡献，本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。
