>“大小姐,你有点追求好不好,我们这次来参加比赛就是要争取冠军的,对我们威胁最大的两个对手都赶在我们前面了,有什么好得意的!”我不满的对杨婷说。
杨婷一脸闷闷不乐,转身回座位上开始迁移程序。
“神童,你过来看stafenie在数据库上建的表好奇怪,她没有把整个数据表放在一起,而是分了四块,放在四个不同的地方!”孙董奇怪的对我说。
我侧着身子过去看了一眼孙董的电脑屏幕,沉思了一会儿,然后又回到我的电脑面前,霹雳啪嗒敲了几个指令。
“stafenie果然是厉害,知道通过分片的方式来加快数据处理,”我啧啧赞叹的对孙董说,“一般我们建模用的数据表都很小,所以数据放在一起对的处理速度并不会产生什么影响,但是对于50G大数据量的处理,CPU、内存固然是瓶颈,但是更大的瓶颈是硬盘的IO,我看了一下,这台服务器一共有四个硬盘通道,每个通道的平均处理速度应该在五十兆每秒左右,如果数据全部放在一个通道上,硬盘IO的速度也就五十兆每秒,如果像stafenie那样,把数据分散在四个通道上,可以获得两百兆每秒的IO速度,整整提高了四倍……”
我一口气把情况给孙董分析了一下,孙董似懂非懂的点了点头,对我的崇敬之情油然而生,“神童,你太牛了,接着我们该怎么办?”
“你学satfenie,把数据表分成四块,不过stafenie是随机分块的,你待会儿按照我给你的规则对数据进行分块!”我用毋庸置疑的口吻对孙董说,孙董虽然不明白其中的原因,但这时候她唯一能做的就是无条件的照办。
我把数据分块的条件给孙董,孙董按照我的要求写SQL语言,把50G的数据分块的存放到数据表中。
杨婷很快把程序迁移到运算服务器上,对我说:“神童,我开始运行模型了!?”
“等一下,”我跑到杨婷的电脑面前,仔细的检查了一边杨婷的程序,摇摇头说,“这样的程序肯定不行!”
“为什么?”杨婷被我泼了一头冷水,有点泄气的说,“以前我都是这样写的!”
“这先看这段代码,对数据做排序的操作,你没有加内存参数,缺省是用系统的配置的最大内存,”
“这样有问题吗,内存越多不是跑的越快吗?”杨婷歪着头看着我,觉得不可思议。
“如果是你独占这台服务器,你说的就没错,但是现在stafenie和叶莲娜的程序都在上面跑,可用
本章未完,请点击下一页继续阅读! 第1页 / 共7页