PHP-大数据量怎么处理优化

大数据的话可以进行以下操作：

创新互联一直通过网站建设和网站营销帮助企业获得更多客户资源。 以"深度挖掘，量身打造，注重实效"的一站式服务，以成都做网站、成都网站设计、移动互联产品、成都全网营销推广服务为核心业务。10余年网站制作的经验，使用新网站建设技术，全新开发出的标准网站，不但价格便宜而且实用、灵活，特别适合中小公司网站制作。网站管理系统简单易用，维护方便，您可以完全操作网站资料，是中小公司快速网站建设的选择。

减少对数据库的读取，也就是减少调用数据库，

进行数据缓存，

利用数据库的自身优化技术，如索引等

精确查询条件，有利于提高查找速度

在PHP中怎么解决大量数据处理的问题

mysql_query函数查询的方式是查询出全部结果后缓存到内存中，这样就会出现超内存的现象，使用另外一个函数mysql_unbuffered_query可以解决这个问题，mysql_unbuffered_query不会缓存结果集，而是查询出来数据后立马对结果集进行操作，也就是便查询边返回，这样就不会出现超出内存的现象，但是使用mysql_unbuffered_query的是时候不能使用 mysql_num_rows() 和 mysql_data_seek()。并且向 MySQL 发送一条新的 SQL 查询之前，必须提取掉所有未缓存的 SQL 查询所产生的结果行。例如：

使用缓存结果集的代码：

function selecttest()

{

try {

$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');

// 不使用缓存结果集方式

// $pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

$sth = $pdo-prepare('select * from test');

$sth-execute();

echo '最初占用内存大小：' . memory_get_usage() . "\n";

$i = 0;

while ($result = $sth-fetch(PDO::FETCH_ASSOC)) {

$i += 1;

if ($i 10) {

break;

}

sleep(1);

print_r($result);

echo '占用内存大小：' . memory_get_usage() . "\n";

}

} catch (Exception $e) {

echo $e-getMessage();

}

}

执行时将会报超出内存的错误：

Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php on line 56

Call Stack:

0.0005 135392 1. {main}() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:0

0.0005 135568 2. test-selecttest() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:85

0.0050 142528 3. PDOStatement-execute() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:56

将上面代码中的$pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);一行的注释去掉后将不在缓存结果集，这时运行该函数的结果如下：

最初占用内存大小：144808

Array

(

[id] = 1

[a] = v

[b] = w

[c] = i

)

占用内存大小：145544

Array

(

[id] = 2

[a] = b

[b] = l

[c] = q

)

占用内存大小：145544

Array

(

[id] = 3

[a] = m

[b] = p

[c] = h

)

占用内存大小：145536

Array

(

[id] = 4

[a] = j

[b] = i

[c] = b

)

占用内存大小：145536

可以看到，这时返回一条数据内存占用非常的小，也就700多字节，这样就不会出现超出内存的错误了。

PHP 能将数据入浏览器缓存吗？如果能求讲解！

不知阁下需要的是怎样的缓存？纯客户端？还是怎样的，以下可供参考：

一：储存于客户端的信息，页面调用时无需从服务器解析直接使用（常见的即为Cookie，还有HTML5里的localStorage，Application Cache）；

二：离线性质，即用户不在线时，也可以正常访问网页，所访问的数据即客户端储存的缓存（HTML5中的应用程序缓存，即Application Cache）；

三：客户端与服务端共同缓存的，这种方法可使已经从数据库查询的数据、已通过程序计算得到的数据存于服务器，服务器解析时直接调用，无需再处理得到，大大减轻了服务器的压力（常见的即为session，HTML5中为sessionStorage）；

四：纯服务端，同三，即将服务器已经处理好的数据暂存于服务器，需要时直接调用而无需再次处理以便提高效率和减轻服务器压力（服务器端的缓存机制非常多，网站开发者基本都会）；

PHP关于服务器缓存的提问

一、除非你的整个WEB服务器只做一个论坛使用，否则用APPLICATION里面放论坛索引是不科学的。

二、每次都从数据库里面取也无可厚非，数据库有自己查询缓存系统，这样的事情交给数据库去做是对的，老是过份的考虑得这么细，在开发大型系统应用的时候会严重影响效率。

三、如果使用一般数据库，希望进行一下优化，不用每次都在数据库里面取，也是可行的，方法是在编写好每次都从数据库里面取的程序以后，进行如下两个方面的变化：

1是在从数据库里面取数的地方，增加判断是否存在相应的静态html文件，如果存在就从文件里面读，否则从数据库里面取出来，并在输出之前保存到html文件里面，逻辑如下：

$cachefile='静态html文件名.html';

if (file_exists($cachefile)) $out_str=file_get_contents($cachefile);

else{ $out_str='';//接着从数据库里面取出内容，并添加到字符串变量$out_str后面

$fp=fopen($cachefile,'w');fputs($fp,$out_str);fclose($fp);

}

echo $out_str;//输出内容

2还需要修改所有针对上面的内容进行delete和update的程序，在修改数据库之后增加删除文件的功能，大致结构是：

$cachefile='静态html文件名.html';

delete($cachefile);

PHP如何解决网站的大数据大流量与高并发

使用缓存，比如memcache,redis,因为它们是在内存中运行，所以处理数据，返回数据非常快，所以可以应对高并发。

2.增加带宽和机器性能，1M的带宽同时处理的流量肯定有限，所以在资源允许的情况下，大带宽，多核cpu,高内存是一个解决方案。

3.分布式，让多个访问分到不同的机器上去处理，每个机器处理的请求就相对减少了。

简单说些常用技术，负载均衡，限流，加速器等

在PHP中怎么对数据进行缓存读取功能？

1、普遍缓存技术：

数据缓存：这里所说的数据缓存是指数据库查询PHP缓存机制，每次访问页面的时候,都会先检测相应的缓存数据是否存在，如果不存在，就连接数据库，得到数据，并把查询结果序列化后保存到文件中，以后同样的查询结果就直接从缓存表或文件中获得。

用的最广的例子看Discuz的搜索功能，把结果ID缓存到一个表中，下次搜索相同关键字时先搜索缓存表。

举个常用的方法，多表关联的时候，把附表中的内容生成数组保存到主表的一个字段中，需要的时候数组分解一下，这样的好处是只读一个表，坏处就是两个数据同步会多不少步骤，数据库永远是瓶颈，用硬盘换速度，是这个的关键点。

2、 页面缓存：

每次访问页面的时候，都会先检测相应的缓存页面文件是否存在，如果不存在，就连接数据库，得到数据，显示页面并同时生成缓存页面文件，这样下次访问的时候页面文件就发挥作用了。(模板引擎和网上常见的一些PHP缓存机制类通常有此功能)

3、 时间触发缓存：

检查文件是否存在并且时间戳小于设置的过期时间,如果文件修改的时间戳比当前时间戳减去过期时间戳大，那么就用缓存，否则更新缓存。

4、 内容触发缓存：

当插入数据或更新数据时，强制更新PHP缓存机制。

5、 静态缓存：

这里所说的静态缓存是指静态化，直接生成HTML或XML等文本文件，有更新的时候重生成一次，适合于不太变化的页面，这就不说了。

以上内容是代码级的解决方案，我直接CP别的框架，也懒得改，内容都差不多，很容易就做到，而且会几种方式一起用，但下面的内容是服务器端的缓存方案，非代码级的，要有多方的合作才能做到

6、 内存缓存:

Memcached是高性能的，分布式的内存对象PHP缓存机制系统，用于在动态应用中减少数据库负载，提升访问速度。

7、 php的缓冲器：

有eaccelerator， apc， phpa，xcache，这个这个就不说了吧，搜索一堆一堆的，自己看啦，知道有这玩意就OK

8、 MYSQL缓存：

这也算非代码级的，经典的数据库就是用的这种方式，看下面的运行时间，0.09xxx之类的

9、 基于反向代理的Web缓存:

如Nginx，SQUID，mod_proxy(apache2以上又分为mod_proxy和mod_cache)

名称栏目：sqlserver简写,sql的缩写
标题URL：http://myzitong.com/article/hdejci.html