php大数据写入文件 php 大数据

php post 大数据写入mysql

你可以将10W条分批写入，在循环里加个判断，当数组中的个数达到500或者1000条时，批量写入一次，循环结束后，不管数据有没有达到你设定的这个值，只要有数据都再写入一次就可以了。

相关问答

Q1: PHP文件写入的几种方法

通过fwrite

$file = fopen("test.txt","a+"); //次方法会自动生成文件test,txt,a表示追加写入php大数据写入文件，

//w代表替换写入 fwrite($file,"写入代码"); fclose($file);

file_put_content()方法写入

file_put_contents("test.txt","奥斯卡老\r\n顿积分");//这里说一下\r\n在双引号下

//才会换行如果单引号就识别不了

//如果想追加写入内容php大数据写入文件，这个函数还有第三个参数FILE_APPEND

Q2: PHP将数据写入txt文件

//记录返回值

        $write_data_a = [

            'html_url'  =  $getUrl,

            'ip'    = $this-get_real_ip(),

            'time'  =  date("Y-m-d H:i:s",time()),

            'res'   = $response

        ];

//转化为JSON

        $write_data_a = json_encode($write_data_a) . '||' . "\n";

        $date = date("Y-m-d", time());

//项目路径目录，判断是否存在，不存在则创建

        $lujing = "./360_mobile_res_sd";

        if(!is_dir($lujing)){

            mkdir(iconv("UTF-8", "GBK", $lujing),0777,true);

        }

//文件，判断是否存在，不存在则创建

        $TxtFileName = "./360_mobile_res_sd/" . $date . "_2.txt";

        //以读写方式打写指定文件，如果文件不存则创建

        if(file_exists($TxtFileName))

        {

//存在，追加写入内容

            file_put_contents($TxtFileName, $write_data_a, FILE_APPEND);

        }

        else

        {

//不存在，创建并写入

            if( ($TxtRes=fopen ($TxtFileName,"w+")) === FALSE){

                exit();

            }

            if(!fwrite ($TxtRes,$write_data_a)){ //将信息写入文件

                fclose($TxtRes);

                exit();

            }

            fclose ($TxtRes); //关闭指针

        }

Q3: PHP如何把数据写入JSON文件并在另一PHP文件读取JSON数据?

首先，把PHP数组中的数据写入JSON文件。

?php

// 生成一个PHP数组

$data = array();

$data['a'] = 'test';

$data['b'] = 'bbb';

// 把PHP数组转成JSON字符串

$json_string = json_encode($data);

// 写入文件

file_put_contents('test.json', $json_string);

?

然后，把JSON文件中的数据读取到PHP变量中。

?php

// 从文件中读取数据到PHP变量

$json_string = file_get_contents('test.json');

// 把JSON字符串转成PHP数组

$data = json_decode($json_string, true);

// 显示出来看看

var_dump($data);

?

Q4: php怎样把一个数组写入一个文件

方法一php大数据写入文件：

//将一个测试的数组写入一个PHP文件:

?php //要写入PHP文件的数组 $write_array = array( '1' = 'oneone', '2'

= 'two', '3' = 'three', '4' = 'four','5' = 'five' );

//字符串处理 $string_start = "?php\n"; $string_process =

var_export($write_array, TRUE);$string_end = "\n?"; $string =

$string_start.$string_process.$string_end; //开始写入文件

echofile_put_contents('test_array.php', $string); ?

这里用到了两个函数：

1php大数据写入文件，var_export():

·var_export — 用来输出或返回一个变量的字符串表示php大数据写入文件，它和 var_dump() 的区别是，var_export()

可以用来返回关于传递给该函数的变量的结构信息，并且其返回的表示是合法的 PHP 代码如果 “echo

$string_process;”,则可以看到输出结果：

array ( 1 = 'oneone', 2 = 'two', 3 = 'three', 4 = 'four', 5 = 'five', )

而它就是php大数据写入文件我们要写入 test_array.php 文件的内容(除去 php 标签)；

·var_dump() 函数用来打印变量的相关信息，它只用来“打印”，而不会返回值，它的原型是 void var_dump(……)，我们来 “var_dump($string_process);”,则可以看到输出结果：

string(86) "array ( 1 = 'oneone', 2 = 'two', 3 = 'three', 4 = 'four', 5 = 'five', )"

可以看到输出的string(86) “…”,再一次说明了 var_export() 返回的是一个字符串。

2,file_put_contents():

file_put_contents — 将一个字符串写入文件,原型是 int file_put_contents ( string

filename, string data [, int flags [, resource context]]

),这里我们只用到了两个参数，”string filename”:要写入的文件名;”string data”:字符串数据；

此函数返回写入到文件内数据的字节数，如果我们 “echo file_put_contents(’test_array.php’, $string);”,则会输出一个整数 ：95。

因为输出的 array() 占了 86 个字节，还有的 $string_start 和 $string_end 又占了 9 个字节，转义字符 换行符 在这里只占 1 个字节。（不知道这样解释恰当不恰当，还有望大家多多指正）

方法二：json_encode()

我们常见一些网站在做ajax时返回JSON格式的数据:

返回的是json格式的数据返回的是json格式的数据

这有什么好处那？很显然前端在接到返回的数据时可以直接使用，而不用再用eval_r('(+ returnString +)')或者 $.parseJSON(returnString ) （jQuery的函数）来转化为js对象，这样显然为用户省电了。。。

在网上搜索了一下，这个问题在搜索中文信息的时候比较少，一些说是返回json的都是在前端进行的转化处理，根本不是返回JSON格式，其实返回json相当的简单。

原来的数据就是JSON格式

下例来自《锋利的jQuery》：

$(function(){

$('#send').click(function() {

$.getJSON('', function(data) {

$('#resText').empty();

var html = '';

$.each( data , function(commentIndex, comment) {

html += 'div class="comment"h6' +

comment['username'] + ':/h6p class="para"' +

comment['content'] + '/p/div';

})

$('#resText').html(html);

})

})

})

你需要做的就是将数据存储为格式正确的 .json或者.js 文件。以下为示例所传送的json格式的数据

[

{

"username": "张三",

"content": "沙发."

},

{

"username": "李四",

"content": "板凳."

},

{

"username": "王五",

"content": "地板."

}

]

php输出JSON格式

那么php如何输出json格式？php 使用json_encode函数，然后jQuery使用datatype:json 就可以了嘛? 它的输出如下：

php 使用json_encode函数，jQuery使用datatype:json的返回类型php 使用json_encode函数，jQuery使用datatype:json的返回类型

显然并非所愿。还是字符串，到底怎么实现？其实很简单，只要在php文件头部加入以下代码:

header('Content-type: text/json');

这个头就是告知此文件输出类型为 json，这种形式我们见的最多的是验证码——php输出验证图片，有时php可以输出css文件，js文件等做一些有趣的事情。好的，我们测试一下吧。查看示例

示例代码：

?php

header('Content-type: text/json');

$fruits = array (

"fruits" = array("a" = "orange", "b" = "banana", "c" = "apple"),

"numbers" = array(1, 2, 3, 4, 5, 6),

"holes" = array("first", 5 = "second", "third")

);

echo json_encode($fruits);

?

Q5: php怎么导入大量数据的excel

php导出大量数据的Excel：

PHP从数据库分多次读取100万行记录，和分多次将100万行写入文本文件都没问题

Excel可以支持100万行记录，Excel 2003最大支持65536行，从2007版开始支持104万行了，目前2007的盗版应该比较普及了-_-! 问清楚客户是什么版本。

要导出excel的理由是非常充分和正确的，应该继续坚持。业务人员最熟悉的就是Excel，实在不熟悉现学现用也比别的快。只是要注意，当数据量达到10万行这个级别时，Excel的公式填充将会非常非常慢，如果再有LOOKUP()公式，基本上十分钟内处理CPU满载进程管理器杀不掉的状态，这时候其实xampp + phpmyadmin是一个易用性和性能都最平衡的选择

PHPExcel输出的是Excel XML格式，有个XML头和尾，中间是数据Body，需要将100万行都赋值给一个数组才可以调用PHPExcel-write()，这容易导致PHP执行超时或者内存超限，不妨调整一下php.ini配置，把超时时间和内存限制都改到很大

如果是输出csv格式，那就太简单了，你的问题可能是没给字段内容加引号，加上引号再调用fputcsv试试？其实fputcsv做的事情特别简单，你甚至可以不管它，自己把CSV文件的每一行拼接好了之后用file_put_contents写入

关于php大数据写入文件和php 大数据的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。