Скрипт замены. Много файлов. - Форум успешных вебмастеров

lebaol · 10.11.2017, 13:09

Программист пропал куда-то, надеюсь временно. Есть задание. Похожее тз когда-то уже писал тут.

Есть 2 папки. Во первой лежит больше ляма файлов. Вроде все .html

Нужно зайти в каждый *.html файл и заменить уникалильный кусок кода (одна строчка):

</div>

на код (много строк), который берется ПО ОЧЕРЕДИ и по КРУГУ со второй папки (лежит где-то 30к файлов. Внутри каждого кусок кода с разными ссылками.)

код будет типа такого (в каждом файле ссылки разные):

<a href="1.html">1</a>
<a href="2.html">2</a>
</div>

ogogoX · 10.11.2017, 15:52

Бюджет есть?)

incognito · 10.11.2017, 17:16

PHP код:


			
<?php

set_time_limit(0);



$inDir = '_in';

$replaceDir = '_replace';

$resDir = '_out';

$replaceDataArr = $tmpArr = glob($replaceDir.'/*.*');

$replaced = '</div><!--content-->';



foreach (glob($inDir.'/*.html') as $file) {

    $data = file_get_contents($file);

    $dataReplace = file_get_contents(array_shift($tmpArr));

    if (count($tmpArr)==0) $tmpArr = $replaceDataArr;

    $data = str_replace($replaced,$dataReplace,$data);

    file_put_contents(str_replace($inDir,$resDir,$file),$data);

}

не знаю так ли будет работать как вам надо и вообще

lebaol · 10.11.2017, 19:30

Цитата:

Сообщение от incognito

PHP код:


			
<?php

set_time_limit(0);



$inDir = '_in';

$replaceDir = '_replace';

$resDir = '_out';

$replaceDataArr = $tmpArr = glob($replaceDir.'/*.*');

$replaced = '</div><!--content-->';



foreach (glob($inDir.'/*.html') as $file) {

    $data = file_get_contents($file);

    $dataReplace = file_get_contents(array_shift($tmpArr));

    if (count($tmpArr)==0) $tmpArr = $replaceDataArr;

    $data = str_replace($replaced,$dataReplace,$data);

    file_put_contents(str_replace($inDir,$resDir,$file),$data);

}

не знаю так ли будет работать как вам надо и вообще

спасибо большое, сейчас тестану =)

lebaol · 10.11.2017, 20:51

incognito, тестанул, спасибо.

просто удалило </div>
и ничего не заменило =)

incognito · 10.11.2017, 20:59

$inDir = '_in'; -- директория где лежит миллион
$replaceDir = '_replace'; -- директория где фйалы с линками
$resDir = '_out'; -- замены на миллион(создать каталог перед запуском)
1 из миллиона

PHP код:


			
<!DOCTYPE html>

<html lang="en">

<head>

    <meta charset="UTF-8">

    <title>Title</title>

</head>

<body>

<div>

</div><!--content-->

</body>

</html>

1 из 30тыс

PHP код:


			
<a href="1.html">1</a>

</div><!--content-->

на выходе

PHP код:


			
<!DOCTYPE html>

<html lang="en">

<head>

    <meta charset="UTF-8">

    <title>Title</title>

</head>

<body>

<div>

<a href="1.html">1</a>

</div><!--content-->

</body>

</html>

lebaol · 10.11.2017, 21:16

Цитата:

Сообщение от incognito

$inDir = '_in'; -- директория где лежит миллион
$replaceDir = '_replace'; -- директория где фйалы с линками
$resDir = '_out'; -- замены на миллион(создать каталог перед запуском)
1 из миллиона

PHP код:


			
<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>Title</title>
</head>
<body>
<div>
</div><!--content-->
</body>
</html>

1 из 30тыс

PHP код:


			
<a href="1.html">1</a>
</div><!--content-->

на выходе

PHP код:


			
<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>Title</title>
</head>
<body>
<div>
<a href="1.html">1</a>
</div><!--content-->
</body>
</html>

при ваших данных - все ок, хм, спасибо большое, буду разбираться, в чем трабла =)

lebaol · 15.11.2017, 17:57

при малом кол-стве файлов все супер, а так на сервере вибивает что-то типа такого:
"PHP Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 72 bytes) in /directory/test.php on line 10"

или нужно весь скрипт переделывать, чтобы обрабатывало так много файлов?

спасибо =)

веломан · 15.11.2017, 18:09

http://php.net/manual/ru/ini.core.php#ini.memory-limit
в /etc/php5/cli/php.ini пропиши там 256MB или 512MB

lebaol · 15.11.2017, 18:35

Цитата:

Сообщение от веломан

http://php.net/manual/ru/ini.core.php#ini.memory-limit
в /etc/php5/cli/php.ini пропиши там 256MB или 512MB

прописал в /etc/php.ini 512M вместо 128M - и помогло, хотя уверен был, что не поможет.

спасибо вам большое!