Есть ли способ добавить строку кода во все файлы .html?

Ваш вопрос довольно неясен, потому что вы не указали, куда вы собираетесь добавить эту полосу? Вот отправная точка:

<?php

$path = '/path/to/html/files';
$code_to_add = '<p>This line was added by a script.</p>';

$files = scandir($path); //  get an array of all the files in the directory specified by $path.
foreach ($files as $file) { // Iterate over files
    if (substr($file, -5) == '.html') { // hecking if each file has a ".html" extension.
        $file_path = $path . '/' . $file;
        $file_contents = file_get_contents($file_path); // read the contents
        file_put_contents($file_path, $file_contents . $code_to_add); // put new content, you can modify it.
    }
}

?>

Вы можете использовать :

<?php
$folder = '/path/to/html/files';
$line_to_add = '<p>your line/p>';

foreach (glob("$folder/*.html") as $file) {
    $contents = file_get_contents($file);
    file_put_contents($file, $line_to_add . PHP_EOL . $contents);
}