Как я могу найти самую большую общую подстроку между двумя строками в PHP?


Существует ли быстрый алгоритм для нахождения наибольшей общей подстроки в двух strings или это неполная проблема?

В PHP я могу найти иголку в стоге сена:

<?php

if (strstr("there is a needle in a haystack", "needle")) {
    echo "found<br>\n";
}
?>

Думаю, я мог бы сделать это в цикле над одним из strings, но это было бы очень дорого! Тем более, что мое приложение для этого заключается в поиске в базе данных электронной почты и поиске спама (т. Е. Похожих писем, отправленных одним и тем же человеком).

У кого-нибудь есть какой-нибудь PHP-код, который они могут там выбросить?

Author: Mark, 2008-12-03

6 answers

Функция similar_text может быть тем, что вам нужно.

Это вычисляет сходство между двумя строками. Возвращает количество совпадающих символов в обеих строках

Возможно, вы также захотите взглянуть на Левенштейна

 10
Author: Zoredache, 2008-12-03 09:33:56

Тем более, что мое приложение для этого заключается в поиске в базе данных электронной почты и поиске спама (т.Е. Похожих писем, отправленных одним и тем же человеком).

Я думаю, вам следует изучить байесовские алгоритмы вывода нежелательной почты, не обязательно самую длинную общую подстроку.

Http://www.devshed.com/c/a/PHP/Implement-Bayesian-inference-using-PHP-Part-1/

 7
Author: Jeff Atwood, 2008-12-03 09:31:03

Я только что написал функцию, которая находит самую длинную подстроку в str1, которая существует в str2

public static function getLongestMatchingSubstring($str1, $str2)
{
    $len_1 = strlen($str1);
    $longest = '';
    for($i = 0; $i < $len_1; $i++){
        for($j = $len_1 - $i; $j > 0; $j--){
            $sub = substr($str1, $i, $j);
            if (strpos($str2, $sub) !== false && strlen($sub) > strlen($longest)){
                $longest = $sub;
                break;
            }
        }
    }
    return $longest;
}
 5
Author: zion ben yacov, 2016-12-18 02:59:18

С тех пор я нашел соответствующую статью в википедии . Это не NP-полная задача, ее можно выполнить за O(mn) времени с использованием алгоритма динамического программирования.

В PHP я нашел функцию similar_text очень полезной. Вот пример кода, позволяющий получить серию текстовых электронных писем, просмотреть их и найти те, которые на 90 % похожи друг на друга. Примечание: Что-то подобное НЕ масштабируется:

<?php
// Gather all messages by a user into two identical associative arrays
$getMsgsRes = mysql_query(SELECT * FROM email_messages WHERE from = '$someUserID');
while($msgInfo = mysql_fetch_assoc($getMsgsRes))
{
    $msgsInfo1[] = $msgInfo;
    $msgsInfo2[] = $msgInfo;
}

// Loop over msgs and compare each one to every other
foreach ($msgsInfo1 as $msg1)
    foreach ($msgsInfo2 as $msg2)
        similar_text($msg1['msgTxt'],$msg2['msgTxt'],$similarity_pst);
        if ($similarity_pst > 90)
            echo "{$msg1['msgID']} is ${similarity_pst}% to {$msg2['msgID']}\n";
?>
 3
Author: Tom, 2009-04-30 07:12:49

Опоздал на эту вечеринку, но вот способ найти самую большую общую подстроку в массиве строк:

Пример:

$array = array(
    'PTT757LP4',
    'PTT757A',
    'PCT757B',
    'PCT757LP4EV'
);
echo longest_common_substring($array); // => T757

Функция:

function longest_common_substring($words) {
    $words = array_map('strtolower', array_map('trim', $words));
    $sort_by_strlen = create_function('$a, $b', 'if (strlen($a) == strlen($b)) { return strcmp($a, $b); } return (strlen($a) < strlen($b)) ? -1 : 1;');
    usort($words, $sort_by_strlen);
    // We have to assume that each string has something in common with the first
    // string (post sort), we just need to figure out what the longest common
    // string is. If any string DOES NOT have something in common with the first
    // string, return false.
    $longest_common_substring = array();
    $shortest_string = str_split(array_shift($words));

    while (sizeof($shortest_string)) {
        array_unshift($longest_common_substring, '');
        foreach ($shortest_string as $ci => $char) {
            foreach ($words as $wi => $word) {
                if (!strstr($word, $longest_common_substring[0] . $char)) {
                    // No match
                    break 2;
                } // if
            } // foreach
            // we found the current char in each word, so add it to the first longest_common_substring element,
            // then start checking again using the next char as well
            $longest_common_substring[0].= $char;
        } // foreach
        // We've finished looping through the entire shortest_string.
        // Remove the first char and start all over. Do this until there are no more
        // chars to search on.
        array_shift($shortest_string);
    }
    // If we made it here then we've run through everything
    usort($longest_common_substring, $sort_by_strlen);
    return array_pop($longest_common_substring);
}

Я немного написал об этом в своем блоге:

 3
Author: Chris Bloom, 2017-08-10 08:27:07

Пожалуйста, взгляните на Реализацию алгоритма/Строки/Самую длинную общую подстроку в Викискнигах. Я не тестировал реализацию PHP, но, похоже, она соответствует общему алгоритму на странице Википедии.

 1
Author: Stefan Gehrig, 2008-12-03 11:30:14