php - 抓取网站并获取表格数据

标签 php regex xpath web-crawler

我进行了搜索,并查看了许多关于stackoverflow的示例,但仍然无法使其正常工作。

我想抓取一个网站来获取我的运动俱乐部的排名表。

我的问题是我无法从表中获取“ tr”内容。一开始我使用REGEX,但是后来我读到人们不推荐使用REGEX,所以现在我使用XPath,但无法使用它。

我要抓取的页面是:http://resultater.dai-sport.dk/tms/Turneringer-og-resultater/Pulje-Stilling.aspx?PuljeId=104

我现在拥有的代码是:

$doc = new DOMDocument();
$doc->loadHTMLFile("http://resultater.dai-sport.dk/tms/Turneringer-og-resultater/Pulje-Stilling.aspx?PuljeId=104"); // or you could load from a string using loadHTML();
$xpath = new DOMXpath($doc);
$elements = $xpath->query("/table/thead/tbody/tr");

print_r($elements);


我得到的结果是:DOMNodeList对象([length] => 0)

我完全错了吗?

最佳答案

正如@PeeHaa注意到的那样,tbody标记不在thead标记内(按常规代码)。但是,源代码中没有tbody标记,则可以使用:

$elements = $xpath->query("//table/tr");


要从网站提取数据,您可以使用以下方法:

$elements = $xpath->query("//table/tr[contains(@class,'sr')]");

$keys = array('nb', 'hold', 'k', 'v', 'u', 't', 'scoreA', 'scoreB', 'p');

foreach ($elements as $elt) {
    $results[] = array_combine($keys,
     preg_split('~^\s++|\s++$|\h*+\R\s*+-?\s*+~', $elt->textContent, null, 1)
    );
}
echo '<pre>' . print_r($results, true);


另一种方法是使用preg_match()并描述textContent的结构。第二个链接的示例:

$pattern = <<<'LOD'
~
(?<kampnr>     [0-9]++                    ) \s++
(?<dato>       [0-9]{2}-[0-9]{2}-[0-9]{2} ) \s++
(?>
    kl\. \s++
    (?<kl> [0-9]{2}:[0-9]{2} ) \s++
)?
(?<hjemmehold> .+?                        ) \h*+ \R \s++
(?<udehold>    .+?                        ) \h*+ \R \s++
(?<spillA>     .+?                        ) \h*+ \R \s++
(?<spillB>     .+?                        ) \h*+ \R \s++
(?>
    (?<resultatA> [0-9]++    ) \s*+ - \s*+
    (?<resultatB> [0-9]++    ) 
)? 
~xu
LOD;

foreach ($elements as $elt) {
    if (preg_match($pattern, $elt->textContent, $match)) {
        foreach($match as $k=>$v) {
            if (is_numeric($k)) unset($match[$k]);
        }
        $result[] = $match;
    }                
}
echo '<pre>' . print_r($result, true);

关于php - 抓取网站并获取表格数据,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19881324/

相关文章:

php - 拉维尔/流明 : Could not establish Memcached connection

php - Zend Form 如何对这样的元素进行分组?

regex - 如何检查正则表达式的相关性?

java - 解析嵌套在其他 XML 值中的 XML 标记

java - 用 xpath 替换对象列表中的值?

php - 无法使用 mkdir 创建文件夹

mysql - 正则表达式不适用于单/双引号

python - 如何创建包含变量和注释的正则表达式?

基于 Java 的 JSON 操作

php - wamp中如何一次导入所有数据库