从TikTok中刮取数据？

Question

因此，我正在尝试从TikTok中刮取数据，但是出了问题。有时它会返回整页，有时如下：

{"statusCode":200,"contentType":"text/html","content":""}

甚至有时还会回来

Redirecting to (tiktok url)

它从来没有真正重定向到提到的URL。

有什么方法可以让不断地刮主页吗？这是我目前的代码：

$pageurl = "https://www.tiktok.com/@".$_GET["username"];
$ch = @curl_init($pageurl);
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/42.0.2311.135 Safari/537.36 Edge/12.10240');
    
$result = curl_exec($ch);
echo $result;
curl_close($ch);

Answer 1

在使用CURL执行请求时，默认情况下不跟随重定向。为了使其遵循重定向，需要FOLLOWLOCATION设置，如下所示：

$ch = @curl_init($pageurl);
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/42.0.2311.135 Safari/537.36 Edge/12.10240');
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);

对于空响应，您可能会得到一个错误，因此您应该检查它：

if (curl_errno($ch)) {
    echo "Error: " . curl_error($ch);
}

或者只是错误在他们的末端，你应该重新尝试，直到你得到一个非空的响应。