如何通过 php 抓取在社交媒体网站上搜索用户名

Question

主要问题

我想要一个input 元素，我可以在其中输入user name，当我按下回车键时，php 的后端script 应该在不同的social media sites 上搜索该名称并给我结果与 name 匹配。

我的客户要求我为他提供这样的功能，以便当他搜索不同的用户names 时，他应该从网站上获得一些结果像 social media sites 或可能是other。

我觉得好像scraping 网站上的一些信息，可能我是wrong。

我为我的网站编写了以下脚本来抓取它。

<?php   



$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, 'https://example.com/');
curl_setopt($ch, CURLOPT_POST, false);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);

$html = curl_exec($ch);
curl_close($ch);

$DOM = new DOMDocument;

libxml_use_internal_errors(true);
$DOM->loadHTML($html);

$elements = $DOM->getElementsByTagName('a');


foreach ($elements as $element) {

    echo "<div style = 'margin-left:10px;'>".$element->nodeValue.'</div><br>';
    
}

?>

我在该页面上得到了所有anchors 的结果。

如何在social media 网站上搜索specific names？

有没有api等，如果有，请给我你宝贵的回复，如果no那么让我知道alternative在这个任务中取得成功，因为它真的很重要 em> 并且需要完成。

我不知道是不是legal，所以请原谅我。

请帮忙，提前谢谢。

Answer 1

长答案 首先你需要购买谷歌搜索API Google Search API

它将为您提供 json 数据作为链接和其他详细信息

现在你可能有一个类似这样的网络链接数组

$socialMedia = array('facebook.com','twitter.com','lnkedin.com');

现在有了 Google 提供给您的结果，您需要找到 $socialMedia 数组中的所有链接。

之后，您需要创建对链接的 curl 请求并从该网页中提取信息，例如 姓名 地点 图片 年龄 等等

那么这个信息将是一个类似属性的数组，只需将这个多dy数组提供给客户端

你需要知道的事情 多卷曲功能 这么多ip的

这么多 ips 因为如果社交媒体网站看到您向该网站发出如此多的请求，他们会暂时限制您的服务器 IP，或者可能会永久限制，所以如果您在每个请求上切换 ip，就可以了。

对于 scraping，我建议使用开源 php 库 Php Scraping Library

这样你就可以达到你想要的结果

编辑

不要试图抓取谷歌搜索，你会在一分钟内被列入黑名单，然后你需要为谷歌上的所有搜索填写验证码一周，一个月不知道谷歌算法是如何工作的，但这是一场噩梦。