从电子商务到列表网站再到房地产和无数垂直行业，您可以通过爬虫工具使用自定义提取来利用的数据值得他们收入的一部分。借助触手可及的更精细数据，您可以发现 CRO 和 UX 见解，这些见解可以为您的优化和转变客户体验提供信息。
在本周的白板星期五，我们很高兴地欢迎 Luke Carthy 分享他最近在 MozCon 2019 演讲中的智慧，Killer CROs and UX Wins Using SEO Crawlers。
视频转录
嘿莫兹。这是怎么回事？哇，我能说我现在在西雅图写白板真是不可思议吗？我迫不及待地想与您分享这些有趣的东西。非常感谢你加入我。
我叫卢克·凯西。你可能会说，我来自英国，我想和你谈谈自定义提取，尤其是在电子商务领域。但是，我会说这在许多垂直领域也很有效，房地产也在工作清单上。事实上，几乎所有可以在网络爬虫中吐出 HTML 的网站都可以使用自定义提取。
什么是自定义提取？
让我们开始吧。什么是自定义提取？好吧，正如我所暗示的，它允许您爬取它并提取 HTML 的特定部分，并在您使用 Screaming Frog 或 DeepCrawl 或任何您想使用的文件、CSV 或其他任何东西进行爬行时将其导出到 Excel你喜欢。
作为原则，ok ，这很好，但我将向您提供一些非常好的示例，说明您如何真正利用它。所以，电子商务，这里我们有精美的产品页面，可以提取红色的所有内容。虽然，正如我所说，页面上的任何内容都可以。这些只是一些很好的例子。
产品信息+页面效果
稍微考虑一下。你是一个电子商务网站，你是一个列表网站，你当然有列表页面，你有产品页面。如果您可以快速、大规模地了解您所有产品的定价、是否有库存、是否有图片、是否有描述、有多少条评论以及该评论的总分是多少，会怎样？4星级，5 星，随便什么？
这真的很强大，因为你可以开始根据它所拥有的信息、流量、转化、客户反馈和各种好东西来了解一个伟大页面的性能，所有这些都使用你自己的定义提取并将其输出到 CSV 或 Excel 电子表格文件中。
竞争洞察
但是当它变得强大并且您从中获得了很多见解时，就该开始将目光转向您的竞争对手并思考如何获得这些真正的见解了。你可能有三个竞争对手。你可能有一些有抱负的竞争对手。你可能有一个你不一定要与之竞争的网站，但你每天都在使用它们，或者你很欣赏他们的网站易于使用，所以你可以走开去做。
你可以做一个爬行，你没有理由不能从其他竞争对手那里提取相同的信息，看看发生了什么，看看竞争对手的售价是多少，有没有库存，什么是评论 那么，人们有哪些常见问题解答，您可以在自己的内容中加以利用？
如何从电子商务中的自定义提取中收集见解的示例
示例 1：竞争对手没有库存的产品的价格上涨
让我给你一个完美的例子来说明我是如何使用它的。
我设法确定竞争对手没有特定产品的库存，因此我能够提高价格，因为他们没有出售。我们在那个特定的时间做了，我们可以确定价格点，事实上他们没有库存，这太棒了。想一想。真正强大的洞察力。
示例2：改进类别页面的分面和过滤器
我想和你谈谈另一个例子。类别页面，加上令人难以置信的华丽插图。所以类别页面，我们有过滤器，我们有类别页面，只是为了稍微改变一下，我还有一个列表页面，所以，正如我所说，它是房地产、工作还是那个环境中的任何东西。
如果考虑再参赛，那么你没有理由不能通过自定义提取提取人们使用的最好的过滤器，他们最喜欢的过滤器，人们喜欢选择和理解的最重要的方面。通过这种方式，您可以查看您是否在站点上使用相同类型的功能和方面的组合，并可能对此进行改进。
同样，您随后可以开始了解哪些特定功能与销售、绩效和影响相关，并真正开始改善网站在客户绩效和行为方面的绩效。这同样适用于两种环境。
如果您是一个列表网站，并且您列出了职位，或者您列出了产品或分类广告，它们是排名靠前的过滤器吗？有时间？有意见吗？是分数吗？您可以跨多个域抓取许多竞争对手并确定是否存在模式，查看主题，看看您是否可以利用它并更好地使用它。这是使用它的好方法。
示例 3：建议、建议和优化
但最重要的是，到目前为止，我最着迷的是一些建议。
在之前的 MozCon 演讲中，我有一个统计数据，我认为我还记得。人们在亚马逊上购买的内容中有 35% 来自推荐，而人们在 Netflix 上观看的内容中有 75% 来自推荐和建议。
想想这有多厉害。你可以爬取你自己的网站，大规模地了解你的推荐，确定这些推荐有多少库存，它们的价格是多少，如果它们有图片，以什么顺序，然后你就可以开始描绘人们的生动图片与您的项目关联的产品。您可以在全球范围内执行此操作。您可以抓取整个投资组合或列出投资组合并获取它。
不过，回到In强大的情报，你的竞争对手，尤其是当你的竞争对手可能有多方面或多元的建议时。我的意思是，我们都见过您的网站有多个轮播。因此，您已经为您推荐了它。
您可能有另一个“也买了”的建议。推荐类型越多，数据越多，情报越丰富，洞察力越强。回到房地产的例子，你可能正在看这里的房地产。价格。您可能不知道的主要理想房地产竞争对手向您推荐了哪些？
然后你可以考虑是否关注位置、价格、卧室数量等，然后你就可以开始理解和表达它是如何运作的，并从中获得真正强大的洞察力。
自定义抽取都是针对大规模数据
综上所述，自定义抽取都是针对大规模粒度数据。真正强大的是，您可以自己完成所有这些工作，因此无需召开会议、发送详尽的电子邮件或获得他人的许可。
启动 Screaming Frog，启动 DeepCrawl，启动您想要使用的任何类型的爬虫，检查自定义提取，并学习如何使您的业务更有效率，学习如何获得一些非常酷的竞争洞察力，是的，希望，这对你们有用。非常感谢。
奖励资源：
- 使用 XPath 和正则表达式 Screaming Frog 自定义提取的完整指南
- Screaming Frog 中的自定义提取：XPath 和 CSSPath
- 如何使用正则表达式进行 SEO 和网站数据提取
通过 Speechpad.com 进行视频转录
我们知道，这是一个有内容的谈话 - 如果您在周五享受了这个白板并发现自己渴望了解更多，您很幸运！ Luke 在 MozCon 2019 的完整演讲更深入地介绍了自定义提取可以为您做什么。在 MozCon 视频包中，我们的演讲嘉宾与您分享了他的演讲以及其他 26 个有远见、前瞻性的主题：
立即参加会议！
我们建议与您的团队分享和传播学习热情。喜欢看！
