-
0 votesanswersviews
TYPO3 Extbase构建自己的Sitemap
TER中有很多针对TYPO3的站点 Map 生成器 . 但是它们都不能处理由Extbase创建的站点，这些站点未显示在TYPO3页面树中 . Edit 感谢biesior，详细信息：非常规我在TypoScript中切换了我的Extbase扩展的GET参数[globalVar = GP:tx_myextension_articlelisting|article > 0]显示所选页面的文章 . ... -
0 votesanswersviews
rails xml.builder缺少模板错误
错误：模板丢失 缺少模板杂项/站点 Map ，应用程序/站点 Map {：locale => [：en]，：formats => [：xml]，：handlers => [：erb，：builder]} . 搜索：“/ Users / yliu / Google Drive / ruby projects / Blog / lenswish / app / views”“/usr... -
6 votesanswersviews
在robots.txt中列出站点 Map 和站点 Map 索引文件？
我的网站由3个主要部分组成：评论，论坛和博客 . 我有论坛和博客的插件，可以自动为他们生成站点 Map . 论坛插件生成指向多个索引的站点 Map INDEX文件，博客插件生成包含我所有博客内容的常规站点 Map 文件 . 以下是robots.txt中的条目： Sitemap: http://www.datesphere.com/forum/sitemap-index.xml Sitemap: ... -
1 votesanswersviews
禁止从robots.txt获取谷歌机器人并列出站点 Map
我使用付费地理定位脚本将用户定向到基于国家/地区的特定网站 . 但是，由于机器人不断抓取我的大型网站的每一页，我收取了很多费用 . 如果我在robots.txt中禁止使用google并在robots.txt中提供站点 Map ，谷歌仍会将我的网页编入索引而不会抓取？ 例 User-agent: * Disallow: / Sitemap: sitemap.xml -
1 votesanswersviews
Mediawiki Sitemap网址受robots.txt限制
我在我的网站上安装了mediawiki，如下所示： www.mysite.com/w/index.php 我使用短网址方法将网址更改为 mysite.com/wiki 之后，我将其放在robots.txt中以禁止机器人关注链接到 /w/ ： # prevent spiders from indexing non-article pages User-agent: * Disallow: /w/ ... -
34 votesanswersviews
多个站点 Map ：robots.txt中的条目？
我一直在搜索谷歌，但我找不到这个问题的答案 . robots.txt文件可以包含以下行： Sitemap: http://www.mysite.com/sitemapindex.xml 但是是否可以在robots.txt中指定多个站点 Map 索引文件并让搜索引擎识别并抓取每个站点 Map 索引文件中引用的所有站点 Map ？例如，这会工作： Sitemap: http://www.mysite... -
1 votesanswersviews
Google Sitemap和Robots.txt问题
我们在我们的网站上有一个站点 Map ，http://www.gamezebo.com/sitemap.xml 站点 Map 中的部分网址在网站管理员中心报告为被我们的robots.txt阻止，请参阅，gamezebo.com/robots.txt！虽然这些网址在Robots.txt中不被禁止 . 还有其他这样的网址，例如，gamezebo.com/gamelinks存在于我们的站点 Map 中，... -
1 votesanswersviews
Google 'Sitemap contains urls which are blocked by robots.txt'警告
问题是，带有 Disallow: / 的白名单robots.txt与Google无法正常工作 . Google在限制robots.txt规则方面存在问题： User-agent: * Host: sitename Allow: /$ Allow: /sitemap.xml Allow: /static/ Allow: /articles/ Disallow: / Disallow: /static... -
0 votesanswersviews
如何限制Apache Nutch 2.3.1来抓取故事内容而不是侧边栏
我必须爬一些新闻网站 . 我已经使用Hadoop 2.7.4和Hbase集群设置了Apache Nache 2.3.1 . 我必须通过solr 6.6.1提供搜索 . 在抓取一些网站后，我发现Nutch抓取了页面中的所有内容 . 在新闻网站中，有侧栏包含最新或最新消息等 . 这些侧边栏内容随时间而变化 . 有没有办法让Nutch抓取主要故事内容并避免这样的边栏 . -
11 votesanswersviews
为何使用Google Sitemap？
我在几个网站上玩过Google Sitemaps . lastmod，changefreq和priority参数在理论上非常酷 . 但在实践中我没有看到这些参数影响很大 . 我的大多数网站都没有Google Sitemap，而且效果很好 . Google仍会抓取该网站并找到我的所有网页 . 当您不希望索引页面（或目录）时，旧的元机器人和robots.txt机制仍然有效 . 而我只是将其他所有页... -
0 votesanswersviews
robots.txt . 禁止我的test子目录中的所有内容
我在mysite.com上有一个主网站 . 我创建了mysite.com的副本并安装了wordpress：“mysite.com/test” 但最近，我刚刚发现谷歌索引我的测试也是如此 . 我的站点 Map 包含指向测试站点的链接 . 我的robots.txt： User-agent: * Disallow: /site/wp-admin/ Disallow: /site/wp-includes/... -
0 votesanswersviews
重定向的URl未在Yoast Sitemap中更新
我有一个Wordpress网站，它使用Yoast SEO插件自动为我的网站生成Sitemaps . 我们有很多博客 . 我通过编写nginx重写规则将一些博客URL（如https://example.com/blog/535）更改为https://example.com/blog/ . 但是当在Yoast SEO xml文件中检查时，发现旧的URL没有更新到新的URL . 谁能遇到同样的问题？我已... -
1 votesanswersviews
seo问题：我的博客sitemap.xml应该在哪里
我们在主网址的子目录中有一个博客 . http://www.domain.com/blog/ 该博客由wordpress运行，我们使用Google Sitemap生成器来创建XML文件 . 我们在主sitemap.xml中有一个所有站点 Map 的索引，这会导致许多站点 Map . 从SEO的角度来看，最好直接链接到博客目录下的站点 Map ：例如http://www.domian.com/b... -
0 votesanswersviews
通过Yoast更改站点 Map xml网址的WordPress SEO
我想在seo yoast插件中更改sitemap xml的url . 来自：http://example.com/sitemap_index.xml 至：http://example.com/sitemap-something-unique-aqw65643.xml 我确切知道如何使用重写规则来改变它，但我的问题是我不知道这是否安全 . 有没有人能解释我会有什么不好的影响？ -
0 votesanswersviews
在1个域下构建2个wordpress安装的站点 Map
我在主域下有2个wordpress安装 . www.example.com --1st wordpress安装 www.example.com/blog --2nd wordpress install 在wordpress中生成站点 Map 以将我的网站提交给谷歌的最佳方式是什么，这样设置没有站点 Map 冲突和SEO惩罚？ 我使用yoast插件，不介意使用其他插件生成站点 Map . 我担心的... -
0 votesanswersviews
如何在web.sitemap中传递动态多个参数？
我有一个页面像（test.aspx）现在我想在站点 Map 中设置其URL和 Headers ，但问题是同一页面（test.aspx）从多于两个地方或链接调用 . 现在我想设置具有多个动态生成的查询字符串的 Headers 和URL . 但是它不允许我设置具有不同 Headers 的动态参数的多个URL . 假设，如果test.aspx从两个地方调用： 首页>产品>测试（Test.... -
-1 votesanswersviews
在我的谷歌索引页面中显示IP地址而不是域名[暂停]
Ip address of my website is visible Instead of my domain name.I recently used fetch as Google and few web pages were indexed.U can see it in the image.Please provide ur valuable suggestions and soluti... -
1 votesanswersviews
Yoast seo和qtranslate x
我正在使用Yoast SEO插件为Qtanslate X的WordPress网站生成站点 Map . 我已经安装了Yoast SEO与Qtranslate的插件集成 . 站点 Map 是作为每种语言的单独xml文件创建的 . 请让我知道它会导致搜索引擎中的重复内容问题 .（要么）我们应该为同一个sitemap.xml中的所有其他语言创建一个rel = "alternate"和... -
0 votesanswersviews
使用XrmToolBox编辑Dynamics 365 SiteMap
我正在尝试在Dynamics 365在线实例上编辑SiteMap . 为此，我使用了XrmToolBox . 这是它的样子： 我想添加一个新的AREA，你可以在底部看到（新区域）但没有出现 . 由于销售和客户服务应用程序之间的明确分离，我现在也很难理解SiteMap如何工作 . 好像有两个站点 Map . 我想在HELP瓷砖旁边的SALES部分展示新的AREA . 提前致谢 ！ -
1 votesanswersviews
避免在Google中重复搜索页面
我有一个网站搜索它有4个下拉菜单 . 这些下拉中的每一个都会重定向回相关页面，但使用url参数告诉它如何对结果进行排序 . 第一个下拉列表有13个选项，其他三个下拉列表各有4个选项 . 当然谷歌看到了重复的内容，并为它吃了我的搜索引擎优化 . 由于包含13个选项的下拉列表是一个类别排序器，所以我已经能够将重复的内容放下一点，因此我使用它来更改每个页面上的 Headers 以帮助停止整个重复的内容，... -
-1 votesanswersviews
谷歌索引如何运作？ [关闭]
我最近在网上上传了一个joomla网站 . 我使用谷歌网站管理员，我上传了站点 Map ，我使用joomla的xmap组件 . 这发生在大约4天前，现在我收到了提交：12索引：11在网站管理员 . 我发现在谷歌搜索的是，如果我复制并粘贴我的网站（或子菜单项）的网址，它将被找到 . 但是使用关键字，甚至复制和粘贴 Headers ，根本找不到我的网站 . 我读到了在网络上抓取的谷歌蜘蛛，但我不确定我... -
1 votesanswersviews
如果在robots.txt中不允许使用API，则会抓取google抓取或索引
我希望googlebot将动态添加到我的站点 Map 的网址编入索引 . 我添加的网址是用于 Profiles （ example.com/username ），博客等...我使用反应路由器进行服务器端渲染，一些组件对 api.example.com/... 进行 api 调用 . 阅读有关抓取和 robots.txt 的文档后 . 我理解googlebot在抓取页面时向链接发出请求 . 因此，服... -
168 votesanswersviews
可以在robots.txt中使用相对站点 Map 网址吗？
在robots.txt中，我可以为站点 Map 文件编写以下相对URL吗？ sitemap: /sitemap.ashx 或者我必须使用站点 Map 文件的完整（绝对）URL，例如： sitemap: http://subdomain.domain.com/sitemap.ashx 为什么我想知道： 我拥有一个新的博客服务www.domain.com，允许用户在accountname.do... -
0 votesanswersviews
子文件夹中的站点 Map
我在根域上有一个Wordpress站点（单页），在我的博客的子文件夹上有另一个Wordpress站点 . 根域上的单个页面不链接到子文件夹中的博客，也不是我想要的 . 问题是，我应该有2个站点 Map ，一个在根文件夹中，一个在博客子文件夹中吗？如果我只需要根域中的一个，我该如何确保博客子文件夹包含在根站点 Map 中？ 我是否应该在Google网站管理员工具中单独显示根网址和博客子文件夹网址？ ... -
1 votesanswersviews
Magento：未在产品Sitemap中显示的产品（catalog / seo_sitemap / product /）
好吧，我们无法让产品显示在产品站点 Map 中，默认情况下在magento（http://sitename.com/catalog/seo_sitemap/product/）处可用 . 我们在app / design / frontendbase / default / template / catalog / seo / sitemap.phtml中提供了以下代码 <?php /** *...