微信现已开放小程序内搜索,为了让小程序搜索爬虫更好地发现及理解丰富的页面,我们对开发者提供了以下的小程序设计建议。
爬虫访问小程序内页面时,会携带特定的 user-agent:mpcrawler 及场景值:1129
1. 小程序里跳转的页面(url)能够直接打开,不依赖上下文状态。
小程序页面内的跳转url是我们爬虫发现页面的重要来源,且搜索引擎召回的结果页面(url)是必须能直接打开,不依赖上下文状态的。
建议页面所需的参数都包含在url里
2. 页面跳转优先采用navigator组件。
小程序提供了两种页面路由方式:
navigator 组件
路由api,包括 navigateTo、redirectTo、switchTab、navigateBack、reLaunch
若两种方式均能满足开发者需求,建议使用 navigator 组件,以便更好的被爬虫理解。
若无法使用navigator组件,建议针对爬虫的访问屏蔽针对点击设置的时间锁或变量锁。
3. 页面跳转的url参数清晰简洁。
结构清晰、简洁的url有利于爬虫的抓取及理解,如将json数据作为参数的方式是对爬虫不友好的设计。
4. 必要的时候才请求用户进行授权、登录、绑定手机号等。
建议在关键的路径上才要去用户进行授权。
5. 页面不能是web-view组件。
爬虫不会去抓取web-view组件渲染的h5页面。
6. 利用sitemap配置引导爬虫抓取,同时屏蔽无搜索价值的路径。
7. 设置一个清晰的标题和页面缩略图。
页面标题和缩略图对于搜索引擎理解页面和结果展示有重要的作用。
建议通过wx.setNavigationBarTitle 或 自定义转发内容onShareAppMessage 对页面标题、缩略图进行设置,另外video、audio组件建议设置poster属性,明确音视频封面图。
8. 使用页面路径推送能力
页面路径推送能力的使用,可提高平台对小程序页面内容的收录量,进而提高小程序内容的曝光机会。具体可参看: