Go语言Colly爬虫:如何将eBay商品标题与价格同栏打印?
解决Colly爬虫中商品标题与价格无法对应输出的问题
问题核心在于你分别监听了标题和价格的独立选择器,两个回调函数各自触发输出,导致信息无法配对。正确的做法是定位到每个商品的父容器,在父容器的回调中同时提取该商品的标题和价格,确保信息一一对应。
修改后的代码
package main import ( "fmt" "github.com/gocolly/colly" ) func main() { c := colly.NewCollector(colly.UserAgent("Mozilla/5.0 (X11; Linux x86_64; rv:108.0) Gecko/20100101 Firefox/108.0")) // 监听每个商品的父容器.s-item,确保处理单个商品的完整信息 c.OnHTML(".s-item", func(element *colly.HTMLElement) { // 在父容器内提取标题和价格 title := element.ChildText(".s-item__title") price := element.ChildText(".s-item__price") // 过滤掉顶部的"Shop on eBay"等无效条目 if title != "" && price != "" && title != "Shop on eBay" { // 格式化输出,标题和价格同行显示 fmt.Printf("标题: %s | 价格: %s\n", title, price) } }) c.Visit("https://www.ebay.com/sch/i.html?_from=R40&_nkw=iPhone&_sacat=0&_pgn=1") }
关键说明
- 父容器选择器:
.s-item是eBay页面中每个商品条目的根元素,监听它可以确保每次回调处理的是单个商品的所有信息,避免标题和价格错位。 - 子元素提取:使用
element.ChildText()在父元素范围内查找子元素,保证获取的标题和价格属于同一个商品。 - 过滤无效内容:页面顶部可能存在非商品的
.s-item元素(如"Shop on eBay"),添加判断可以过滤这些无效条目。 - 格式化输出:用
fmt.Printf替代fmt.Println,可以灵活控制输出格式,将标题和价格放在同一行。
内容的提问来源于stack exchange,提问作者goggins
相关产品推荐
相关产品推荐

