Извлечь поле мета-описания с помощью goquery
Я использую пакет goquery для извлечения фрагментов информации с веб-страницы. Пожалуйста, смотрите мой код ниже. Результат после запуска функции:
Description field: text/html; charset=iso-8859-15
Description field: width=device-width
Description field: THIS IS THE TEXT I WANT TO EXTRACT
Я почти на месте, однако я хочу получить только метаполе, где имя == "описание". К сожалению, я не могу понять, как добавить это дополнительное условие в мой код.
func ExampleScrapeDescription() {
htmlCode :=
`<!doctype html>
<html lang="NL">
<head>
<meta http-equiv="content-type" content="text/html; charset=iso-8859-15">
<meta name="viewport" content="width=device-width">
<meta name="description" content="THIS IS THE TEXT I WANT TO EXTRACT">
<title>page title</title>
</head>
<body class="fixedHeader">
page body
</body>
</html>`
doc, err := goquery.NewDocumentFromReader(strings.NewReader((htmlCode)))
if err != nil {
log.Fatal(err)
}
doc.Find("meta").Each(func(i int, s *goquery.Selection) {
description, _ := s.Attr("content")
fmt.Printf("Description field: %s\n", description)
})
}
2 ответа
Решение
Просто изучите ценность name
атрибут, соответствует ли он "description"
:
doc.Find("meta").Each(func(i int, s *goquery.Selection) {
if name, _ := s.Attr("name"); name == "description" {
description, _ := s.Attr("content")
fmt.Printf("Description field: %s\n", description)
}
})
Вы можете сравнить значение name
атрибут без учета регистра, для этого вы можете использовать strings.EqualFold()
:
if name, _ := s.Attr("name"); strings.EqualFold(name, "description") {
// proceed to extract and use the content of description
}
attr, _ := doc.Find("meta[name='description']").Attr("content")