Не работает

Вопрос по задаче

Архивный

Никак не пойму почему, но Elements elements имеет размер 0, пробовал через селект, но результат такой же, менял ссылки, пробовал без стринг формата, просто по ссылке выбрать и результат такой же(

Запусти снова программу в дебаг моде.
Скопируй полученное значение document.html() в созданный ранее html файл.
Отформатируй его и найди теги с вакансиями.

Почитай в Сообществе дополнительный материал к лекции про селекторы атрибута.

ВНИМАНИЕ: ОСОБЕННОСТИ ТЕСТИРОВАНИЯ!
HTML код странички ХэдХантера может меняться, чтобы эта задача продолжила работать стабильно не меняя тесты воспользуйся закешированной версией https://javarush.com/testdata/big28data.html
Это только для этого пункта, в следующих заданиях используй реальные страницы.

1. В классе HHStrategy создай protected метод Document getDocument(String searchString, int page) throws IOException.

2. Реализуй следующую логику метода getVacancies в классе HHStrategy:
2.1. Подключись к закешированной страничке ХэдХантера используя метод getDocument, нумерация начинается с 0.
2.2. Получи список элементов с атрибутом по имени "data-qa" и значением "vacancy-serp__vacancy". Должно быть до 20 вакансий на странице.
2.3. Если данные в списке из п.2.2 есть, то для каждого элемента:
2.3.1. создать вакансию и заполнить все ее данные, получив данные из текущего элемента.
Если тег с зарплатой присутствует, то заполнить и поле salary, иначе инициализировать поле пустой строкой.
site и url нужно взять из атрибута со значением "vacancy-serp__vacancy-title".
2.4. Выполнить п.2.1-2.3 для следующей страницы ХэдХантера.
2.5. Если закончились страницы с вакансиями, то выйти из цикла.

Исключения игнорировать.
Все вакансии добавить в общий список и вернуть в качестве результата метода.

Подсказка по зарплате:
Поиграйся с URL_FORMAT, добавь туда еще один параметр, чтобы получить вакансии с зарплатами.
Проанализируй полученный html и найди тег для зарплаты.
Не забудь потом вернуть значение URL_FORMAT обратно.

Требования:

В классе HHStrategy создай protected метод getDocument(String searchString, int page). Перенеси туда логику по получению объекта html-страницы Document.
Метод getVacancies класса HHStrategy должен получать содержимое страниц с помощью метода getDocument. Начни с 0 страницы.
Из объекта Document получи список html-элементов с атрибутом по имени "data-qa" и значением "vacancy-serp__vacancy". Для каждого элемента создай объект вакансии и добавь его в возвращающий методом список.
Нужно последовательно обработать все страницы результатов поиска. Как только страницы с вакансиями закончатся, прерви цикл и верни список найденных вакансий.
У каждой вакансии должно быть заполнено поле title полученными из html-элемента данными о названии вакансии.
У каждой вакансии должно быть заполнено поле url полученной из html-элемента ссылкой на вакансию.
У каждой вакансии должно быть заполнено поле city полученными из html-элемента данными о городе.
У каждой вакансии должно быть заполнено поле companyName полученными из html-элемента данными о компании.
У каждой вакансии должно быть заполнено поле siteName значением сайта, на котором вакансия была найдена.
Поле salary у вакансии должно быть заполнено, если в html-элементе присутствовал тег с зарплатой. Иначе поле должно быть инициализировано пустой строкой.
Если ты менял значение поля URL_FORMAT, не забудь вернуть его обратно.

package com.javarush.task.task28.task2810; import com.javarush.task.task28.task2810.model.HHStrategy; import com.javarush.task.task28.task2810.model.Provider; import java.io.IOException; public class Aggregator { public static void main(String[] args) throws IOException { Provider provider = new Provider(new HHStrategy()); Controller controller = new Controller(provider); controller.scan(); } }

Комментарии (9)

популярные
новые
старые

Для того, чтобы оставить комментарий Вы должны авторизоваться

Sergey

Уровень 41

16 мая 2020, 10:00

1. Document doc, необходимо объявить до начала цикла 2. vacancy.setSiteName(URL_FORMAT); 3. не спрашивайте почему...

--------

Уровень 40

Master

10 апреля 2018, 08:26

Elements elements = doc.getElementsByAttributeValue("data_qa","vacancy-serp__vacancy");
vacancy.setUrl(element.getElementsByAttributeValue("data-qa", "vacancy-serp__vacancy-title").attr("href"));

Подозреваю, что дело в этом

phisikist Middle Java Engineer

10 апреля 2018, 11:13

А что с первой строкой не так? Во второй ведь надо вставлять наш урл, с которого парсим сайт?(это я уже вернул)

--------

Уровень 40

Master

10 апреля 2018, 11:48

Дело не в строках как таковых, а в правильности написания атрибутов, которые в этих строках используются)) Специально скопировал две строчки, в одной из которых правильное написание

phisikist Middle Java Engineer

10 апреля 2018, 11:50

вот же блин) А я уже ещё раз через селект переписал и так же написал атрибуты)

phisikist Middle Java Engineer

10 апреля 2018, 11:54

Исправил, но всё равно в конце толко 0-ки(не находит елементы)

public List<Vacancy> getVacancies(String searchString){
        List<Vacancy> vacancies = new ArrayList<>();
        int pageNumber =1;
        while (true) {
            try {
                Document doc = getDocument(searchString, pageNumber);
                Elements elements = doc.getElementsByAttributeValue("data-qa","vacancy-serp__vacancy");
                System.out.println(elements.size());
                if(elements.isEmpty()) break;
                for(Element element:
                            elements){
                    Vacancy vacancy = new Vacancy();
                    Element title = element.getElementsByAttributeValue("data-qa","vacancy-serp__vacancy-title").first();
                    vacancy.setTitle(title.data());

                    Element salary = element.getElementsByAttributeValue("data-qa", "vacancy-serp__vacancy-compensation").first();
                    vacancy.setSalary(salary!=null?salary.text():"");

                    Element city = element.getElementsByAttributeValue("data-qa","vacancy-serp__vacancy-address").first();
                    vacancy.setCity(city.text());

                    Element companyName = element.getElementsByAttributeValue("data-qa","vacancy-serp__vacancy-employer").first();
                    vacancy.setCompanyName(companyName!=null?companyName.text():"");

                    //vacancy.setUrl(element.getElementsByAttributeValue("data-qa", "vacancy-serp__vacancy-title").attr("href"));
                    vacancy.setUrl(String.format(URL_FORMAT,searchString,pageNumber));
                    vacancy.setSiteName(doc.title());

                    vacancies.add(vacancy); }  } catch (IOException e) {
                e.printStackTrace();
                System.out.println("EEEEEEEEERRRRRRRRROOOOOOORRRR");
            }
            pageNumber++;
        }
        return vacancies;

Евгения

Уровень 40

9 июня 2018, 15:05

у меня валидатор не принимал title, я сделала вот так: vacancy.setTitle(title.text()); и плюс добавила проверку document на null. Возможно, будет актуально кому-то.

wo0denstars

Уровень 14

10 апреля 2018, 08:26

Я только на 6 уровень перешёл. Почему мне уведомление по задаче 8 уровня пришло? "Студент JavaRush задал вопрос "Что не так с кодом?" по задаче, которую вы уже решили." JavaRush алё?

Pavlo Plynko Java-разработчик в CodeGym

Expert

10 апреля 2018, 11:55

Вопрос "Что не так с кодом?" это вродь по задаче 4-го уровня, а не 8-го.