KotlinでJSoupを使ってスクレイピングしてみる

2023年5月20日公開
2023年5月20日

IntelliJ IDEAでJSoupを使ってみる。

全くやったことがないので導入だけのメモになる。

プログラム

コードは以下の通り。

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;


fun main(args: Array<String>) {

    val url = "https://suzulang.com/"
    val doc = Jsoup.connect(url).get();

    println(doc.title());  // タイトル取得

    // divの内容をリストで取得
    val divs = doc.select("div");
    for(div in divs){

        // div に子要素があればその内容をループ
        if( div.children().size > 0 ){

            // pの一覧を取得
            val paragraphs = div.children().select("p");
            for(p in paragraphs){

                println(p.text()); // pの内容を表示

            }
        }
    }
}