Refactor with coroutine

Author: apqx

.idea/compiler.xml

@@ -1,21 +1,22 @@
 # SinaBlogPicDownloader
 
-获取新浪博客照片原图的下载器，根据博文URL解析出文章中所有缩略图对应的原图地址，批量下载。
+新浪博客文章原图的下载器，根据文章`URL`解析出文中所有缩略图对应的原图地址，批量下载，支持同时下载多个文章`URL`。
 
 参见[我的这篇文章](https://apqx.me/post/original/2021/12/12/关于-编程-的一件小事.html)。
 
 # 使用方式
 
-解压`SinaBlogPicDownloader-*.*.*.zip`，根据所使用的操作系统双击`SinaBlogPicDownloader`或`SinaBlogPicDownloader.bat`即可启动命令行程序。
+解压`SinaBlogPicDownloader-*.*.*.zip`，根据所使用的操作系统双击`SinaBlogPicDownloader`或`SinaBlogPicDownloader.bat`即可启动命令行程序，遵循提示输入文章URL。
 
-程序使用`Kotlin`编写，目标运行环境`JRE 17`，在`Windows`、`macOS`、`Linux`平台的`JVM`上均可运行。
+或手动编译执行：
 
-支持2种下载模式，下载目录为`[user]/Downlaod/SinaDownload/`。
+```sh
+# 工程根目录下执行
+./gradlew run
+```
 
-## 模式1
+下载目录为`[user]/Downlaod/SinaDownload/`。
 
-根据文章`URL`下载，自动解析`URL`并下载博文中所有的图片原图。 
+# 运行环境
 
-## 模式2 
-
-根据缩略图下载，把想要的缩略图从浏览器拖到`[user]/Downlaod/SinaThumb/`中，执行此程序即可下载原图。
+程序使用`Kotlin`编写，目标运行环境`JRE 21`，在`Windows`、`macOS`、`Linux`平台的`JVM`上均可运行。

.idea/misc.xml

@@ -1,18 +1,27 @@
 plugins {
-    id ("org.jetbrains.kotlin.jvm") version "1.9.20" apply true
+    kotlin ("jvm") version "1.9.20" apply true
+    id("io.ktor.plugin") version "2.3.9" apply true
     application
-
 }
 
 group = "me.mudan"
 version = "1.0.0"
 
 dependencies {
+    implementation("io.ktor:ktor-client-okhttp-jvm:2.3.9")
     // 直接访问buildSrc中的kotlin代码
     testImplementation("org.junit.jupiter:junit-jupiter-api:5.8.1")
     testRuntimeOnly("org.junit.jupiter:junit-jupiter-engine:5.8.1")
     implementation("org.jetbrains.kotlin:kotlin-stdlib:1.9.20")
     implementation("org.jsoup:jsoup:1.15.3")
+    implementation("ch.qos.logback:logback-classic:1.5.3")
+    val ktorVersion = "2.3.9"
+    // ktor使用的HTTP引擎
+    implementation("io.ktor:ktor-client-okhttp:$ktorVersion")
+    // ktor实现的核心代码
+    implementation("io.ktor:ktor-client-core:$ktorVersion")
+    // ktor的日志插件
+    implementation("io.ktor:ktor-client-logging:$ktorVersion")
 }
 
 tasks.getByName<Test>("test") {
@@ -21,16 +30,12 @@ tasks.getByName<Test>("test") {
 
 java {
     toolchain {
-        languageVersion = JavaLanguageVersion.of(17)
+        languageVersion = JavaLanguageVersion.of(21)
     }
 }
 
-tasks.compileKotlin {
-    kotlinOptions.jvmTarget = "17"
-}
-
-tasks.compileTestKotlin {
-    kotlinOptions.jvmTarget = "17"
+kotlin {
+    jvmToolchain(21)
 }
 
 application {

README.md

@@ -1,5 +1,5 @@
 distributionBase=GRADLE_USER_HOME
 distributionPath=wrapper/dists
-distributionUrl=https\://mirrors.cloud.tencent.com/gradle/gradle-8.4-bin.zip
+distributionUrl=https\://mirrors.cloud.tencent.com/gradle/gradle-8.5-bin.zip
 zipStoreBase=GRADLE_USER_HOME
 zipStorePath=wrapper/dists

build.gradle.kts

@@ -1,20 +1,17 @@
 pluginManagement {
     repositories {
-        maven("https://maven.aliyun.com/repository/gradle-plugin")
-        maven("https://maven.aliyun.com/repository/central")
-        maven("https://maven.aliyun.com/repository/google")
+        // central+jcenter+google
+        maven("https://mirrors.cloud.tencent.com/nexus/repository/maven-public")
         gradlePluginPortal()
         mavenCentral()
         google()
     }
 }
-
 dependencyResolutionManagement {
     repositoriesMode.set(RepositoriesMode.FAIL_ON_PROJECT_REPOS)
-
     repositories {
-        maven("https://maven.aliyun.com/repository/central")
-        maven("https://maven.aliyun.com/repository/google")
+        // central+jcenter+google
+        maven("https://mirrors.cloud.tencent.com/nexus/repository/maven-public")
         mavenCentral()
         google()
     }

gradle/wrapper/gradle-wrapper.properties

@@ -1,62 +1,30 @@
 package me.mudan.sina
 
-import me.mudan.sina.parser.ThumbParser
-import me.mudan.sina.parser.URLParser
+import me.mudan.sina.download.download
+import me.mudan.sina.tools.LogUtil
+import me.mudan.sina.tools.getImgIdListFromUrl
 import java.io.*
 
 /**
- * 保存着缩略图的目录
+ * 输出目录
  */
-private val thumbDir = "${System.getProperty("user.home")}/Downloads/SinaThumb";
+private val DOWNLOAD_DIR = "${System.getProperty("user.home")}/Downloads/SinaDownload"
 
 /**
- * 下载文件的输出目录
- */
-private val outDir = "${System.getProperty("user.home")}/Downloads/SinaDownload";
-
-private val terminalReader = BufferedReader(InputStreamReader(System.`in`))
-
-/**
- * 下载新浪博客原图的工具，2种下载模式
- * 1. 根据文章URL下载，自动解析URL，下载所有博文中的图片原图
- * 2. 根据缩略图下载，把想要的缩略图从浏览器拖到[thumbDir]中，执行此程序即可下载原图
+ * 下载新浪博客原图，根据文章URL自动解析下载博文中的所有图片原图
  */
 fun main() {
-    println("sina blog picture download tools, select option, then press enter")
-    println("1. download from blog url")
-    println("2. download from thumb in $thumbDir")
-    when (terminalReader.readLine()) {
-        // 根据URL下载
-        "1" -> {
-            println("input url, split with ' ', then press enter")
-            downloadPicsByUrl(terminalReader.readLine())
-        }
-        // 根据缩略图下载
-        "2" -> {
-            downloadPicsByThumbFile(File(thumbDir))
-        }
-    }
-}
-
-private fun checkFile() {
-    val outDirFile = File(outDir)
-    if (!outDirFile.exists()) outDirFile.mkdirs()
-}
-
-/**
- * 根据提供的新浪博客文章URL，自动解析博客中的照片，执行下载
- */
-private fun downloadPicsByUrl(urls: String) {
+    LogUtil.info(
+        """
+            Sina blog picture downloader
+            Input page urls, split with ' ', then press enter
+        """.trimIndent()
+    )
     checkFile()
-    Downloader(terminalReader, URLParser(outDir).parse(urls), outDir).start()
+    download(getImgIdListFromUrl(readln().trim(), DOWNLOAD_DIR), DOWNLOAD_DIR)
 }
 
-/**
- * 根据已有的新浪博客缩略图，下载原始照片，缩略图的文件名应是照片ID
- */
-private fun downloadPicsByThumbFile(thumbDirFile: File) {
-    checkFile()
-    Downloader(terminalReader, ThumbParser().parse(thumbDirFile), outDir).start()
-}
-
-
+private fun checkFile() {
+    val dirFile = File(DOWNLOAD_DIR)
+    if (!dirFile.exists()) dirFile.mkdirs()
+}