用Scala和Play WS库来编写一个爬虫程序

我会用Scala和play ws库来编写一个爬虫程序，用于爬取新浪新闻网站的内容。以下是代码：

```scala
import play.api.libs.ws._
import play.api.libs.json._
import java.net.URL
import scala.concurrent.ExecutionContext.Implicits.global
import scala.concurrent.Future

object NewsCrawler {
  def main(args: Array[String]): Unit = {
    val host = "https://news.sina.com.cn/"
    val proxyUrl = new URL("http://www.duoip.cn:8000")

    val targetUrl = host + "/news"
    val proxyHost = proxyUrl.getHost
    val proxyPort = proxyUrl.getPort

    val wsClient = WS.url(proxyUrl.toString).withProxyHost(proxyHost).withProxyPort(proxyPort)
    val responseFuture = wsClient.get(targetUrl)

    responseFuture.map { response =>
      println(response.body)
    }
  }
}
```

在这个程序中，我们首先定义了要爬取的网站的url（在这个例子中是新浪新闻网站），以及代理服务器的url和端口。然后，我们创建了一个 WS客户端，使用服务器连接到目标url。最后，我们发送一个get请求到目标URL，并打印出响应的body。请注意，这个程序使用了scala的future和play WS库，一边异步地发送请求和处理响应。同时，我们还使用了play WS库的withproxyhost和withproxyport方法，以设置服务器的主机名和端口。