【问题标题】:How to implement implicit Json Writes of Future object in Play Framework 2.x如何在 Play Framework 2.x 中实现 Future 对象的隐式 Json 写入
【发布时间】:2016-05-16 10:03:17
【问题描述】:

我是游戏框架的新手,我想定期向亚马逊询问一些产品,以便将它们插入到 kafka 主题中,当我尝试编译代码时发生错误。

这是KafkaProducer的代码:

文件 example.model.AmazonProducerExample

//根据用户的建议更新方法,谢谢大家!

package example.utils

import jodd.lagarto.dom.{NodeSelector, LagartoDOMBuilder}
import example.model.AmazonProduct
import scala.collection.JavaConversions._
import scala.concurrent.ExecutionContext.Implicits.global
import scala.concurrent.Future

import play.api.libs.json._
import example.utils._
import example.producer._

object AmazonPageParser {

private val topicName = "amazonRatingsTopic"

private val producer = Producer[String](topicName)


def parse(productId: String): Future[AmazonProduct] = {

val url = s"http://www.amazon.com/dp/$productId"
HttpClient.fetchUrl(url) map {
  httpResponse =>
    if (httpResponse.getStatusCode == 200) {
      val body = httpResponse.getResponseBody
      val domBuilder = new LagartoDOMBuilder()
      val doc = domBuilder.parse(body)

      val responseUrl = httpResponse.getUri.toString
      val nodeSelector = new NodeSelector(doc)
      val title = nodeSelector.select("span#productTitle").head.getTextContent
      val img = nodeSelector.select("div#main-image-container img").head.getAttribute("src")
      val description = nodeSelector.select("div#feature-bullets").headOption.map(_.getHtml).mkString

      val amazonProduct = AmazonProduct(productId, title, responseUrl, img, description)

      println("amazonProduct is " + amazonProduct.toString)
      amazonProduct
    } else {
      println("An error happened!")
      throw new RuntimeException(s"Invalid url $url")
    }
}//map
}//parse method

def main(args: Array[String]): Unit = {

//Scala Puzzlers...
AmazonPageParser.parse("0981531679").onSuccess { case amazonProduct =>

  implicit val amazonFormat = Json.format[AmazonProduct]
  producer.send(Json.toJson(amazonProduct).toString)
  println("amazon product sent to kafka cluster..." + amazonProduct.toString)
}
}
}

文件 example.model.Models

package example.model

import play.api.libs.json.Json
import reactivemongo.bson.Macros

case class AmazonProduct(itemId: String, title: String, url: String, img: String, description: String)
case class AmazonRating(userId: String, productId: String, rating: Double)

case class AmazonProductAndRating(product: AmazonProduct, rating: AmazonRating)

// For MongoDB
object AmazonRating {
implicit val amazonRatingHandler = Macros.handler[AmazonRating]
implicit val amazonRatingFormat = Json.format[AmazonRating]
}

文件 example.utils.AmazonPageParser

编译器返回这个错误:

[error] /Users/aironman/my-recommendation-spark-engine/src/main/scala/example/producer/AmazonProducerExample.scala:25: No Json serializer found for type scala.concurrent.Future[example.model.AmazonProduct]. Try to implement an implicit Writes or Format for this type.
[error]     producer.send(Json.toJson(amazonProduct).toString)
[error]                              ^

我已阅读此post with most votes,但它对我不起作用。

有人可以帮我吗?

【问题讨论】:

  • 对于Future[T],您最好使用Writes[T],并将写入操作称为“内部”Future
  • 您好 chantep,感谢您的回答。据我了解,您指的是对 kafka 主题的写入操作将在 AmazonPageParser.parse 方法中,不是吗?但我想以一种解耦的方式拥有这个功能......
  • 您应该在未来完成后进行写入,因此使用mapflatMap 或对值进行适当操作的for-comprehension。更多关于我理解Future 的一般性问题。

标签: json scala playframework


【解决方案1】:

Writes[T] 生成 Json。你不能直接从Future 生成它而不阻塞。

但是,您可以向这个未来添加“回调”,如下所示:

amazonPageParser.parse(productId).onSuccess { case amazonProduct =>
   producer.send(Json.toJson(amazonProduct).toString)
}

或使用其他 Future 方法,例如 mapforeach

【讨论】:

  • 谢谢@Tyth 和 cchantep。我将使用解决方案更新线程
猜你喜欢
  • 2013-03-20
  • 2017-04-11
  • 2013-04-07
  • 2015-05-16
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2017-06-13
相关资源
最近更新 更多