Pertanyaan yang diberi tag «scala»

Misalkan saya punya val dirty = List("a", "b", "a", "c") Apakah ada operasi daftar yang mengembalikan "a", "b", "c"

94 scala 

Saya ingin membuat DataFramedengan skema tertentu di Scala. Saya telah mencoba menggunakan JSON read (maksud saya membaca file kosong) tetapi menurut saya itu bukan praktik terbaik.

94 scala  apache-spark  dataframe  apache-spark-sql 

EDIT : Tulis ulang pertanyaan ini berdasarkan jawaban asli The scala.collection.immutable.Setkelas tidak kovarian dalam parameter jenisnya. Kenapa ini? import scala.collection.immutable._ def foo(s: Set[CharSequence]): Unit = { println(s) } def bar(): Unit = { val s: Set[String] = Set("Hello", "World"); foo(s); //DOES NOT COMPILE, regardless of whether type is declared //explicitly …

94 scala  set  covariance  scala-collections 

Di Scala, kita dapat menggunakan setidaknya dua metode untuk retrofit tipe yang sudah ada atau yang baru. Misalkan kita ingin menyatakan bahwa sesuatu dapat dikuantifikasi menggunakan Int. Kita dapat mendefinisikan sifat berikut. Konversi implisit trait Quantifiable{ def quantify: Int } Dan kemudian kita dapat menggunakan konversi implisit untuk mengukur misalnya …

94 scala  coding-style  implicit-conversion 

Diberikan Daftar Scala berikut: val l = List(List("a1", "b1", "c1"), List("a2", "b2", "c2"), List("a3", "b3", "c3")) Bagaimana saya bisa mendapatkan: List(("a1", "a2", "a3"), ("b1", "b2", "b3"), ("c1", "c2", "c3")) Karena zip hanya dapat digunakan untuk menggabungkan dua List, saya rasa Anda perlu mengulang / mengurangi List utama. Tidak mengherankan, hal …

94 scala  functional-programming  list  zip 

Saya membaca SIP-14 dan konsepnya Futuremasuk akal dan mudah dimengerti. Tapi punya dua pertanyaan tentang Promise: Kata SIP Depending on the implementation, it may be the case that p.future == p. Bagaimana ini bisa terjadi? Adalah Futuredan Promisetidak dua jenis yang berbeda? Kapan sebaiknya kita menggunakan Promise? producer and consumerKode …

94 scala  concurrency 

Penggunaan literal simbol tidak langsung jelas dari apa yang saya baca di Scala. Adakah yang mau berbagi beberapa kegunaan dunia nyata? Apakah ada idiom Jawa tertentu yang ditutupi oleh literal simbol? Bahasa apa yang memiliki konstruksi serupa? Saya berasal dari latar belakang Python dan tidak yakin ada analogi dalam bahasa …

93 syntax  scala 

Bagaimana cara mengonversi immutable.Mapke mutable.Mapdalam Scala sehingga saya dapat memperbarui nilai di Map?

93 scala  dictionary  scala-2.8 

Saya memiliki aplikasi Spark yang berjalan tanpa masalah dalam mode lokal, tetapi mengalami beberapa masalah saat mengirimkan ke cluster Spark. Pesan kesalahannya adalah sebagai berikut: 16/06/24 15:42:06 WARN scheduler.TaskSetManager: Lost task 2.0 in stage 0.0 (TID 2, cluster-node-02): java.lang.ExceptionInInitializerError at GroupEvolutionES$$anonfun$6.apply(GroupEvolutionES.scala:579) at GroupEvolutionES$$anonfun$6.apply(GroupEvolutionES.scala:579) at scala.collection.Iterator$$anon$14.hasNext(Iterator.scala:390) at org.apache.spark.util.Utils$.getIteratorSize(Utils.scala:1595) at org.apache.spark.rdd.RDD$$anonfun$count$1.apply(RDD.scala:1157) at …

93 scala  apache-spark 

Saya mencoba untuk mengonversi semua nama header / kolom a DataFramedi Spark-Scala. sampai sekarang saya datang dengan kode berikut yang hanya menggantikan satu nama kolom. for( i <- 0 to origCols.length - 1) { df.withColumnRenamed( df.columns(i), df.columns(i).toLowerCase ); }

93 scala  apache-spark  dataframe  apache-spark-sql 

Diberikan tiga cara untuk mengekspresikan fungsi yang sama f(a) := a + 1: val f1 = (a:Int) => a + 1 def f2 = (a:Int) => a + 1 def f3:(Int => Int) = a => a + 1 Apa perbedaan definisi ini? REPL tidak menunjukkan perbedaan yang jelas: scala> …

92 scala 

Saya tidak dapat menjalankan sparkpekerjaan sederhana di Scala IDE(proyek percikan Maven) yang diinstalWindows 7 Ketergantungan inti percikan telah ditambahkan. val conf = new SparkConf().setAppName("DemoDF").setMaster("local") val sc = new SparkContext(conf) val logData = sc.textFile("File.txt") logData.count() Kesalahan: 16/02/26 18:29:33 INFO SparkContext: Created broadcast 0 from textFile at FrameDemo.scala:13 16/02/26 18:29:34 ERROR Shell: …

92 eclipse  scala  apache-spark 

Saya menggunakan SBT (dalam IntelliJ IDEA) untuk membangun proyek Scala sederhana. Saya ingin tahu cara termudah untuk membuat file Uber JAR (alias Fat JAR, Super JAR). Saya saat ini menggunakan SBT tetapi ketika saya mengirimkan file JAR saya ke Apache Spark, saya mendapatkan kesalahan berikut: Pengecualian di thread "main" java.lang.SecurityException: …

92 scala  intellij-idea  sbt  meta-inf  uberjar 

Salah satu pola paling kuat yang tersedia di Scala adalah pola perkaya-pustaka-saya *, yang menggunakan konversi implisit agar tampak menambahkan metode ke kelas yang ada tanpa memerlukan resolusi metode dinamis. Misalnya, jika kita ingin semua string memiliki metode spacesyang menghitung berapa banyak karakter spasi yang mereka miliki, kita dapat: class …

92 scala  collections  enrich-my-library 

Saya mencoba membuat EnumListFielddi Lift / Record / Squeryl, mirip dengan MappedEnumListdi LiftMapper. Jenis penyimpanan harus Long / BIGINT. Saya memahami bahwa jika saya mendefinisikan: def classOfPersistentField = classOf[Long] Kemudian Squeryl akan tahu bahwa ia harus membuat kolom BESAR. Dan saya tahu itu digunakan setFromAny()untuk menetapkan nilai, meneruskan Long. Satu …

92 scala  lift  record  squeryl