Scala User Group

12 Dec 2023 14:02

Если ничо не сработает есть опасный конфиг spark.driver.userClassPathFirst

Scala User Group

12 Dec 2023 13:59

Почему нет + зависимости; сам спарк на кернел зависит

Scala User Group

12 Dec 2023 13:53

Там пол проекта на 2.9, я умру пока всё в другую сторону исправлю..

Scala User Group

12 Dec 2023 13:52

Звучит геморно, но будет круто если сработает. Может есть у кого нибудь пример такой штуки?

Scala User Group

12 Dec 2023 13:50

Пишут что есть такая проблема: https://github.com/typelevel/cats/issues/3628

Scala User Group

12 Dec 2023 13:49

а спарк вроде от котов никогда не зависел

Scala User Group

12 Dec 2023 13:40

Но конкрентно эту либу которая использует этот класс я могу выпилить (парсинг аргументов monovore.decline) но у меня стойкое подозрение что оно всё равно упадёт где нибудь потом так как у нас Коты 2.9 используются

Scala User Group

12 Dec 2023 13:38

У меня всё падает с
Caused by: java.lang.NoSuchMethodError: cats.kernel.CommutativeSemigroup.$init$(Lcats/kernel/CommutativeSemigroup;)V

Так как спарк 3.2.1 хочет Котов 2.1.1...

Scala User Group

11 Dec 2023 11:42

в пятой редакции книги от Одерски наконец нашел решение, без shabang:

@main def m() =
println("Hello, world, from a script!")

Scala User Group

10 Dec 2023 20:46

вроде все так и сделал и на маке (scala3) и на линуксе (2) и права дал
скала в path присутствует,
path в шабан в начале явно даже прописал (как gpt предложил)
И на маке и на линукс ошибка одна и таже

В репле кстати без проблем работает…

Лан пошёл java учить, хотя одерски обещал что можно и без неё

Scala User Group

10 Dec 2023 19:50

Только нужно чтоб scala бинарник был в path:

 $ which scala
/usr/bin/scala

Scala User Group

10 Dec 2023 19:39

Всем привет
Я новичок в изучении скалы открыл учебник одерски главу про запуск скала скриптов

Что-то я в тупике не пойму как можно и можно ли запустить просто
println (“hello”)
без компиляции?
Пробовал 2 способа
1) способ из учебника через добавление Шабанг в начало файла -> не помог пишет что illegal объявление
2) способ из реддита флаг -nc после вызова scala -> bad parameter пишет и тоже нелегальное объявление

Другой момент решил хотя бы через компиляцию запустить hello world
для этого
нашел свой полугодовой давности учебный проект который по видео курсу того же одерски делал, там вроде вся иерархия нужная есть, создал там в src этот скрипт, но не помню как компилировать!!
А чтобы пойти гуглить мне нужно понять сбт или металс я пользовал - не помню. в проекте и металс папка есть и сбт. Как во всем этом разобраться?

Scala User Group

10 Dec 2023 17:08

да, похоже, что скала просто игнорирует тайп-параметры у аннотаций

Scala User Group

09 Dec 2023 23:19

можете привести точный код в гисте?

Scala User Group

09 Dec 2023 11:23

ну и конечно autoScalaLibrary := false

Scala User Group

12 Dec 2023 14:00

если нет, то можно просто завести новый модуль X со спарком, добавить туда зависимость от нужного модуля Y с котами, но заэксклюдить самих котов
но если планируется использовать какой-то код из Y, который использует котов, то может сломаться

Scala User Group

12 Dec 2023 13:58

а код со спарком будет использовать какой-то код с котами?

Scala User Group

12 Dec 2023 13:52

используйте котов 2.1.1)

Scala User Group

12 Dec 2023 13:50

То есть можно sbt-assembly с Sbt-Native-Packager использовать?

Scala User Group

12 Dec 2023 13:49

там что то другое у вас

Scala User Group

12 Dec 2023 13:46

одно другому не мешает

Scala User Group

12 Dec 2023 13:38

Шейдинг тоже не вариант потому что мы используем Sbt-native-packager а не Sbt-assembly

Scala User Group

12 Dec 2023 13:35

Привет! Ребята, кто знает можно ли завести Spark 3.x имея в зависимостях Котов 2.9.х?

Scala User Group

10 Dec 2023 20:51

посмотрите на https://scala-cli.virtuslab.org/

Scala User Group

10 Dec 2023 19:54

Но вообще это абсолютно бесполезно. Стартовать jvm ради скрипта можно ради что ради смеха.
Хотите запустить scala код (с main методом) - положите файл в отдельную папку и выполните в этой папке sbt run.

Scala User Group

10 Dec 2023 19:49

 $ chmod a+x script.scala 
 $ ./script.scala
Hello World!
 $ cat script.scala
#!/usr/bin/env scala

println("Hello World!")

Scala User Group

10 Dec 2023 17:46

похоже что еще и только у макро аннотаций, у обычных статик анноташек не пускает

Scala User Group

09 Dec 2023 23:29

https://gist.github.com/ZERDICORP/ff7cb3d6098c2bd6d2c38e3015384d50

Scala User Group

09 Dec 2023 23:10

Привет, подскажите, пчм это компилится?

[macros.scala]:

class macros[T] extends StaticAnnotation

@macro[
    String,
    Double,
    Etc
]
class Test

Scala User Group

09 Dec 2023 11:22

возможно, но нужно очень сильно захотеть и ВСЁ притянуть вручную (intransitive())
https://github.com/danslapman/sbt-source-jar-dependency/blob/master/build.sbt