掌握Scala编程技巧:读书笔记0522精华分享

版权申诉
0 下载量 136 浏览量 更新于2024-10-08 收藏 119KB ZIP 举报
资源摘要信息:"Scala是一种多范式的编程语言,设计初衷是要集成面向对象编程和函数式编程的各种特性。它建立在Java虚拟机(JVM)之上,因此可以与Java无缝交互。Scala的语法简洁,可以和现有的Java代码很好的共存,同时引入了大量现代编程语言特性,包括模式匹配、类型推断、表达式函数等。Scala语言自2003年发布以来,逐渐成为了大数据处理、并发编程和函数式编程领域的热门语言,尤其是在Apache Spark、Akka等框架的推动下,Scala的影响力日益增强。 本压缩包文件包含的是关于Scala编程的学习笔记,笔记内容围绕着5月22日的学习内容。其中可能包含以下几个方面的知识点: 1. Scala基础语法:Scala语言的基本语法结构,包括变量声明、控制结构、函数定义、类和对象的使用等。 2. 函数式编程概念:Scala语言的核心特性之一是函数式编程。笔记中可能涵盖了函数式编程的基本概念,如无副作用、不可变性、高阶函数、柯里化、偏应用函数等。 3. 面向对象编程特性:虽然Scala是函数式编程语言,但它也支持面向对象编程(OOP)。面向对象的特性包括类和对象的定义、继承、多态、特质(trait)、case类等。 4. 集合操作:Scala集合框架提供了丰富的API来操作数据集合。学习笔记可能介绍了如何使用Scala的集合类型,如List、Set、Map等,并涵盖了迭代器、生成器等集合操作工具。 5. 并发编程:Scala的并发模型支持函数式编程风格,利用actor模型来处理并发。在笔记中可能包含对Scala中的actor系统,Future和Promise,以及并发控制和同步机制的介绍。 6. 高级特性:Scala的高级特性,例如模式匹配、隐式转换、类型推断等,可能会在深入学习Scala的过程中被详细讨论。 7. 与Java的互操作性:由于Scala可以运行在JVM上,因此与Java有很好的互操作性。相关的学习笔记可能包括如何在Scala代码中使用Java的类库和框架,反之亦然。 8. 实际应用示例:除了理论知识,笔记中可能还包含一些实际的应用案例,如如何使用Scala开发Web应用、数据分析、集成工具等。 9. Scala社区和生态系统:Scala有一个活跃的开发者社区,笔记中可能介绍了Scala社区的资源,如重要的框架、库、开发工具以及开源项目等。 由于提供的文件名称是“读书笔记:scala0522是Scala编程内容.zip”,我们可以推断这是一个关于Scala编程的学习资料压缩包,可能包含有上述提到的Scala学习笔记、代码示例、练习题以及可能的参考资料。学习这样的内容对于想深入理解Scala或开始使用Scala进行开发的开发者是非常有帮助的。 需要注意的是,虽然本资源的描述中并没有提供具体的标签,但根据标题和文件名的描述,我们可以推断出这个压缩包是关于Scala编程的学习笔记,因此标签可能包括:‘Scala’, ‘编程语言’, ‘函数式编程’, ‘面向对象编程’, ‘并发编程’, ‘JVM’, ‘大数据’, ‘Akka’, ‘Spark’等。"

Exception in thread "main" java.lang.RuntimeException: java.lang.NoSuchFieldException: DEFAULT_TINY_CACHE_SIZE at org.apache.spark.network.util.NettyUtils.getPrivateStaticField(NettyUtils.java:131) at org.apache.spark.network.util.NettyUtils.createPooledByteBufAllocator(NettyUtils.java:118) at org.apache.spark.network.server.TransportServer.init(TransportServer.java:95) at org.apache.spark.network.server.TransportServer.<init>(TransportServer.java:74) at org.apache.spark.network.TransportContext.createServer(TransportContext.java:114) at org.apache.spark.rpc.netty.NettyRpcEnv.startServer(NettyRpcEnv.scala:118) at org.apache.spark.rpc.netty.NettyRpcEnvFactory$$anonfun$4.apply(NettyRpcEnv.scala:454) at org.apache.spark.rpc.netty.NettyRpcEnvFactory$$anonfun$4.apply(NettyRpcEnv.scala:453) at org.apache.spark.util.Utils$$anonfun$startServiceOnPort$1.apply$mcVI$sp(Utils.scala:2237) at scala.collection.immutable.Range.foreach$mVc$sp(Range.scala:160) at org.apache.spark.util.Utils$.startServiceOnPort(Utils.scala:2229) at org.apache.spark.rpc.netty.NettyRpcEnvFactory.create(NettyRpcEnv.scala:458) at org.apache.spark.rpc.RpcEnv$.create(RpcEnv.scala:56) at org.apache.spark.SparkEnv$.create(SparkEnv.scala:246) at org.apache.spark.SparkEnv$.createDriverEnv(SparkEnv.scala:175) at org.apache.spark.SparkContext.createSparkEnv(SparkContext.scala:257) at org.apache.spark.SparkContext.<init>(SparkContext.scala:432) at org.apache.spark.SparkContext$.getOrCreate(SparkContext.scala:2509) at org.apache.spark.sql.SparkSession$Builder$$anonfun$6.apply(SparkSession.scala:909) at org.apache.spark.sql.SparkSession$Builder$$anonfun$6.apply(SparkSession.scala:901) at scala.Option.getOrElse(Option.scala:121) at org.apache.spark.sql.SparkSession$Builder.getOrCreate(SparkSession.scala:901) at com.cssl.scala720.KafkaSparkStreamingHBase$.main(KafkaSparkStreamingHBase.scala:28) at com.cssl.scala720.KafkaSparkStreamingHBase.main(KafkaSparkStreamingHBase.scala) Caused by: java.lang.NoSuchFieldException: DEFAULT_TINY_CACHE_SIZE at java.lang.Class.getDeclaredField(Class.java:2070) at org.apache.spark.network.util.NettyUtils.getPrivateStaticField(NettyUtils.java:127) ... 23 more Process finished with exit code 1

2023-07-24 上传

报错Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties 23/06/01 20:24:22 INFO SparkContext: Running Spark version 2.0.0 Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/commons/collections/map/UnmodifiableMap at org.apache.hadoop.conf.Configuration$DeprecationContext.<init>(Configuration.java:409) at org.apache.hadoop.conf.Configuration.<clinit>(Configuration.java:448) at org.apache.hadoop.security.UserGroupInformation.ensureInitialized(UserGroupInformation.java:260) at org.apache.hadoop.security.UserGroupInformation.loginUserFromSubject(UserGroupInformation.java:790) at org.apache.hadoop.security.UserGroupInformation.getLoginUser(UserGroupInformation.java:760) at org.apache.hadoop.security.UserGroupInformation.getCurrentUser(UserGroupInformation.java:633) at org.apache.spark.util.Utils$$anonfun$getCurrentUserName$1.apply(Utils.scala:2245) at org.apache.spark.util.Utils$$anonfun$getCurrentUserName$1.apply(Utils.scala:2245) at scala.Option.getOrElse(Option.scala:121) at org.apache.spark.util.Utils$.getCurrentUserName(Utils.scala:2245) at org.apache.spark.SparkContext.<init>(SparkContext.scala:297) at org.apache.spark.SparkContext$.getOrCreate(SparkContext.scala:2256) at org.apache.spark.sql.SparkSession$Builder$$anonfun$8.apply(SparkSession.scala:831) at org.apache.spark.sql.SparkSession$Builder$$anonfun$8.apply(SparkSession.scala:823) at scala.Option.getOrElse(Option.scala:121) at org.apache.spark.sql.SparkSession$Builder.getOrCreate(SparkSession.scala:823) at spark.sparkMysql$.main(sparkToMysql.scala:11) at spark.sparkMysql.main(sparkToMysql.scala) Caused by: java.lang.ClassNotFoundException: org.apache.commons.collections.map.UnmodifiableMap at java.net.URLClassLoader.findClass(URLClassLoader.java:382) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:349) at java.lang.ClassLoader.loadClass(ClassLoader.java:357) ... 18 more Process finished with exi

2023-06-02 上传