idea使用
月笼纱lhz
专业能力需要刻意练习!
展开
-
idea中 spark 工程项目单元测试
场景:大数据项目数据规模大,验证代码不可能拿实际项目数据跑,因此为了验证代码功能正确性,就可以利用造数或简单案例数据编写验证代码即单元测试。 1、导入包 import org.junit.Test 2、@Test 3、assert语句 assert(condition) or assert(condition,StringMessage) 4、示例代码 class InvalidHandlerTest extends TestBase { /** * 测试场景:根据目标列过滤掉无效原创 2021-11-12 10:43:08 · 1903 阅读 · 0 评论 -
idea 利用maven创建spark项目
1、file--new project 进入如下页面 点击next, 2、进入如下页面 Name:填入项目名称 Location:对应项目文件地址 GroupId、ArtifactId,随意,会在pom文件中见到 Version:默认,会在pom文件中见到 点击 finish, 3、进入如下页面,需要配置pom文件,添加依赖 4、pom文件增加代码 <inceptionYear>2008</inceptionYear> <pr.原创 2021-11-04 18:13:40 · 1720 阅读 · 0 评论 -
spark工程隐藏代码运行info信息,只显示error信息
1、创建resources文件夹 file--project structure,进入如下页面 在main文件夹下new folder,创建resources文件夹,并点击“Resources" 2、resources文件夹下添加log4j.properties文件,文件内容如下 log4j.rootCategory=ERROR, console log4j.appender.console=org.apache.log4j.ConsoleAppender log4j.appende...原创 2021-11-04 17:29:22 · 314 阅读 · 0 评论