luoganttcc

摘要： from pyspark import SparkContext ,SparkConfconf=SparkConf().setAppName("miniProject").setMaster("local[4]")#conf=SparkConf().setA... 阅读全文

posted @ 2019-03-07 22:28 luoganttcc 阅读(764) 评论(0) 推荐(0)

摘要： from pyspark import SparkContext ,SparkConfconf=SparkConf().setAppName("miniProject").setMaster("local[4]")#conf=SparkConf().setA... 阅读全文

posted @ 2019-03-07 22:14 luoganttcc 阅读(2412) 评论(0) 推荐(0)

摘要： 1：载mysql-connector 放入 jars下2：在spark-env.sh中配置EXTRA_SPARK_CLASSPATH环境变量3:export SPARK_CLASSPATH=/opt/spark/spark-2.4.0-bin-hadoop... 阅读全文

posted @ 2019-03-07 09:44 luoganttcc 阅读(565) 评论(0) 推荐(0)

摘要： import happybase#连接connection = happybase.Connection('localhost')connection.open()创建一个tableconnection.create_table( 'my_table'... 阅读全文

posted @ 2019-03-06 16:45 luoganttcc 阅读(178) 评论(0) 推荐(0)

摘要：文档链接#切换到spark安装目录,执行下面一条命令,192.168.0.10是master的ip,examples/src/main/python/pi.py 是python 文件的路径./bin/spark-submit --master spark:... 阅读全文

posted @ 2019-03-06 09:31 luoganttcc 阅读(424) 评论(0) 推荐(0)

摘要： conda upgrade --all添加链接描述阅读全文

posted @ 2019-03-05 17:51 luoganttcc 阅读(678) 评论(0) 推荐(0)

摘要：添加链接描述阅读全文

posted @ 2019-03-05 16:07 luoganttcc 阅读(1522) 评论(0) 推荐(0)

摘要： [root@localhost root]# echo > /var/log/wtmp //此文件默认打开时乱码，可查到ip等信息[root@localhost root]# last //此时即查不到用户登录信息清除登陆系统失败的记录[root@local... 阅读全文

posted @ 2019-03-04 15:53 luoganttcc 阅读(326) 评论(0) 推荐(1)

摘要： #db.insert({'name':'lg'})#db.update({'name':'lg'}, {'$set': {'content':"tt",'name':'luoganttcc','son':'cc'}}) 阅读全文

posted @ 2019-02-28 16:35 luoganttcc 阅读(102) 评论(0) 推荐(0)

摘要：安装与检查crontabcrontab -e这里一切都用绝对路径，即你用那个目录下的python 运行哪个目录下的文件用安装在/home/lg/anaconda3/bin/　下的python　运行 /home/lg/的test.py*/1 * * * * /... 阅读全文

posted @ 2019-02-26 16:22 luoganttcc 阅读(108) 评论(0) 推荐(0)