随笔档案「2017年8月」 - yuerspring

Keras CNN 数字识别

摘要：难点是版本变化后方法不再匹配，同时每个方法具体意义需要揣摩# Larger CNN for the MNIST Dataset# 2.Negative dimension size caused by subtracting 5 from 1 for 'conv2... 阅读全文

posted @ 2017-08-29 20:41 yuerspring 阅读(310) 评论(0) 推荐(0)

摘要：想在windows 下，搭建一个spark kafka 的最简单的实时流计算：python 随机生成0-100 的随机数据，发送给spark 进行统计scala 2.11python 3.5java 1.8kafka_2.11-0.11.0.0.tgzzooke... 阅读全文

posted @ 2017-08-19 13:54 yuerspring 阅读(221) 评论(0) 推荐(0)

摘要：How to establish a big data platform ?http://xyz.insightdataengineering.com/blog/pipeline_map/https://blog.insightdatascience.com/the-... 阅读全文

posted @ 2017-08-16 17:36 yuerspring 阅读(172) 评论(0) 推荐(0)

摘要：要点：数据分割数据集成stringId='DMDM_SUM_FACT_PATTERN_CHANLLAGE_POC_MQT'print stringId.capitalize()stringList = stringId.split('_')stringListAfte... 阅读全文

posted @ 2017-08-10 12:10 yuerspring 阅读(381) 评论(0) 推荐(0)

最简单的python 爬虫

摘要：C:\Users\IBM_ADMIN>python -VPython 2.7.13查Python 工资的网站：http://www.jobui.com/salary/%E5%8C%97%E4%BA%AC-python%E5%B7%A5%E7%A8%8B%E5%B8%... 阅读全文

posted @ 2017-08-09 21:15 yuerspring 阅读(141) 评论(0) 推荐(0)

摘要：Unknown: DSCGetStrStageProp value (???) of property (PASSWORD) contains unmappable characters (ISO8859-1)when try to run some jobs we ... 阅读全文

posted @ 2017-08-08 15:35 yuerspring 阅读(284) 评论(0) 推荐(0)

摘要：1.Language SQL ,Python ,Shell ,Scala, Java 2.Tool or Framework(Real-time computing & offline computing)Hive,Spark(sql & streaming) ,Ha... 阅读全文

posted @ 2017-08-04 15:11 yuerspring 阅读(177) 评论(0) 推荐(0)

摘要：嚯，八月看到同事桌面上摆着一本数据仓库工具箱第三版，本博文简单讨论下数据仓库建模一般流程和建模方法（主要是结合实际经验和网络资料整合）先描述下现在项目在模型上的应用：当前业务没有某宝某东某宁等互联网公司那么复杂，不过好歹有一点借鉴意义。现在做的是一个决策支持系统，主要... 阅读全文

posted @ 2017-08-02 22:12 yuerspring 阅读(149) 评论(0) 推荐(0)

yuerspring