摘要: 今天在使用spring boot的时候,导包出现了问题,通过maven导入依赖,却显示找不到依赖,换了几个版本还是不行,在多次尝试之后,发现是依赖下载的内容不完整,只有一部分数据。接下来尝试直接下载包导入进去。 阅读全文
posted @ 2020-02-20 10:27 格式化。 阅读(90) 评论(0) 推荐(0) 编辑
摘要: 昨天开始学习了爬虫的一些方法,有urliib,request和Scrapy,在爬取定位时用正则和xpath,综合比较,决定采用request和xpath的方法再次爬取图片和评论等相关的信息,也学习了代理池,在爬取时也用了代理池,防止被封ip。爬取的数据也会有些不规范,有多余空格等内容,对数据进行了初 阅读全文
posted @ 2020-02-05 19:08 格式化。 阅读(110) 评论(0) 推荐(0) 编辑
摘要: 今天进行爬取数据的时候出现了问题,我用的是selenium➕Python的方法,在爬取一些图片链接时,存放在src标签中的链接,爬取时只出现了前三个数据,其他的都是None,尝试了很多方法没有解决,现在只能换一种爬取的方法。学习了其他爬取的方法,明天开始尝试。 阅读全文
posted @ 2020-02-04 20:42 格式化。 阅读(93) 评论(0) 推荐(0) 编辑
摘要: 为了满足之后的把程序放到云平台的需求,今天就进行了云平台准备的相关工作,购买了阿里云的一个服务器,学习了关于服务器部署的 相关知识,进行了一些基本的设置,开放一些端口可以在外部连接上,也下载了一些基本的软件。确保满足之后的需求。 阅读全文
posted @ 2020-02-03 16:02 格式化。 阅读(90) 评论(0) 推荐(0) 编辑
摘要: 今天开始了python代码的实现,基于物品的协同过滤算法需要用户和商品的联系,所以还需要爬取用户的评论数据,计算商品之间的相似度,然后推荐给其他用户,所以今天进行用户评论数据的处理。 阅读全文
posted @ 2020-02-02 21:48 格式化。 阅读(89) 评论(0) 推荐(0) 编辑
摘要: 今天进行了相似推荐算法的学习。 今天比较了几个协同过滤算法,其中基于用户的算法会存在数据稀疏性:一个大型的电子商务推荐系统一般有非常多的物品,用户可能买的其中不到1%的物品,不同用户之间买的物品重叠性较低,导致算法无法找到一个用户的邻居,即偏好相似的用户和算法扩展性方面的问题,而基于物品的协同过滤算 阅读全文
posted @ 2020-02-01 18:37 格式化。 阅读(134) 评论(0) 推荐(0) 编辑
摘要: 支付宝所使用的架构分为两类三层,分别是运维平台(IAAS),技术平台(PAAS),业务平台(SAAS)。这三个平台,分别从底层,中间层和应用层提供服务。 因为双十一当天的用户数量,访问量,以及所有的数据都会是平时的几倍,所以对系统的要求也相对提高了,还要提供一套完整的备灾方案和故障恢复体系。保障系统 阅读全文
posted @ 2019-06-16 19:42 格式化。 阅读(430) 评论(0) 推荐(0) 编辑
摘要: JavaEE先涉及的就是三大框架,下面先说一下ssh. Spring:功能强大的组件粘合济,能够将你的所有的java功能模块用配置文件的方式组合起来(还让你感觉不到spring的存在)成为一个完成的应用 Struts:功能强大的MVC架构 Hibernate:强大的ORM工具,然后很方便将数据库记录 阅读全文
posted @ 2019-06-16 19:38 格式化。 阅读(235) 评论(0) 推荐(0) 编辑
摘要: Spring Cloud是一系列框架的有序集合。它利用Spring Boot的开发便利性巧妙地简化了分布式系统基础设施的开发,如服务发现注册、配置中心、消息总线、负载均衡、断路器、数据监控等,都可以用Spring Boot的开发风格做到一键启动和部署。Spring并没有重复制造轮子,它只是将目前各家 阅读全文
posted @ 2019-06-08 09:50 格式化。 阅读(182) 评论(0) 推荐(0) 编辑
摘要: 开头先介绍一下微服务的优势:实现跨团队的解藕,实现更高的并发(目前单机只能实现c10k)不用在拷贝代码,基础服务可以公用,更好的支持服务治理,能够更好的兼容云计算平台。 rpc:向调用本地方法一样调用远程函数 客户端:一般利用动态代理生成一个接口的实现类,在这个实现类里通过网络把接口名称,参数,方法 阅读全文
posted @ 2019-06-01 17:34 格式化。 阅读(464) 评论(0) 推荐(0) 编辑