博客首页 | 我的好库
程序员博客

统计信息

  • 博客 - 315
  • 随笔 - 4823
  • 评论 - 16802

C# XmlTextReader与XDocument的选择

如果文档内容不大,允许所有内容读入内存,推荐使用XDocument,LINQ to XML是非常棒的。 如果需要以流的方式处理大型XML文件,可以使用XmlReader(例如XmlTextReader),处理大型文档时只需要占用少量内存。还有一种混合方法: 如果你有一个由小元素组成的巨大文档,你可以在元素的开头从XmlReader定位处创建XElement,使用L......

好饱 发布于 2019-9-1 9:30:00 阅读(530) 评论(0)

Java实例——基于jsoup的简单爬虫添加代理示例

  import java.io.IOException; import java.net.Authenticator; import java.net.InetSocketAddress; ......

yiniuyun 发布于 2019-5-8 17:17:00 阅读(1529) 评论(0)

php爬虫程序添加代理ip示例

  ?php // 要访问的目标页面 $url = "http://httpbin.org/ip"......

yiniuyun 发布于 2019-4-25 17:06:00 阅读(306) 评论(0)

爬虫过程中加上这些策略让你采集效率更高

  我们都知道在采集数据过程中,尤其是爬取大量数据的时候,很多网站都有反爬虫措施,封ip是很严重的,,让你在采集的时候很心烦。本文就如何解决这个问题总结出一些应对措施,这些措施可以单独使用,也可以同时使用,效果更好。 ......

yiniuyun 发布于 2019-4-3 16:19:00 阅读(253) 评论(0)

java B2B2C Springcloud电子商务平台源码-eureka集群整合config配置中心

eureka集群-整合config配置中心 需要JAVA Spring Cloud大型企业分布式微服务云构建的B2B2C电子商务平台源码 一零三八七七四六二六 加入依赖    ......

iteye01 发布于 2019-4-3 15:32:00 阅读(175) 评论(0)

java B2B2C源码电子商务平台 -commonservice-config配置服务搭建

Spring Cloud Config为分布式系统中的外部配置提供服务器和客户端支持。使用Config Server,您可以在所有环境中管理应用程序的外部属性。客户端和服务器上的概念映射与Spring Environment和PropertySource抽象相同,因此它们与Spring应用程序非常契合,但可以与任何以任何语言运行的应用程序一起使用。随着应用程序通过从开发人员到测试和生产的部署......

iteye01 发布于 2019-4-3 15:31:00 阅读(219) 评论(0)

Selenium程序中亿牛云爬虫代理信息配置

      from selenium import webdriver     import string   &nb......

yiniuyun 发布于 2019-3-15 16:22:00 阅读(309) 评论(0)

目标网站反爬虫很严要怎么解决?

  一 前言 在网站的采集过程中,每天都要面对网站的各种反爬虫技术,然而我们要想拿到数据,就需要针对性的制定很多方法来突破他们的反爬。例如......

yiniuyun 发布于 2019-3-12 16:44:00 阅读(221) 评论(0)

.net开发小节:权限管理

.net开发小节:权限管理 ......

learun 发布于 2019-3-6 16:50:00 阅读(221) 评论(0)

爬虫程序加了动态代理为什么还是会被封ip

  虽然动态代理ip是数据采集过程中必不可少的,但是使用了动态切换ip,并不表示就一定不封ip.因为网站的反爬不仅仅是ip策略,还有cookie、ua甚至js统计分析等,这些都需要针对网站进行一些分析处理,否则只有ip就能将网站都采集下来,那么爬虫程序也就没啥难度了,事实上越是有价值的网......

yiniuyun 发布于 2019-3-5 16:00:00 阅读(284) 评论(1)

目标网站反爬虫很严要怎么解决?

  一 前言 在网站的采集过程中,每天都要面对网站的各种反爬虫技术,然而我们要想拿到数据,就需要针对性的制定很多方法来突破他们的反爬。例如......

yiniuyun 发布于 2019-2-27 16:51:00 阅读(286) 评论(0)

目标网站反爬虫很严要怎么解决?

  一 前言 在网站的采集过程中,每天都要面对网站的各种反爬虫技术,然而我们要想拿到数据,就需要针对性的制定很多方法来突破他们的反爬。例如......

yiniuyun 发布于 2019-2-27 16:47:00 阅读(248) 评论(1)

实践出真知-C Sharp中集成ip代理(以亿牛云爬虫代理为例)

    一、前言 公司最近新增了一个项目需要爬取航空信息数据,对方有ip屏蔽。所以我需要在C Sharp......

yiniuyun 发布于 2019-2-21 17:04:00 阅读(319) 评论(1)

java B2B2C Springcloud电子商务平台源码-Ribbon 基本使用

具体内容 现在所有的服务已经通过了 Eureka 进行了注册,那么使用 Eureka 注册的目的是希望所有的服务都统一归属到 Eureka 之中进 行处理,但是现在的问题,所有的微服务汇集到了 Eureka 之中,而客户端的调用也应该通过 Eureka 完成。而这种调用就可以利用 Ribbon 技术来实现。需要JAVA Spring Cloud大型企业分布式微服务云构建的B2......

iteye01 发布于 2019-2-15 14:02:00 阅读(190) 评论(0)

java B2B2C Springcloud多租户电子商城系统-高可用的服务注册中心

一、准备工作Eureka can be made even more resilient and available by running multiple instances and asking them to register with each other. In fact, this is the default behaviour, so all you need t......

iteye01 发布于 2019-1-30 10:37:00 阅读(330) 评论(0)

java B2B2C 仿淘宝电子商城系统-Spring Cloud构建分布式电子商务平台

通过Spring Cloud构建PC+微信+APP+云服务的云商平台系统,其中包括B2B、B2C、C2C、O2O、新零售、直播电商等子平台,之前我们讲了很多关于Spring Cloud的概念文章,从本节开始,我们会以分布式微服务电子商务平台为案例,逐步给大家讲解如何构建完整的电子商务云平台。需要JAVA Spring Cloud大型企业分布式微服务云构建的B2B2C电子商务平台源码 一零三八......

iteye01 发布于 2019-1-30 10:36:00 阅读(262) 评论(0)

JAVA ssm b2b2c多用户商城系统源码-搭建eureka

创建项目即普通创建即可创建完毕之后需要将原先的pom文件跟改一下作为父项目使用需要JAVA Spring Cloud大型企业分布式微服务云构建的B2B2C电子商务平台源码 一零三八七七四六二六 pom代码  <properti......

iteye01 发布于 2019-1-30 10:35:00 阅读(300) 评论(0)

java B2B2C源码电子商务平台 -Spring Cloud Stream同一通道根据消息内容分发不同的消费逻辑

有的时候,我们对于同一通道中的消息处理,会通过判断头信息或者消息内容来做一些差异化处理,比如:可能在消息头信息中带入消息版本号,然后通过if判断来执行不同的处理逻辑,其代码结构可能是这样的:需要JAVA Spring Cloud大型企业分布式微服务云构建的B2B2C电子商务平台源码 一零三八七七四六二六&nb......

iteye01 发布于 2019-1-30 10:34:00 阅读(256) 评论(0)

java B2B2C Springcloud电子商务平台源码-RIBBON 核心设计和原理分析

Ribbon, Netflix 公司开源的用于进程通信场景的经过实战检验的客户端项目。它提供了远程调用的负载均衡,网络状态检查和容错等功能。Ribbon 基于软件的负载均衡方式与目标集群中的机器进行通信。这里忽略状态统计部分,健康检查的逻辑部分,重点分析负载均衡部分。 需要JAVA Spring Cloud大型企业分布式微服务云构建的B2B2C电子商务平台源码 一零三八七七四......

iteye01 发布于 2019-1-29 10:49:00 阅读(247) 评论(0)

java B2B2C Springcloud电子商城系统-Spring Cloud学习

SpringCloud是什么? 需要JAVA Spring Cloud大型企业分布式微服务云构建的B2B2C电子商务平台源码 一零三八七七四六二六 Spring Cloud是一个微服务框架,相比Dubbo等RPC框架, Spring Cloud提供的全套的分布式系统解决方案。 ......

iteye01 发布于 2019-1-29 10:48:00 阅读(272) 评论(0)
1 2 3 4 5 6 7 8 ... 下一页共194页  到第