python爬虫爬取网页取得html并处
import re #import urllib import urllib.request import chardet # 需要导入这个模块，检测编码格式 string = a xxxxxxxxxxxxxxxxxxxxxxxxentry 某某内容 /afor aaaaaaaaaaaaaaaaaa result = re.findall( .*entry (.*)/af.* , string) def spider (): 爬虫...
分类：python 点击：279 日期：2020-10-06
奇思妙想，工程师尝试将pythons
这名开发人员正在将python塞入微控制器目前，python是最流行的编程语言之一。它以大量的实用程序库而闻名，而且作为一种动态编程语言，Pyth...
分类：嵌入式处理器综合 点击：11 日期：2020-04-24
python 抓取淘宝商品信息并保存
python 抓取淘宝商品信息并保存到数据库或者EXCEL#! -*- coding:utf-8 -*- # 抓取商品信息并保存到数据库或者EXCEL from multiprocessing.pool import Pool import pymongo from selenium import webdriver import xlwt driver_path=r"C:\Users\Administrator...
分类：电子技术 点击：23 日期：2020-04-04
pytyon 保存到execl 【python】
pytyon 保存到execldef save_to_excel(): 63 f_name = '淘宝%s数据'%KEYWORD 64 book = xlwt.Workbook(encoding='utf-8',style_compression=0) 65 sheet = book.add_sheet(f_name) 66 sheet.write(0, 0, 'title') 67 sheet.write(0, 1, 'price') 68 sheet.wri...
分类：电子技术 点击：13 日期：2020-04-04
解析源码，得到目标信息 【pytho
解析源码，得到目标信息 45 def parse_html(html,*args): 46 if not args: 47 pattern = re.compile(r'g_page_config = (.*?)g_srp_loadCss',re.S) 48 # 去掉末尾的';' 49 result = re.findall(pattern, html)[0].strip()[:-1] 50 # 格式化json，可以用json在...
分类：电子技术 点击：14 日期：2020-04-04
发送http请求，获取网页源码 【p
发送http请求，获取网页源码 30 def get_html(url,*args): 31 try: 32 if not args: 33 response = requests.get(url,headers=HEADERS) 34 global COOKIES 35 COOKIES = response.cookies # 获取cookie 36 else: 37 response = requests.get(url,headers=HEAD...
分类：电子技术 点击：11 日期：2020-04-04
批量导入淘宝出售的商品数据到EX
批量导入淘宝出售的商品数据到EXCELEXCEl本身也有这个功能 数据-->导入外部数据-->新建外部查询,然后跳出一个对话框，在对话框的地址栏输入你的淘宝数据所在的网页地址，点击“转到”按钮 在出现的网页中选择你需要的数据，然后确定导入就可以了...
分类：电子技术 点击：12 日期：2020-04-04
python 爬取淘宝商品数据并保存
python 爬取淘宝商品数据并保存在excel中import requests from requests.exceptions import RequestException import re,json import xlwt,xlrd # 数据 DATA = [] KEYWORD = 'python' HEADERS = {'user-agent':'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/...
分类：电子技术 点击：485 日期：2020-04-04
python:定时任务模块schedule
1.安装 pip install schedule 2.文档 https://schedule.readthedocs.io/en/stable/faq.html # how-to-execute-jobs-in-parallel 3.官网使用demo import schedule import time def job(): print ( " I'm working... " )schedule.every( 10 ).minutes.do(job)s...
分类：python 点击：150 日期：2019-02-25
《python核心教程2》第十章练习
10-6.改进的open()。为内建的open()函数创建一个封装。使得成功打开文件后，返回文件句柄：若打开失败则返回给调用者None， 而不是生成一个异常。这样你打开文件就不需要额外的异常处理语句。 1 def openfile(file): 2 try : 3 f = open(file) 4 except IOEr...
分类：python 点击：54 日期：2019-02-25