python之beautifulsoup使用

2017-09-18

find()/find_all()

find() 返回文档中符合条件的tag，如果没找到符合条件的tag返回Node
find_all()返回文档中全部符合条件的tag的列表，如果不存在返回空列表
注意find()函数返回的是符合条件的tag，因此可以进行链式调用，如：

1 2	#先查找class属性为‘post-content’的div标签，然后查找该div标签下的所有的img标签 soup.find('div', class_='post-content').find_all('img')

阅读全文

Mongodb笔记(三)

2017-09-18

mongodb突然无法打开

检查mongodb数据所在的文件夹下是否有一个类似”locked file”,删掉这个文件,然后再开启mongodb

阅读全文

Python笔记

2017-09-18

python路径操作

import os
#创建目录
os.mkdir("D:\\python\\2")
#删除目录
os.rmdir("D:\\python\\2")
#创建多级目录
os.makedirs("D:\\python\\oo\\2\\3")
#删除多级目录
os.removedirs("D:\\python\\oo\\2\\3")
#获取目录下文件夹及文件
os.listdir("D:\\python")
#获取当前目录位置
os.getcwd()
#切换目录
os.chdir("D:\\python\\oo\\3")
#遍历所有子目录及文件
for root, dirs, files in os.walk('D:'+os.sep+'python'):
    # 遍历出所有的文件
    for f in files:
        fp=os.path.join(root, f)
    # 遍历出所有的目录,包括空目录
    for d in dirs:
        dp = os.path.join(root, d)
# 返回path规范化的绝对路径。 
os.path.abspath(path) 
#将path分割成目录和文件名二元组返回。 
os.path.split(path) 
>>> os.path.split('c:\\csv\\test.csv') 
('c:\\csv', 'test.csv') 
>>> os.path.split('c:\\csv\\') 
('c:\\csv', '') 
 
#返回path的目录。其实就是os.path.split(path)的第一个元素。 
os.path.dirname(path) 
 
# 返回path最后的文件名。如果path以／或\结尾，那么就会返回空值。即os.path.split(path)的第二个元素。 
os.path.basename(path) 
>>> os.path.basename('c:\\test.csv') 
'test.csv' 
>>> os.path.basename('c:\\csv') 
'csv' （这里csv被当作文件名处理了） 
>>> os.path.basename('c:\\csv\\') 
'' 
# 返回list中，所有path共有的最长的路径。  
os.path.commonprefix(list) 
>>> os.path.commonprefix(['/home/td','/home/td/ff','/home/td/fff']) 
'/home/td' 
 
# 如果path存在，返回True；如果path不存在，返回False。 
os.path.exists(path) 
 
# 如果path是绝对路径，返回True。 
os.path.isabs(path) 
 
# 如果path是一个存在的文件，返回True。否则返回False。 
os.path.isfile(path) 
 
# 如果path是一个存在的目录，则返回True。否则返回False。 
os.path.isdir(path) 
 
# 将多个路径组合后返回，第一个绝对路径之前的参数将被忽略。 
os.path.join(path1[, path2[, ...]]) 
>>> os.path.join('c:\\', 'csv', 'test.csv') 
'c:\\csv\\test.csv' 
>>> os.path.join('windows\temp', 'c:\\', 'csv', 'test.csv') 
'c:\\csv\\test.csv' 
>>> os.path.join('/home/aa','/home/aa/bb','/home/aa/bb/c') 
'/home/aa/bb/c' 
# 在Linux和Mac平台上，该函数会原样返回path，在windows平台上会将路径中所有字符转换为小写，并将所有斜杠转换为反斜杠。  
os.path.normcase(path) 
>>> os.path.normcase('c:/windows\\system32\\') 
'c:\\windows\\system32\\' 
 
# 规范化路径。 
os.path.normpath(path) 
>>> os.path.normpath('c://windows\\System32\\../Temp/') 
'c:\\windows\\Temp' 
 
# 返回（drivername，fpath）元组 
os.path.splitdrive(path)  
>>> os.path.splitdrive('c:\\windows') 
('c:', '\\windows') 
 
# 分离文件名与扩展名；默认返回(fname,fextension)元组，可做分片操作 
os.path.splitext(path)  
>>> os.path.splitext('c:\\csv\\test.csv') 
('c:\\csv\\test', '.csv') 
 
# 返回path的文件的大小（字节）
os.path.getsize(path)  
>>> os.path.getsize('c:\\boot.ini') 
299L 
 
# 返回path所指向的文件或者目录的最后存取时间。 
os.path.getatime(path) 
 
# 返回path所指向的文件或者目录的最后修改时间 
os.path.getmtime(path)