blog.binux.me
首页 - Binuxの杂货铺Binuxの杂货铺 - 足兆叉虫
http://blog.binux.me/
Binuxの杂货铺 - 足兆叉虫
http://blog.binux.me/
TODAY'S RATING
>1,000,000
Date Range
HIGHEST TRAFFIC ON
Wednesday
LOAD TIME
PAGES IN
THIS WEBSITE
11
SSL
EXTERNAL LINKS
28
SITE IP
198.23.129.5
LOAD TIME
0 sec
SCORE
6.2
首页 - Binuxの杂货铺 | blog.binux.me Reviews
https://blog.binux.me
Binuxの杂货铺 - 足兆叉虫
blog.binux.me
pyspider 爬虫教程（一）：HTML 和 CSS 选择器 | Binuxの杂货铺
http://blog.binux.me/2015/01/pyspider-tutorial-level-1-html-and-css-selector
Pyspider 爬虫教程 一 HTML 和 CSS 选择器. 和 如何从 WEB 页面中提取信息. 但是感觉还是需要一篇 step by step 的教程，不然没有一个总体的认识。 在 教程一 中，我们将要爬取的网站是豆瓣电影 http:/ movie.douban.com/. 你可以在: http:/ demo.pyspider.org/debug/tutorial douban movie. 由于教程是基于 pyspider 的，你可以安装一个 pyspider Quickstart. 也可以直接使用 pyspider 的 demo 环境 http:/ demo.pyspider.org/. 找到更多这个的 URL，回到 2 继续. 我们在 http:/ movie.douban.com/. 扫了一遍，发现并没有一个列表能包含所有电影，只能退而求其次，通过抓取分类下的所有的标签列表页，来遍历所有的电影 http:/ movie.douban.com/tag/. 在 pyspider 的 dashboard 的右下角，点击 Create 按钮. 中，我们需要提取出所有的 电影列表页 的 URL。
如何从 WEB 页面中提取信息 | Binuxの杂货铺
http://blog.binux.me/2014/07/how-to-extract-data-from-web
但是，既然某厂的后续解决方案是将所有抓取页面过 webkit 渲染 虽然很多时候渲染不出 或 需要点击动作，代价往往大于直接抓 API ，不会有很多精力投入，待我慢慢想想。 Xpath / css选择器 / 正则表达式. Https:/ www.kimonolabs.com/. 或 正则表达式 进行定位提取的方法 这里需要指出的是，html 并不是正则的，正则表达式可能在部分简单提取时有效，但 不要用正则表达式进行页面提取. 缺陷在于用户需要会 xpath / css选择器 / 正则语法，虽然有一些工具 例如上面的kimono、chrome的调试工具、pyspider里面的脚本 辅助生成规则，但可能通用性不足 或 区分度不够，选取到不需要的内容。 这种抽取方式的一种变形是 将 key 和 value 同时在页面中标出，通过 key 和 value 总是穿插出现的这一假设，省去单独为每个属性设置规则的人力，极大增快标注效率。 例如 http:/ movie.douban.com/subject/7054604/. 类型: 动作 / 科幻 / 冒险. 制片国家/地区: 美国 / 中国大陆. 而在 data ...
足兆叉虫的2013 | Binuxの杂货铺
http://blog.binux.me/2013/12/2013
Pyspider 爬虫教程 三 使用 PhantomJS 渲染带 JS 的页面.
迁移 Python 3 | Binuxの杂货铺
http://blog.binux.me/2014/12/porting-to-python-3
使用 Python 3 的呼声一直很高，Python 3 解决了很多 2 中的坑，比如 unicode，在向他们解释为什么. 但是由于一开始接触的就是 Python 2，熟悉的包都是 Python 2 我也不确定他们是否支持 Python 3。 公司机器上的 Python 2.7 就算是 最新 版本。 不过有一种说法，切换到 Python 3 的最好时机就是现在。 为了庆祝 star 过 3000-，由于见到两次要求支持 Python 3，用一个周末为 pyspider 加入了 Python 3 支持 怎么样，不难吧。 Porting Python 2 Code to Python 3. Cheat Sheet: Writing Python 2-3 compatible code. Six: Python 2 and 3 Compatibility Library. 其实 Porting Python 2 Code to Python 3. 而且这一节内容就来自此文的 The Short Explanation. 而 pyspider 正是因为有 86% 的代码覆盖，我能这么快地完成代码迁移。
pyspider 爬虫教程（二）：AJAX 和 HTTP | Binuxの杂货铺
http://blog.binux.me/2015/01/pyspider-tutorial-level-2-ajax-and-more-http
Pyspider 爬虫教程 二 AJAX 和 HTTP. API 抓取豆瓣电影的 HTML 内容，并使用 CSS 选择器解析了一些内容。 是 Asynchronous JavaScript and XML 异步的 JavaScript 和 XML 的缩写。 AJAX 通过使用原有的 web 标准组件，实现了在不重新加载整个页面的情况下，与服务器进行数据交互。 当一个网站使用了 AJAX 的时候，除了用 pyspider 抓取到的页面和浏览器看到的不同以外。 你在浏览器中打开这样的页面，或者点击 展开 的时候，常常会看到 加载中 或者类似的图标/动画。 例如，当你尝试抓取 http:/ movie.douban.com/explore. 由于 AJAX 实际上也是通过 HTTP 传输数据的，所以我们可以通过 Chrome Developer Tools. 在窗口中打开 http:/ movie.douban.com/explore. 挨个查看每个请求，通过访问路径和预览，找到包含信息的请求 http:/ movie.douban.com/j/search subjects? Selfcrawl( 'htt...
TOTAL PAGES IN THIS WEBSITE
11
最近的几个面试 - laike9m's blog
https://laike9m.com/blog/zui-jin-de-ji-ge-mian-shi,71
AUG 6TH, 2015. 基 本 都 在 问 项 目 我简历上的每个项目至少讲了两遍。 是怎么创建的( (ﾟДﾟ;) )。 一文中的观点，他用 指令集并行 的例子反驳了并行是属于并发的说法，并且指出 并发 是逻辑上的， 并行 是物理上的，两者并没有包含关系。 WHAT THE FUCK 于是就没有面。 题说实话不难，但是描述得非常含糊，第一题我 clarify 了五分钟，第二题 clarify 了超过十分钟。 7:20 的时候我还在就第二题到底是什么意思反复和面试官讨论，这可是限定在 45 分钟内完成的面试啊 我急了，面试官也急了。 我能感觉到她非常不理解我为什么不能理解题意，但是我 TM 就是不能理解啊 没办法了，我说，我给这样的一个输入，你能不能告诉我应该输出什么 最后终于终于通过举一个例子弄清了题意，我发现我之前想得太复杂了。 一个去了 Google 的师兄叮嘱我， 一定要 10、11 月再面试，8、9 月好多大牛都挂了。 拿到 Offer 的基本都是 10、11 月面的。 但是今年 Google 听说是缩招了，要求内推的人必须 8 月份面试完。 Hi, I'm laike9m.
laike9m's blog
https://laike9m.com/blog/talks
Concurrent.futures: history, usage, internal, future. A 30-minutes talk I gave at PyCon2014 China(Beijing). I tried to make clear why. Is brought into Python beyond how to use it, explore the internal implementation of. And finally explained why we should use it. 在 PyCon2014 北京场做的主题演讲，主要针对 Python3.2引入的. FBT客户端内幕 Node.js 和 node-webkit. A talk at OpenCAS seminar. I talked about the technology we use to build FBT client. 在中科院开源软件协会技术交流会上的演讲，关于 Python HTTP 相关任务，也概述了 HTTP 的基础知识。 And Python Context Manager.
PyCon2015 笔记 - laike9m's blog
https://laike9m.com/blog/pycon2015-bi-ji,66
MAY 16TH, 2015. 1 Type Hints - Guido van Rossum. 视频 https:/ www.youtube.com/watch? 主要就是讲 PEP 484 - Type Hints，通过 typing 这个模块，从 3.5 版本开始，Python 也可以做静态检查了 更新 实际上 3.5 里还不能做静态检查，只是加入了类型标记，参见 What's New In Python 3.5. 2 Raymond Hettinger - Beyond PEP 8 - Best practices for beautiful intelligible code. 视频 https:/ www.youtube.com/watch? 强烈推荐 Raymond Hettinger 的演讲适合所有层次的程序员看。 这个演讲说的是，我们都知道用 PEP8 来规范 Python 代码，但是这样是否就够了呢 我们可能忽视了一件更重要的事 Pythonic 这个演讲举了几个例子，怎么 make code more pythonic，比如使用 context manager，使用. Raymon...
laike9m's blog
https://laike9m.com/2
JUL 16TH, 2016. 发布 zhihu-card 0.2.0. Cdnjsdelivr.net/zhihu-card/latest/widget.js ". 如果你有兴趣一起来改进，欢迎给项目提 issue 和 pr。 唯一的解决方法就是用一个 server 去获取用户信息，然后 zhihu-card 去访问 server。 Server 是拿 Go 写的，目前不开源，因为之后打算大改。 JUN 3RD, 2016. 上完课之后我就再也没碰过 GRE 的东西，为什么呢 因为根本没有余力去学，更重要的是，我意识到凭我的渣成绩根本不可能有学校要 即使连 GPA 都没算过。 去年 6 月 26 号的时候，同事前辈邀请我参与创业项目。 这种感觉在听了无数国外 PyCon 和参加了三次国内 PyCon 之后变得愈发强烈。 我不怀疑在 BAT 干五年能成为独当一面的工程师然后被安上个 架构师 的头衔，然而也就到头了，你能接触到把你带入各种核心开发者圈子的人吗 不能。 Robert Frost 在著名的 The Road Not Taken 中写道. 某天看见 Fenng 写的一个 答案. Crazy At...
laike9m's blog
https://laike9m.com/blog/archive
Daemon is not daemon, but what is it? Posted in python,. 发布 zhihu-card 0.2.0. Posted in zhihu-card,. Posted in python, requests,. Requests secret: pool connections and pool maxsize. Posted in python, requests,. 解决 Mac 无法编译带 C 扩展库的问题. Posted in Mac,. Posted in website,. Posted in deploy,. Posted in iterator,. Posted in golang,. Posted in VPS,. Posted in python, super,. Useful Hack Lazy module attribute. Posted in python, import,. Posted in algorithm,. Posted in python, testing,. Ubuntu 运行 mongodb 的正确姿势.
还在疑惑并发和并行？ - laike9m's blog
https://laike9m.com/blog/huan-zai-yi-huo-bing-fa-he-bing-xing,61
MAR 1ST, 2015. OK，如果你还在为并发 concurrency 和并行 parallesim 这两个词的区别而感到困扰，那么这篇文章就是写给你看的。 OK，下面进入正题， concurrency vs parallesim. 并发 指的是程序的结构， 并行 指的是程序运行时的状态. 但是 Python 的多线程由于存在著名的 GIL，无法让两个线程真正 同时运行 ，所以实际上是无法到达并行状态的。 要理解 并发 这个概念，必须得清楚， 并发指的是程序的 结构. 正确的并发设计的标准是 使多个操作可以在重叠的时间段内进行(two tasks can start, run, and complete in overlapping time periods). 我们先看 操作 在重叠的时间段内进行 这个概念。 Task1, task2 是两段不同的代码，比如两个函数，其中黑色块代表某段代码正在执行。 但是，由于 task1 和 task2 在重叠的时间段内执行，所以这是一个支持并发的设计。 在重叠的时间段内进行 中的 可以 两个字。 Gopher is moe, but confusing.
laike9m's blog
https://laike9m.com/blog
AUG 22ND, 2016. AUG 6TH, 2016. Daemon is not daemon, but what is it? A thread can be flagged as a daemon thread . The significance of this flag is that the entire Python program exits when only daemon threads are left. Daemon (Daemon Process)" is a notion in UNIX denoting a process detached from any controlling terminal, typically waiting for some event to occur and to respond to in some way. Windows services are similar but I assume Bil et alia chose deliberately a different word for them. The exit meth...
理解 Python super - laike9m's blog
https://laike9m.com/blog/li-jie-python-super,70
AUG 5TH, 2015. Parent. init (self). 这种方式与super(Child, self). init. 不要一说到 super 就想到父类 super 指的是 MRO 中的下一个类. 不要一说到 super 就想到父类 super 指的是 MRO 中的下一个类. 不要一说到 super 就想到父类 super 指的是 MRO 中的下一个类. 忘记了这件事之后，再去看这篇文章 Python’s super() considered super! 这是 Raymond Hettinger 写的一篇文章，也是全世界公认的对. 讲解最透彻的一篇文章，凡是讨论 super 都一定会提到它 当然还有一篇 Python's Super Considered Harmful。 两个参数 cls 和 inst 分别做了两件事. 1 inst 负责生成 MRO 的 list. 2 通过 cls 定位当前 MRO 中的 index, 并返回 mro[index 1]. MRO 全称 Method Resolution Order，它代表了类继承的顺序。 This is Root ".
laike9m's blog
https://laike9m.com/blog/about
Hi, I'm laike9m. I do a lot of different things. If you want to get in touch with me you can email me. Or find me on GitHub. I didn't really start programming before I became a Junior student. Since then, I've done a lot of different things, most of which are tools for my personal use, but you may find some useful too. You can take a look at my projects. To see some of the major stuff I've worked on, or look at my Github account. Supporter since high school. To learn more about my taste. Hi, I'm laike9m.
TOTAL LINKS TO THIS WEBSITE
28
BinTube.com Blog
Saturday, March 19, 2016. Enabling Flash support in BinTube Ultimate version 4.6.0.0 and later. Starting with version 4.6.0.0 BinTube Ultimate uses the Chromium web browser which doesn't provide built-in Adobe Flash support. To enable Flash you need to download the PPAPI version of Flash from https:/ get.adobe.com/flashplayer/otherversions/. Detailed instructions are provided on our support forum. Posted by BinTube at 6:01 PM. Links to this post. Monday, October 20, 2014. BinTube Ultimate 4 - New Features.
Binu | Welcome
Connect with the next billion. Reliable, high speed content. Android and Java feature phones. Market Research Agencies - survey or poll millions of mobile users in emerging markets. Gather instant responses and analyse results in real time. Reward them for their contributions with mobile airtime and other digital products. Mobile Network Operators - Offer your subscribers their first experience of the Internet. Create a low cost, curated, safe, white labelled environment to enrich their mobile experience.
Microsoft Internet Information Services 8
BINU RAJ V
Tuesday, January 18, 2011. Analyze the MOSS 2007 Farm for SharePoint 2010 Migration. The document describes the tools which can be used to analyze the MOSS 2007 Farm which is the first and the most important step of Migrating in to SharePoint Server 2010. The following template can be used to document the farm settings and tools that allow gathering all necessary information. The search, excel and other services settings are Out of the scope of this Document. Farm Servers and Services. Http:/ community&#...
Blog Binusian | Getting back the real blog.binusian.org
Blog Binusian Core Engine has been Updated. December 28, 2013. Now the Blog Binusian WordPress Core has been updated to WordPress 3.8, Blog Binusian member should see the newest WordPress User Interface on WordPress’ Dashboard. We should wait several minutes untill all sub-sites upgraded, so be patient if some sub-site still not upgraded. September 16, 2013. The newest WordPress Engine have been installed to blog.binusian.org. You can feel and test the newest feature. Version 3.6 has released …! Seperti ...
首页 - Binuxの杂货铺
Pyspider 爬虫教程 三 使用 PhantomJS 渲染带 JS 的页面. 英文原文 http:/ docs.pyspider.org/en/latest/tutorial/Render-with-PhantomJS/. 当然，你也可以在 demo.pyspider.org. 当 pyspider 连上 PhantomJS 代理后，你就能通过在. 例如，在教程二中，我们尝试抓取的 http:/ movie.douban.com/explore. 我在这里使用了一些 PyQuery 的 API，你可以在 PyQuery complete API. Def on start(self): self.crawl('http:/ movie.douban.com/explore#more', fetch type='js', js script=" " function() { setTimeout("$('.more').click()", 1000); }" ", callback=self.phantomjs parser). Pyspider 爬虫教程 二 AJAX 和 HTTP. 现在可以在新窗...
Bin Weevils Blog - All the latest Bin Weevils Scoops & News
SWS vs WEB Hat Sale! May 21st, 2015. Hurry – sale ends Tuesday 26th May! Comic: The Unknown Weevil Part 3! May 20th, 2015. The following Weevils that commented on Part 2 have been awarded a mulch prize! Best Nest #140 & Garden Of The Week! Plus WIN 3 Dosh coins! May 19th, 2015. How well do you know Gam? Q1: What was Gam's funniest moment? The time Tink and Clott fell into green slime. The time Colin sneezed and blew all the Castle Guards down! The time WEB attacked Gam's Castle. Q4: What does Gam dislike?
nets.
Unsere Patenkinder glücklich gemacht …. 8230; haben wir dieser Tage gleich zu zwei Gelegenheiten. Da war zum Einen der große Kita-Geburtstag mit der feierlichen Einweihung des neuen Trampolins und neuer Gartengeräte, in die die stolze Summe von 1.050 Euro als Spende aus unserer letzten Mitarbeiter-Weihnachtsfeier geflossen ist. Überall gab es strahlende Gesichter und auch die Sonne lachte mit den Kindern und Erziehern um die . Gut versichert in den Urlaub! Störtebeker startet nächstes Abenteuer! Publikum...
WebsitePanel - Sign In
Sign In to Control Panel. You are using a non-secure HTTP connection! When using a non-secure HTTP connection, data is transmitted unencrypted over the Internet. In order to protect sensitive data, it is highly recommended to use a secure HTTPS connection. Remember me on this computer (expires after 24 hours). The 'Remember me on this computer' feature saves a persistent cookie on the computer. And anyone with access to the computer could access the control panel until the cookie expires.
blog.bio-apo.de
Gesundheit Aktuell / 1. Dezember 2014. Bitte wählen Sie einen Themenbereich. Freizeit, Sport, Bewegung. Gesundheit Aktuell / 15. November 2014. Bitte wählen Sie einen Themenbereich. Freizeit, Sport, Bewegung. C) 2013 bio.apo.de.
Bio-Asli E-Commerce Blog :..: blogbioasli.com
Login Ahli blogbioasli.com. Jana Pendapatan : Diamond. VIP kan ahli baru. Contoh design blogbioasli.com. Ke www.bio-asli.com. Klik di sini baca BERITA. EnSyukri : Sedia membantu. Countdown Pool Plan C:. Laman Web Peribadi :.: Desaku.net. SELAMAT DATANG KE BLOGBIOASLI.COM. Jadikan ianya kedai online anda ). Video Kedai online ( Blog ). Kini Blogbioasli telah di Upgrade dimana:. Pelbagai Rekabentuk. Hanya 2 klik untuk anda mengubah rekabentuk pada bila-bila masa. Kini anda boleh mempunyai blog anda sendiri...
SOCIAL ENGAGEMENT