使用CefSharp和Javascript实现网络爬虫
发布时间:2019-12-20 11:38:40   来源:东方头条   评论 参与

欢迎浏览“使用CefSharp和Javascript实现网络爬虫”,本篇是第3篇。

在爬虫实现过程中,采用Javascript的DOM操作来抓取目标数据,并通过CefSharp提供的Javascript和C#交互方法,把目标数据传递给C#代码进行处理。上一篇介绍了采用Javascript的DOM操作来抓取目标数据,这一篇介绍CefSharp中Javascript和C#之间的调用和交互,以及使用C#委托实现回调处理。

一、CefSharp中Javascript和C#之间的调用和交互

1、C#调用Javascriptprivate ChromiumWebBrowser myBrowser;myBrowser.GetBrowser().MainFrame.ExecuteJavaScriptAsync("console.log("helloworld");");

2、Javascript调用C#,实现数据上报

(1)C#暴露接口定义public class AsyncJavascriptBindingClass{public int ReceiveMsg (int nType, string msg){Console.WriteLine("AsyncJavascriptBindingClass. ReceiveMsg: " + nType + "," + msg);}}

(2)C#暴露接口注册myBrowser.JavascriptObjectRepository.ResolveObject += (_sender, _e) =>{var repo = _e.ObjectRepository;if (_e.ObjectName == "boundAsync"){repo.Register("boundAsync", new AsyncJavascriptBindingClass(), isAsync: true);}};

(3)在Javascript中调用async function sendMsg(type,msg){await CefSharp.BindObjectAsync("boundAsync");var result = await boundAsync. ReceivMsg(type,msg);};sendMsg (1, "hello C#");

二、C#委托使用

当C#代码接收到Javascript传递的目标数据后,常常需要通知其他处理线程进行后续处理,例如通知主界面线程改变当前访问的URL地址等,这里介绍我在实现爬虫过程中使用C#委托实现回调机制。

(1)定义委托类public delegate void CallBackDelegate(string msg);

(2)在AsyncJavascriptBindingClass中触发回调函数public class AsyncJavascriptBindingClass{public CallBackDelegate callBack;public AsyncJavascriptBindingClass(CallBackDelegate _callBack){this.callBack = _callBack;}public int ReceivMsg (int nType, string msg){callback(msg); //todo}}

(3)在主界面对象WindowForm中实现回调函数private void CallBack(string msg){//your code}myBrowser.JavascriptObjectRepository.ResolveObject += (_sender, _e) =>{var repo = _e.ObjectRepository;if (_e.ObjectName == "boundAsync"){repo.Register("boundAsync", new AsyncJavascriptBindingClass(CallBack), isAsync: true);}};

现在我把“使用CefSharp和Javascript实现网络爬虫”的主要知识点进行了记录和分享,供往后查阅。

① 康复在线网所有原创文章(含图片),未经允许不得转载或镜像;授权转载应在范围内使用,并注明来源。
② 部分内容转载自其他媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。
③ 如因作品内容、版权和其他问题需要同本网联系:2816822384@qq.com,请在30日内进行。

相关热词搜索:爬虫 网络 CefSharp Javascript

上一篇:当年风靡一时的Root,为手机“逆天改命”,为什么如今却没人用了?
下一篇:最后一页

主办单位:《康复在线网》出版公司。 网站低俗信息举报信箱
康复在线网:立足“华人的角度”
违法和不良信息举报中心