亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 編程 > C# > 正文

C#機器入門學習之判斷日報是否合格詳解

2019-10-29 19:32:15
字體:
來源:轉載
供稿:網友

前言

簡單來說機器學習的核心步驟在于“獲取學習數據;選擇機器算法;定型模型;評估模型,預測模型結果”,下面本人就以判斷日報內容是否合格為例為大家簡單的闡述一下C#的機器學習。

第一步:問題分析

根據需求可以得出我們的模型是以日報的內容做為學習的特征確定的,然后通過模型判斷將該目標對象預測為是否符合標準(合格與不合格),簡單來說就是一種分類場景(此場景結果屬于二元分類,不是A就是B),那么也就確定了核心算法為分類算法當然還有其它的分類算法有興趣的可以自己去了解一下在這里就不多做說明了。

第二步:環境準備

其他的代碼編譯運行的環境并沒有太多要求,你只需要引用C#機器學習的NuGet 包,名為Microsoft.ML 具體的安裝步驟在此就不做詳細介紹了。

第三步:準備數據

這里會準備兩個數據集 一個定型模型的數據集(可以稱之為學習資料)wikipedia-detox-250-line-data.tsv數據實例部分展示如下(你的數據按照這種排列格式即可該該格式的定義取決于你的輸入數據集類的結構在下面會講到):

Sentiment SentimentText 第一天上班 無事 完成了領導的安排任務  編寫了一些代碼然后寫了一些雜七雜八的文檔  和一般的碼農做了一樣的事情 和產品經理一起做了一些項目上的事情  早上來的時候就開始討論需求,然后開始寫代碼,快下班的時候完成了整個過程的文檔分享 ***項目的整體編排會議,設計圖的首頁以及我的個人中心制作  **項目需求的對接,需求的梳理,實體結構的定義,數據庫的遷移,腦圖的完善 1、**項目的模板消息代碼編寫,2、**項目管理后臺的模板發送完善,

定型模型數據集準備好之后還有一個評估模型的測試數據集(可以稱之為標準答案)wikipedia-detox-250-line-test.tsv格式與上面展示的評估數據集一樣

定型數據的數據越豐富算法的回歸曲線方程就會越接近理想的模型方程,你的模型預測結果就會越符合你的要求。

第四步:定義特征類

根據分享的模型確定其分析的特征項并定義為相關的類并且需要引用機器學習的包using Microsoft.ML.Data;,由此模型定義的數據集類如下(結果可看注釋):

/// <summary> /// 輸入數據集類 /// </summary> public class SentimentData { /// <summary> /// 日志是否合格的值(0:為合格,1:不合格) /// </summary> [Column(ordinal: "0", name: "Label")] public float Sentiment;  /// <summary> /// 日報內容 /// </summary> [Column(ordinal: "1")] public string SentimentText; }  /// <summary> /// 預測結果集類 /// </summary> public class SentimentPrediction { /// <summary> /// 預測值(是否合格) /// </summary> [ColumnName("PredictedLabel")] public bool Prediction { get; set; }  /// <summary> /// 或然率(結果分布概率) /// </summary> [ColumnName("Probability")] public float Probability { get; set; } }

第一個SentimentData類為輸入數據集類,指的就是根據定型的數據集的特征項定義的集類,第二個SentimentPrediction類為預測結果集類,也就是你所需要的結果的類定義 該類的結構一般受你所使用的學習算法影響,根據你的學習管道輸出的結果以及個人需求的綜合考慮來定義。輸入集類帶的Column屬性標注其在數據集的格式位置的編排以及何為Label值。預測集的PredictedLabel在預測和評估過程中使用。

第五步:代碼實現

首先定義以指定這些路徑和 _textLoader 變量,用來讀取數據或者是保存實驗數據,具體如下所示:

_trainDataPath 具有用于定型模型的數據集路徑。

_testDataPath 具有用于評估模型的數據集路徑。

_modelPath 具有在其中保存定型模型的路徑。

_textLoader 是用于加載和轉換數據集的 TextLoader。

C#,機器入門,日報

然后定義程序的入口(main函數)以及相應的處理方法:

定義SaveModelAsFile方法將模型保存為 .zip 文件代碼如下所示:

private static void SaveModelAsFile(MLContext mlContext, ITransformer model) {  using (var fs = new FileStream(_modelPath, FileMode.Create, FileAccess.Write, FileShare.Write))  mlContext.Model.Save(model, fs);  Console.WriteLine("模型保存路徑為{0}", _modelPath);  Console.ReadLine(); }

定義Train方法選擇學習方法并且創建相應的學習管道,輸出定型后的模型model代碼如下所示:

public static ITransformer Train(MLContext mlContext, string dataPath) {  IDataView dataView = _textLoader.Read(dataPath);  //數據特征化(按照管道所需的格式轉換數據)  var pipeline = mlContext.Transforms.Text.FeaturizeText(inputColumnName: "SentimentText", outputColumnName: "Features")  //根據學習算法添加學習管道  .Append(mlContext.BinaryClassification.Trainers.FastTree(numLeaves: 50, numTrees: 50, minDatapointsInLeaves: 20));  //得到模型  var model = pipeline.Fit(dataView);  Console.WriteLine();  //返回定型模型  return model; }

模型定型之后,我們需要創建一個方法(Evaluate)來評測該模型的質量,根據你自己的標準測試數據集與該模型的符合程度來判斷,并且輸出相應的指標,該指標參數根據你所調用的評估方法返回具體的根據你的算法方程返回相應的方程的參數 。代碼如下所示:

public static void Evaluate(MLContext mlContext, ITransformer model) {  var dataView = _textLoader.Read(_testDataPath);  Console.WriteLine("===============用測試數據評估模型的準確性===============");  var predictions = model.Transform(dataView);  //評測定型模型的質量  var metrics = mlContext.BinaryClassification.Evaluate(predictions, "Label");  Console.WriteLine();  Console.WriteLine("模型質量量度評估");  Console.WriteLine("--------------------------------");  Console.WriteLine($"精度: {metrics.Accuracy:P2}");  Console.WriteLine($"Auc: {metrics.Auc:P2}");  Console.WriteLine("=============== 模型結束評價 ===============");  Console.ReadLine();//評測完成之后開始保存定型的模型  SaveModelAsFile(mlContext, model); }

定義單個數據的預測方法(Predict)與批處理預測的方法(PredictWithModelLoadedFromFile):

單個數據集的預測代碼如下所示:

private static void Predict(MLContext mlContext, ITransformer model) { //創建包裝器  var predictionFunction = model.CreatePredictionEngine<SentimentData, SentimentPrediction>(mlContext);  SentimentData sampleStatement = new SentimentData  {  SentimentText = "愛車新需求開發;麥扣日志監控部分頁面數據綁定;"  };//預測結果  var resultprediction = predictionFunction.Predict(sampleStatement);  Console.WriteLine();  Console.WriteLine("===============單個測試數據預測 ===============");  Console.WriteLine();  Console.WriteLine($"日報內容: {sampleStatement.SentimentText} | 是否合格: {(Convert.ToBoolean(resultprediction.Prediction) ? "合格" : "不合格")} | 符合率: {resultprediction.Probability} ");  Console.WriteLine("=============== 預測結束 ===============");  Console.WriteLine();  Console.ReadLine(); }

批處理數據集預測方法代碼如下所示:

public static void PredictWithModelLoadedFromFile(MLContext mlContext)  {   IEnumerable<SentimentData> sentiments = new[]      {       new SentimentData      {      SentimentText = "1、完成愛車年卡代碼編寫 2、與客戶完成需求對接"      },       new SentimentData      {       SentimentText = "沒有工作內容"      }      };   ITransformer loadedModel;using (var stream = new FileStream(_modelPath, FileMode.Open, FileAccess.Read, FileShare.Read))   {    loadedModel = mlContext.Model.Load(stream);   }   // 創建預測(也稱之為創建預測房屋)   var sentimentStreamingDataView = mlContext.Data.ReadFromEnumerable(sentiments);   var predictions = loadedModel.Transform(sentimentStreamingDataView);   // 使用模型預測結果值為1(不合格)還是0 (合格)   var predictedResults = mlContext.CreateEnumerable<SentimentPrediction>(predictions, reuseRowObject: false);   Console.WriteLine();   Console.WriteLine("=============== 多樣本加載模型的預測試驗 ===============");   var sentimentsAndPredictions = sentiments.Zip(predictedResults, (sentiment, prediction) => (sentiment, prediction));   foreach (var item in sentimentsAndPredictions)   {    Console.WriteLine($"日報內容: {item.sentiment.SentimentText} | 是否合格: {(Convert.ToBoolean(item.prediction.Prediction) ? "合格" : "不合格")} | 符合率: {item.prediction.Probability} ");   }   Console.WriteLine("=============== 預測結束 ===============");   Console.ReadLine();  }

在以上的方法定義完成之后開始進行方法的調用:

public static void Main(string[] args)  {//創建一個MLContext,為ML作業提供一個上下文   MLContext mlContext = new MLContext(seed: 0);//初始化_textLoader以將其重復應用于所需要的數據集   _textLoader = mlContext.Data.CreateTextLoader(  columns: new TextLoader.Column[]  {  new TextLoader.Column("Label", DataKind.Bool,0),  new TextLoader.Column("SentimentText", DataKind.Text,1)  },   separatorChar: '/t',   hasHeader: true   ); //定型模型   var model = Train(mlContext, _trainDataPath);//評測模型   Evaluate(mlContext, model);//單個數據預測   Predict(mlContext, model);   //批處理預測數據   PredictWithModelLoadedFromFile(mlContext);  }

準備代碼之后,你的小小的機器人就要開始學習啦,好吧開始編譯運行吧。。。。。。

運行產生結果為:

C#,機器入門,日報

由于訓練的數據集特征化參數的準確性以及數據的涵蓋廣度不夠導致定義的模型質量非常的不理想因此我們可以看到 我們的預測結果也是不夠符合我們的理想狀態,可見我們小機器的學習之路是非常漫長的過程啊。

由此次的機器學習的小小實踐本人也深有體會,機器就像一個小孩一樣首先你得根據他的性格(特征化參數)確定應該給予他什么樣的學習環境(學習算法創建的學習管道)并提供學習資料(定型機器學習模型數據集),然后為其確定一個發展目標(評估模型數據集),并且不斷的進行考試(單個數據的預測與批量數據的預測),考試需要特定的考試場地(預測所需要調用的方法)。通過該種方式讓機器不斷的學習不斷的精進。

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對VEVB武林網的支持。


注:相關教程知識閱讀請移步到c#教程頻道。
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
91免费人成网站在线观看18| 亚洲风情亚aⅴ在线发布| 中文字幕日韩在线视频| 欧美激情综合亚洲一二区| 91av在线精品| 国精产品一区一区三区有限在线| 精品久久久免费| 国产做受高潮69| 国产精品91视频| 2019中文字幕在线免费观看| 欧美亚洲激情在线| 亚洲欧美制服第一页| 久久久国产精品一区| 亚洲天堂精品在线| 97视频在线观看亚洲| 精品久久久精品| 久久久久久久久久久免费| 欧美日韩亚洲网| 欧美风情在线观看| 亚洲综合成人婷婷小说| 亚洲国产精品热久久| 在线观看日韩www视频免费| 欧美另类极品videosbestfree| 国产精品久久久久久久久久久新郎| 亚洲欧洲偷拍精品| 国产在线a不卡| 亚洲欧洲第一视频| 欧美视频二区36p| 国产啪精品视频| 久久久精品一区二区三区| 日本欧美在线视频| 中文字幕欧美视频在线| 日韩精品在线影院| 92国产精品久久久久首页| 91久久久久久| 日韩在线播放av| 国产成人综合亚洲| 国产精品久久久久久av福利| 欧美丰满老妇厨房牲生活| 亚洲综合成人婷婷小说| 成人国产精品日本在线| 92国产精品久久久久首页| 欧美国产视频日韩| 欧美韩日一区二区| 久久偷看各类女兵18女厕嘘嘘| 日韩在线观看av| 性色av一区二区三区红粉影视| 日韩经典第一页| 51视频国产精品一区二区| 日韩资源在线观看| 亚洲午夜未删减在线观看| 国产精品96久久久久久| 91久久久亚洲精品| 国产精品成人在线| 国产丝袜一区二区三区| 国产精品视频网址| 在线视频精品一| 欧美一级淫片videoshd| 亚洲一品av免费观看| 日韩精品中文字幕视频在线| 成人自拍性视频| 久久97精品久久久久久久不卡| 欧美成人免费网| 亚洲成人免费网站| 精品香蕉一区二区三区| 亚洲美女又黄又爽在线观看| 亚洲欧美激情精品一区二区| 欧美日本黄视频| 97人人模人人爽人人喊中文字| 日韩成人网免费视频| 久久精品成人一区二区三区| 日韩中文字幕国产精品| 久久视频免费观看| 欧美日韩免费区域视频在线观看| 国产一区二区三区在线观看网站| 国产香蕉一区二区三区在线视频| 国产精品久久久久久久久久久新郎| 久久久精品免费视频| 精品久久久久久国产| 亚洲乱码国产乱码精品精| 日本三级韩国三级久久| 国产精品视频最多的网站| 91美女片黄在线观看游戏| 91久久久久久久久久| 久久精品国产69国产精品亚洲| 亚洲成人精品视频| 狠狠色噜噜狠狠狠狠97| 精品丝袜一区二区三区| 国产精品自产拍在线观| 亚洲色图五月天| 日韩av免费看| 亚洲欧美在线一区| 国产精品h在线观看| 中文字幕在线亚洲| 久久精品国产亚洲7777| 久操成人在线视频| www日韩欧美| 久久av红桃一区二区小说| 亚洲精品99久久久久中文字幕| 久久精品电影网| 福利精品视频在线| 91久久久久久| 在线日韩欧美视频| 午夜精品美女自拍福到在线| 欧美午夜宅男影院在线观看| 国产亚洲精品一区二区| 久久久影视精品| 国产精品色午夜在线观看| 久久福利网址导航| 国产精品激情av在线播放| 国产精品第一页在线| 日韩中文在线中文网三级| 国产成人精品免高潮费视频| 青青青国产精品一区二区| 亚洲白拍色综合图区| 精品二区三区线观看| 久久手机精品视频| 久久国产精品久久久| 黄色精品一区二区| www.日本久久久久com.| 亚洲伊人一本大道中文字幕| 亚洲综合日韩中文字幕v在线| 亚洲电影在线观看| 久久夜色精品国产欧美乱| 亚洲欧美色图片| 欧美做爰性生交视频| 国产精品扒开腿做| 久久夜精品香蕉| 久久精品国产电影| 青青草一区二区| 国产精品男女猛烈高潮激情| 国产精品av免费在线观看| 亚洲成人黄色网址| 亚洲精品一区二区三区不| 亚洲国产精品专区久久| 日本免费在线精品| 亚洲精品v欧美精品v日韩精品| 日韩高清av一区二区三区| 97国产精品视频人人做人人爱| 亚洲福利视频久久| 成人免费在线视频网址| 国产999在线| 久久精品国产一区| 在线观看日韩欧美| 7m第一福利500精品视频| 中文字幕亚洲天堂| 国产精品入口夜色视频大尺度| 国产z一区二区三区| 日本精品视频在线| 欧美放荡办公室videos4k| 久久精品亚洲热| 亚洲一二在线观看| 欧美肥臀大乳一区二区免费视频| 欧美日韩一区免费| 亚洲第一精品福利| 88xx成人精品| 欧美乱人伦中文字幕在线| 91产国在线观看动作片喷水| 国产手机视频精品| 91黑丝在线观看| 久久亚洲私人国产精品va| 国产欧洲精品视频| 国产精品美女主播| 亚洲欧美三级伦理|