亚洲AV无码欧洲AV无码网站_国产精品视频色_大地资源网更新免费播放视频_私人影院性盈盈影院_久久99精品久久久久久236_最新亚洲人成无码网站

從小作坊到大生產,數據標注轉捩點

來源:甲子光年 | 2019-12-13 15:49 | 作者: 芊乂、程丹

  

image.png

  當下競爭核心:效率、安全、性價比。

 

  2018年初,「甲子光年」曾發布《“數據折疊”:今天,那些人工智能背后“標數據的人”正在回家》。勞動密集型是人們對數據標注行業的固有印象,基層數據標注員被視為數據時代的“隱形人”,他們的工作日常就是坐在擁擠的小房間里,不停地按動鼠標,框取對象,依靠微薄的月薪在繁華的大城市里找到自己立足的一席之地。

  而不久前的一個周三,「甲子光年」在位于房山的云測數據標注基地看到了另一種行業作業形式。

  云測數據的其中一個標注基地是坐落于房山區北京金融安全創意產業園的一幢四層半高的小樓,一半是開放式辦公區域,另一半是按項目組設置的封閉房間,除了房間四角安裝的監視器之外,跟普通的創業孵化園區并沒有太大區別。

  第三層主要處理對安全性較高的數據標注業務,設了門禁,需要通過指紋識別才能進入。

  標注員李楠(化名)告訴「甲子光年」,兩個月前,她剛從數據標注員升級為質檢員。

  她在大董村跟同學合租了一個20平的開間,起初是四人合租,漲薪之后變成兩人。她每天上午步行十分鐘到基地上班,偶爾也需要加班。閑暇時間,她會練練手卷鋼琴緩解工作壓力。

  云測數據房山數據標注基地的磚紅色大樓,每日吞吐著數百名數據標注人員。這里不僅是他們的工作地點,也是他們周末的燒烤聚會地。

  從業者生活和工作方式改變的背后是數據標注行業拐點的到來:蠻荒時代正在過去。

  智研發布的數據標注行業報告指出,2018年我國數據標注與審核行業規模達到52.55億元,其中34%左右的業務量流向專業做數據采標的第三方公司。

  「甲子光年」觀察到,供給側的馬太效應開始顯現,體量較大的公司呈現出兩種業態:一是眾包平臺、二是定制化服務。

  在眾包賽道上,已誕生了Scale AI、Appen為代表的明星獨角獸。而定制化服務模式對企業管理和標注員的要求較高,代表玩家包括云測數據、百度。

  本篇,「甲子光年」以提供定制化標注服務的云測數據為例,看數據標注自營模式的發展與挑戰,以及數據標注的未來圖景。

  成立于2011年的Testin云測公司,以應用測試服務起家;2017年正式啟動了數據標注業務。截至目前,云測數據已擁有近千名全職數據服務人員,服務領域包括自動駕駛、智能家居、智慧城市、智能金融和新零售等領域,客戶數量已達數百級,標注業務客單價已達百萬級。

  「甲子光年」采訪了云測數據總經理賈宇航、云測數據交付負責人朱文輝、Testin云測CMO張鵬飛、IDG資本牛奎光、品覽創始人兼CEO李一帆、某Robo-taxi公司深度學習技術負責人Ted(化名)及多位數據標注從業者,并實地走訪了云測數據標注基地,發現數據標注行業的以下趨勢正逐漸顯現:

  第三方數據服務的外包公司正在數據標注行業中獲得更多市場;效率、安全等因素綜合而成的性價比成為當下競爭核心;在定制化服務的模式中,工具提效和管理優化成為構筑效率壁壘的關鍵。

  1.拐點將至

  Garbage in, garbage out.

  數據、算力、算法是推動人工智能技術進步的“三駕馬車”,其中數據是人工智能行業的發展基石,數據對人工智能很重要,“沒有好的數據,人工智能沒有未來”早已是行業共識。

  新變化在于,隨著人工智能技術落地場景,不同場景提出了更高質量、更多元的數據需求

  對視覺數據標注需求非常大的自動駕駛領域,很好地展現了數據標注服務的業態變化。

  在2016年,人工智能隨AlaphGo強勢崛起并引發一系列創業、創新活動后,數據標注迎來第一次真正意義上的爆發,但由于當時各公司的人工智能業務多處于“跑Demo"、“做研發”的落地前環節——在質上,用標準數據集就可滿足;在量上,規模也不可與現在相比

  所以當時的數據標注行業門檻較低,小作坊遍地開花,被視為“人工智能背后的富士康工廠”,標注人員也魚龍混雜。「甲子光年」FA副總裁李世民介紹,在粗放期,數據標注的工作頁面和網頁版PS十分相似,重復性的簡單拉框就能實現項目需求,一張圖的價格不過幾分錢,外包商全靠數量獲取微薄利潤。

  而以Waymo、小馬智行、文遠知行等為代表的做L4級自動駕駛系統的公司或其他對數據有較高要求的公司,則多在內部建立標注團隊,解決前期的標注問題。

  然而,從近兩年的市場數據來看,第三方數據標注與審核公司開始變多;原本十分分散的數據標注行業走向專業化的拐點正在發生

image.png

  智研統計數據顯示,2018年我國數據標注與審核行業規模達到52.55億元,約34%的業務量流向專業做數據采標的第三方公司。

  其中,專業第三方數據標注與審核公司的業務增速始終維持在全行業的最高水準,超越行業平均值、人工智能企業內部標注和人工智能外包公司相應業務增速;即便在增長相對放緩的2017-2018年也高達88.11%。

  這背后有三大驅動力。

  一是成本問題——這是專業第三方公司相比于自營的優勢:隨著數據量越來越大,如果雇傭大量人力進行數據標注,大多數人工智能公司都無法攻克人員管理的挑戰和承擔隨著數據量增長的巨額薪資。

  二是質量問題——這是更成規模的專業第三方公司相比于外包小作坊的優勢,自營數據團隊的第三方模式在這一點上尤為明顯;因為散兵游勇和小型工作室,較難在崗前培訓、質量控制和數據安全上做足夠的投入。

  三是客戶結構改變帶來的新機會——即除了人工智能公司或有相關業務的科技公司外,各行各業的企業都開始更多投入數字化和人工智能,其中部分企業,一方面有對外采購技術服務的習慣和流程,一方面又缺乏非常先進、成熟的內部人工智能技術,比如無法像很多人工智能公司那樣,快速開發自己的標注提效工具,這類公司會更加倚重專業的第三方服務,這擴大了整體市場規模。

  對數據標注需求大且復雜的自動駕駛公司也逐漸從最初的主要依靠自有團隊標注轉向部分采購第三方服務。

  某Robo-Taxi公司深度學習技術負責人Ted(化名)告訴「甲子光年」,現在,公司內部的數據團隊除了數據檢查,還會負責比較特殊的數據類型標注,但需要大量數據的方向,會找外包公司。

  “對于Robo-taxi這種比較specific(專業)的產業來說,最終目標是實現100%的無人駕駛,這意味著我們的模型不能出錯。”Ted解釋:“但再高精度的機器算法,再全面的傳感器設置,也只能保證95%的準確率,要想更上一層樓,必須依賴更精準的標注數據用于算法提升。”

  需求側的變化,傳導到供給側,引起了一輪洗牌。

  一方面,馬太效應日顯。

  誕生于硅谷的Scale AI,在短短三年內,成長為市值破十億美元的明星獨角獸,而今年的銷售額已增長至近億美元,4個月前,還宣布完成了1億美元的C輪融資。國內巨頭的增速同樣亮眼,例如Testin云測旗下數據標注品牌“云測數據”,業務規模量每年都在以倍數的規模增長。而據艾瑞咨詢最新報告顯示,2018年中國人工智能基礎數據服務年復合增長率為23.5%,數據標注賽道主要玩家的增速遠高于行業平均水平。

  另一方面,更多類型的玩家都想來分一杯羹

  國際巨頭亞馬遜、Appen早早入場,已在數據標注市場占據一席之地。 國內BAT等老牌互聯網巨頭也將數據標注納入自己公司的業務范圍,成立項目組(部),對內降本,對外創收,如阿里數據和京東眾智。

  近來,行業頭部企業進一步涌現,如2015年成立的Scale AI,3年躋身獨角獸;以測試起家的Testin云測在2017年積極布局數據標注領域。

  仔細分析這些主要玩家,其實模式主要有兩種:一是眾包平臺,二是自營團隊。

  前者以“需求公司——標注公司作為數據標注平臺——第三方標注團隊協作”為主要結構,起到串聯有數據標注需求的客戶以及零散的大眾志愿者的作用。

  后者則省卻了中間眾包商環節,形成“需求公司——數據標注公司”的垂直結構。

  “目前,大多數公司采用眾包模式,國際上大名鼎鼎的如Scale AI、Amazon Mechanical Turk以及澳洲Appen走的都是這條道路。”李世民說。

  而云測數據,則選擇了玩家更少、專業性更高的一條路——定制化數據服務。

  云測數據的選擇來自對市場和自身的思考、判斷。

  “兩種模式其實是共存的,客戶可以根據自身需求進行取舍。”云測數據交付部門負責人朱文輝評價道,但就當前標注規則愈加復雜、交付周期縮短且對安全性要求提高的市場趨勢來說,定制化模式更有前景。

  云測數據總經理賈宇航告訴「甲子光年」,隨著人工智能對數據采標的復雜度和精細度要求變高,眾包在現有技術條件下,很難實現品控。

  “以人臉識別為例,以前的需求是拉框、標注五官,現在需要標注幾百個點,精確到3-5像素以內。”賈宇航補充說:“我們希望通過精準高質、獨立安全的數據幫助客戶快速構建核心壁壘。”

  此外,云測數據從測試業務中繼承了to B的企業基因,一方面積累了品牌口碑和客戶資源,另一方面也貫徹了嚴格把控質量的管理風格,這也是云測數據入局數據標注的優勢所在。

  Testin云測投資方,IDG資本牛奎光總結道,效率和貼合度是當前數據標注供應商競爭的核心:“定制化可以用最高效的方式提供人工智能落地前最后一公里的數據服務。”

  他認為,隨著人工智能產品進入落地多元行業和場景,作為人工智能算法的“養料”,數據也向著場景化發展。可以說在算法、算力沒有重大突破的前提下,場景化的數據就是核心優勢。因此貼合度較高的定制化服務能力就顯得尤為重要。

  2.雙面“做重”

  從實踐效果看,云測數據的選擇在市場和客戶之中獲得了很多良性反饋。

  “我們的業務規模量每年都在以倍數的規模增長。”賈宇航告訴「甲子光年」,云測數據標注服務了安防、駕駛、金融、家居等領域的上百家企業。

  “自動駕駛產業是比較適合定制化服務的。”Ted表示將跟云測數據建立長期的合作關系。

  Ted接觸過很多數據標注供應商,包括硅谷的Scale AI,國內的云測數據、BasicFinder和百度數據等,他采取“試標注”這種遍地撒網的方法——將相同的標注樣本給到不同的標注公司,根據標注結果擇優合作——挑選最具“性價比”合作伙伴

  作為客戶,Ted認為,首先,打價格戰的時代已經過去了,同一價格區間內,質優者勝

  “質量代表著速度。”李世民解釋說,人工智能工程師的時薪很高,企業雇傭他們處理數據的成本也很高,一旦數據失準,在上游的數據標注和下游的人工智能工程師兩端,會產生雙重的成本浪費。

  例如,在一個機器學習的完整工作鏈條中,數據清洗和標注在總任務中所占的時間比例超過50%。如果無法保證數據的準確性,便會出現無效訓練和無限返工的惡性循環,對寸時寸金的人工智能公司行業而言,這無疑會造成巨大的負面影響。

image.png

  “畢竟是勞動密集型工種,定制化的人員培訓很重要。在全景標注和3D點云這類難點項目上體現得尤為明顯。”Ted補充說,全景圖中標的物多且雜亂,稍不注意就會有錯漏,整張圖都要打回重標;3D點云中,距離較遠的物體點數較少,很難識別,更別提辨別朝向了。

  一張全景分割或3D點云的標注單價高達20-30元(價格以項目需求為準,不作為行業參考價),但Ted看來,“即便價格高一點,我也愿意跟云測數據這樣互動性強、準確度高、保密性好的數據標注公司合作。”

  其實,對于整個人工智能行業來說,高質數據的價值都在日益凸顯。

  曾負責過企業軟件采購的朱文輝,對成本和質量的取舍之道很有心得:“手頭也有過幾百上千萬的預算,特別明白客戶的心態——寧愿多付錢也要質量過關的產品。”

  其次,在選擇供應商時,互聯網巨頭不如獨立第三方數據標注公司吃香。

  “大廠的業務水準雖然非常advanced(先進),但考慮到母公司可能也有自動駕駛的團隊或業務,難免會擔心自家數據被拿去訓練別人的模型;再加上要價不菲,所以合作并不多。”

  Ted繼續補充,如果跟第三方數據標注公司合作,就不用擔憂這種問題。他們要價合理,而且既不會把數據外泄,也不會自用。

  最后,固定數據標注團隊的優勢還在于,長期服務某類項目能實現自我迭代。

  專注于人工智能視覺領域的物品識別的品覽數據科技也是云測數據的客戶之一,其創始人兼CEO李一帆認為,對于一些需要搭建測試環境、要求專業知識儲備或涉及復雜場景的數據標注任務來說,標注人員培訓成本較高,如果長期有這樣高價值的標注需求,定制化的性價比反而更高。

  把數據效率放在第一位的自營團隊,很擅長應對這類需要專人快速響應的標注需求。

  朱文輝告訴「甲子光年」,近年來,客戶面臨的競爭壓力變大,花錢更為謹慎。雖然整個市場對數據標注的需求在上升,但場景差異變大,相應地人力成本也在上升。“量小、批次多、難度大是整個數據標注市場的大趨勢。”朱文輝補充道。

  另外,自營團隊一般會根據項目組織人員,在兩三批數據的交付之后,標注員會變得更加熟練,效率也會自然跟著提高。

  但任何一種模式都是雙刃劍,定制化也有挑戰和短板,即人工成本和管理成本高,且應對需求的彈性不足

  對標Scale AI的Graviti創始人崔運凱評價說:“定制化模式對抗業務潮汐的能力較差。”

  需求的彈性會導致自營團隊模式出現人員冗余或人員短缺的問題,任務分發上不如眾包公司靈活;人力成本也高,尤其隨著數據標注團隊的線性擴張,管理團隊層級會增多,人數會指數級增長。

  3. 效率壁壘

  經緯的創始合伙人張穎曾對創業公司提出短中期內最有意義的七條建議,第一條便是:所有輕公司以后都會做重,也必須做重,只有做重才能有效抗拒巨頭殺入,也唯有如此才能做大。

  其實不管是重的定制化服務,還是輕的眾包平臺,表面的輕重之外,真正核心的是滿足市場當下需求與公司自身效率之間的平衡。

  從需求的角度來說,目前市場的兩個特點,能一定程度上自然規避定制化的弊端。

  首先,整個市場仍在放量增長,尤其是傳統行業,會成為數據標注的新增長引擎。

  2017年賈宇航從Testin云測北美事業部回到北京總部,并與很多美國的人工智能從業者都保持著密切聯系,他認為中國市場具有獨特性,傳統行業智能化升級對數據標注市場的拓展潛力不可小覷。

  在五年的旅美生涯中,賈宇航觀察到,中國人的模式創新意識更強,更容易出現分散式的產業革新,“美國全靠Google和Amazon這樣的巨頭帶動,相比之下,中國人工智能落地的動力多了一級,這將是一個高新科技產業和傳統產業相向而行的過程,其中的市場空間是無窮的。”

image.png

  隨著人工智能在金融、醫療、安防等多個領域實現技術落地,人工智能公司對數據的使用逐漸有“大”的趨勢,整個行業正在逐漸向多模態、多場景、高精度的方向發展。

  基于這一洞察,企業服務型公司Testin云測擴展了數據標注業務品牌云測數據,通過自建數據場景實驗室和數據標注基地,為智能駕駛、智能家居、智慧城市、智慧金融、新零售等領域提供定制化的數據采集、數據標注服務。 今年早些時候,Testin云測CTO陳冠誠曾在采訪中表示,云測數據在AI數據采集標注行業將繼續扮演“同行者”的角色,除了滿足客戶的需求之外,還希望提供更高效率的服務:“我們一直在用工程化迭代的技術不斷改進采集標注的流程效率、加快人工標注速度。”

  其次,當前市場還處于藍海,所以潮汐現象和浪費不明顯。

  提及業務潮汐的風險,賈宇航答道:“我認為這個問題目前不對我們造成任何困擾,市場供需極不平衡,打個比方,我們和客戶之間比較類似高精尖企業和人才之間的供給關系,需求遠大于供應量。

  很多數據標注從業者也有類似的評價,有人將數據標注市場形容成“一片商業藍海”,也有人說“同行之間甚至都算不上競爭對手”。

  說法大同小異,結論卻很一致:目前人工智能行業對精確優質、安全獨立的數據標注服務需求極大。

  Testin云測CMO張鵬飛也強調,“從整體看來,AI數據行業關于安全、隱私等方面并沒有統一的標準和強調重視。但從我們長遠角度出發,一直在隱私和安全防護角度下大力氣服務行業、樹立數據質量標桿,只有以這種負責的態度來服務客戶,我們的行業才能‘良幣驅除劣幣’,真正讓人工智能成為新一輪技術革命,改變整個社會和人類進程”。

  整個行業在可預見的很長時間內都會處于供不應求的賣方市場。

image.png

  此外,對于Testin云測這一類企業服務賽道上的明星玩家來說,此時入場擴張數據標注業務更是近水樓臺先得月——他們以往的測試等業務已積累了一批現成的渠道商

  連續創業者李一帆起初是Testin云測測試業務的客戶,2018年成立品覽后有了數據標注的新需求,他選擇了跟“老伙計”Testin云測繼續合作。

  “其實我也向其他數據標注公司詢過價,最終選擇云測數據是出于兩方面的考慮。”李一帆解釋道:“一是因為更換合作機構的切換成本和溝通成本太高;二是相對于其他數據標注機構,對云測數據的專業度和服務質量比較了解,更看好云測數據的質量和安全性把控,和對人工智能行業的前瞻思考,也更有信心。”

  云測數據的人工智能數據團隊運營至今已制定了一套包含任務分配、需求分析、需求確認、數據清洗、試標確認、進度控制、質量保障等流程的完整作業體系 。

  牛奎光評價道,Testin云測一開始更多的是提供基于質量工程化的服務,隨著人工智能時代的到來,對人工智能企業提供數據服務,實際上也是在加速移動互聯網、產業互聯網、人工智能產業的生命周期。

  朱文輝告訴「甲子光年」,就整個數據標注市場而言,合作與競爭都是下一個階段的議題,同行還在自覺共建行業生態和品牌聲譽,“把蛋糕做大”才是當前的發展重心。

  此外,自營團隊做定制化數據服務,是不是一定效率低下?

  可以用制造業來類比,半手工的作坊和機器大工業生產,雖然同屬“制造”,但效率天差地別。差距由兩個關鍵因素導致,一是自動化水平,也就是工具提效;二是生流程管理——云測數據在這兩方面都已有較多探索。

  在工具提效方面,云測數據自研了一套可以支持圖片、語音、文本等多品類的標注工具,并開發了三維標注工具,尤其是在3D點云的標注系統中優化了渲染引擎,保證整個過程的流暢和快捷,當屬業內領先。

  “我們注意到在3D點云連續幀標注時,前后幀的切換非常耗時,云測數據的web GL工程師通過自研渲染工具把緩沖時長縮減至十分流暢。”賈宇航在北京總部向「甲子光年」展示了優化之后的標注工具。

  據朱文輝介紹,云測組建了一支專門的研發團隊,“研發團隊里有產品經理、前后端工程師”等,他們會針對不同領域循環式地改進標注工具,并根據客戶需求,實時反饋、實時更新、實時研發。 “平均每季度或更快有一次較大的迭代。”朱文輝回憶道:“迭代之后有些領域的效率提高了三倍不止。” 云測數據從啟動伊始,就十分重視技術提效,陳冠誠曾在采訪中提及:“(云測)數據采集標注的客戶遍布各行各業,對于文本數據、語音數據、視頻數據甚至是激光雷達的3D點云數據,我們都可以用工程化迭代來做高效的標注和流程管理,提高效率,幫助客戶成功。” 在流程管理方面,云測數據也建立起一套包含崗前培訓、早部署晚復盤、分項目人工質檢的管理系統。 朱文輝告訴「甲子光年」,目前云測數據在華東、華北、華南共設有三個標注基地,還有幾個基地在部署中,現在共有千人規模左右的數據服務人員。 “新人都會經過兩個月的崗前培訓”,朱文輝說,隨著行業要求的提高,人員也在更新換代,我們的激勵機制和晉升機制比較完善,還提供園區食堂的餐補,年輕人的離職率并不高。”

image.png

  除了積極招兵買馬,云測數據還有相當一部分的項目經理是從傳統制造業轉型而來,“這些人很懂環環相扣的流程管理,對包括風險、成本等流程節點的控制很在行。”朱文輝補充道。

  牛奎光稱:“云測數據的數據服務優勢,除了數據質量、規模化以外,其效率優勢也很突出,因為企業產品都有對應的發布周期,對效率的要求也會越來越高。”

  朱文輝認為,誰能優先突破認知效率、管理效率和標準化,誰就很有可能在一眾數據標注公司中拔得頭籌。

  4.進化:新物種的可能性

  從整個數據標注賽道來看,這個此前”隱于聚光燈之外”的行業,正在走向大眾的視野,展現更多可能性。

  一是可預測的,數據量的爆發增長。

  當前,人工智能正全面加速產業落地。德勤預測,2025年世界人工智能市場將超過6萬億美元,2017-2025年人工智能復合增長率將達30%。

  賈宇航認為5G到來之后,整個人工智能行業數據量將會向橫、縱拓展。

  橫向拓展,是人工智能從科技公司走入各行各業公司。

  比如賈宇航告訴「甲子光年」,云測數據大部分的客戶來自智慧城市和駕駛等與人工智能結合緊密的領域,但一個明顯的新發展是,來自金融、家居等傳統行業的客戶正逐漸增加,而在兩年前,這類客戶的占比幾乎為0。各行各業的數字化、智能化,很可能成長為新的增長點。

  縱向的拓展則是,隨通信、芯片等基礎設施的發展,物聯網潮流下,硬件、傳感器數量持續增長,相應的數據量持續增長,各行業、各場景都將經歷更深程度的數字化。

  “從深度學習、機器學習的發展趨勢和應用方向可以明顯看到,不管是鉆得更深或是在應用層面鋪得更廣,我們都會需要更多數據。我覺得這個趨勢至少還能保持十幾年。”Ted相信,未來數據標注的重要性也許還會跨上一個新臺階。在現有以監督學習為主的技術環境下,數據量爆發意味著標注需求的爆發。

  二是,標注業務本身的智能化、人工智能化。

  賈宇航告訴「甲子光年」,隨著算法的突破,圖像生成技術會極大地提升數據采集和數據標注行業門檻。針對企業的數據需求,將更加定制化,同時也凸顯數據需求定制中的策略性。 現在的技術可以通過數據增強技術額外合成的數據來模擬移位(Translation)、視角(Viewpoint)、大小(Size)、照明(Illumination)等等條件,生成更多可用于訓練數據。 具體到AI數據服務中,在數據采集和標注環節, AI企業對數據服務商有更加嚴格的要求,如環境,光線,被采樣本等采集環境的搭建。AI企業擁有這些純凈數據,可以更加有效的拓展更多數據,達到數據增強的目的。

  例如,“通過定制化的數據采集方法,客戶可以規定特定的光線角度和綠墻背景,得到一組可塑性較強的原始數據,再通過變換背景、合成光線、調轉光源角度等等方法,得到成百上千倍的衍生數據。”賈宇航也強調,這樣的元數據對相關條件的控制往往異常嚴格,因此對第三方數據標注承包商的要求也更高。

  “屆時勞動密集型的產業特征將被改變,方法論和策略性將更優,采集和標注的時間成本也將大大縮小,數據標注公司有可能都將進化為高精尖的定制化團隊。”賈宇航補充道。

image.png

  也有不少從業者認為預標注技術和半自動化校驗可能將推動數據標注行業進一步進化。

  “在特定場景中,預標注工具把小數據變成模型再去預標,縮小人工調節的空間。”李一帆判斷,預標注技術的逐漸成熟或許會在未來大幅降低標注成本。

  Ted也提到,Scale AI聚集了一幫人嘗試用算法來輔助標注,如果成功,只需幾個點,就可以生成整個面的自動標注,這將會極大地提高標注效率。

  但就目前的市場現狀來看,預標注技術在很多細節上并不精準,Ted認為,距離預標注技術的應用落地,還需要很長一段時間。

  在數據質檢流程上,也有用自動化技術和人工智能技術提效的空間。

  “如果可以用半自動化的方式實現驗收或是自動對比,可以節省掉相當一部分管理層的人力成本。”Ted提出了另一個可能會讓數據標注行業更有效率的方式,并不是要用機器取代人工標注,而是用機器輔助人工標注。

  賈宇航也有相似的觀點,他表示,云測會投入更多人力進行驗收工具的研發,提升質檢效率,提高標注質量。

  隨著人工智能技術與場景的結合逐漸深化,科技創業者們進入了一片沒有航海圖的水域,對于伴生的數據標注行業來說,未來的航程同樣值得期待。

  這真像劉禹錫的那句:“沉舟側畔千帆過,病樹前頭萬木春”。


【聲明】物流產品網轉載本文目的在于傳遞信息,并不代表贊同其觀點或對真實性負責,物流產品網倡導尊重與保護知識產權。如發現文章存在版權問題,煩請聯系小編電話:010-82387008,我們將及時進行處理。

10秒快速發布需求

讓物流專家來找您

主站蜘蛛池模板: 欧美激情高潮无遮挡_成人无码区免费a片www_成年女人免费视频播放人_2015天堂网_精品一二三区视频_久久久天堂国产精品女人_成人无码潮喷在线观看_亚洲AV永久无码天堂网毛片 | 久久精品.com_色综合天天色_99手机在线视频_哈哈哈哈哈第4季免费视频高清_日本精品在线一区_亚洲成人黄色_91热爆视频_成视频免费在线 | 久久婷婷综合缴情亚洲狠狠_久久伦理_欧美日韩视频免费在线观看_欧美国产日韩成人_神天至尊动漫免费观看高清_最近中文字幕在线免费视频_久久久999精品_一级大片免费看 | 五月丁香综合缴情六月小说_精品午夜福利无人区乱码一区_国产精品精品国内自产拍_久久久亚洲福利精品午夜_欧美男男GAY可播放免费不卡_九九精品热播_国产高清视频青青青在线_www.99热这里只有精品 | 男人的天堂色_欧美日韩色_一性一交一伦一色一按—摩_久久婷婷五月综合色和啪_日本欧洲国产一区二区_www.色99_av网站播放_91影库_91影库免费视频-91影库影院 | 免费偷拍视频_免费看黄网站在线观看_久久www色情成人免费观看_狠狠人妻久久久久久综合_一区二区精品在线_99国产精品久久久久久久久久久_亚洲中又文字幕精品av_一二三不卡视频 | 久草在线免_国产色视频免费_久久一区二区视频_欧美色三区_免费av直接进入_人妻出轨中文字幕不卡一区_爱操成人网_亚洲国产成av人天堂无码 | 特黄三级又爽又粗又大_国产精品99久久久久久一二区_成人看片人aa_综合成人_欧美激情一区三区_亚洲www在线观看_韩日在线观看视频_久久无码欧美一二三区 | 丰满人妻熟妇乱又仑精品_色精品一区二区三区_91精品午夜窝窝看片_sss海量视频在线观看_亚洲高清视频免费观看_中文字幕亚洲欧美专区_草草影院第一页yyccc_亚洲国产七七久久桃花 | 久久精品2_性色一区二区三区_久草热这里有精品6_天天爽夜夜爽夜夜爽_91麻豆国产福利精品_99精品视频精品精品视频_一级大片免费_久久99精品国产麻豆不卡 | 天天干天天做天天射_色狠狠av五综合久久久_暖暖免费一二三区在线_无尺码精品日本欧美_99久久免费看精品_小荡货腿张开给我cao免费视频_秋霞a级毛片在线看_亚洲欧洲在线视频 | 九九视频精品全部免费播放_国产51人人成人人人人爽色哟哟_全职猎人1999在线动漫免费观看_91好色视频_九色在线网站_超碰97人人草_亚洲成AV人片高潮喷水_黄色成人在线播放 | 久久久精品人妻一区二区三区蜜桃_美女视频在线观看黄_大地8在线观看免费影视大全_999人在线精品播放视频_日韩视频一二区_亚洲同人在线播放_天堂精品在线_午夜国产精品成人 | 日本熟妇厨房bbw_欧美天天影院_国产精品一二三四区_大菠萝福利视频_18禁勿入免费网站入口不卡_av不卡免费在线_免费看p_亚洲最大中文字幕无码网站 | 久久久久久久久久久久91_中国孕妇变态孕交XXXX_国精品无码人妻一区二区三区_国产成人免费在线视频_成人免费看片_免费二区_91视频视频_亚洲2021av天堂手机版 | 狠狠色噜噜狠狠狠狠888奇米_日本翁妇免费视频_欧美乱码伦视频免费_久久久噜噜噜久久久精品_97中文字幕第20页_亚洲最色网_国产精品一级片_野外一级片 | 亚洲最大在线视频_色成人在线_国产毛片18片毛一级特黄日韩a_91视频麻豆_国产91精品免费视频_自拍视频啪_69国产成人免费精品视频_先锋影音最新色资源站 | 成人黄色免费视频网站_网友自拍视频在线_日日操夜夜爽_成人动漫综合网_国产又粗又猛又爽又黄的视频软件_久草视频中文在线_中文字幕在线国产_欧美日韩国产一二 | 成人精品免费毛片7778_在线吴梦梦视频一区二区_午夜手机看片_欧美一级特黄视频_欧美乱码视频_三人一起玩弄娇妻高潮_影音先锋中文字幕无码资源站_狠狠色综合久久丁香婷婷| japanesexxxx日本妞_国产精品午夜福利院_亚洲欧洲中文日韩_国产麻豆影视_国产东北一级毛片_性夜影院在线观看_青草青在线_超碰99在线观看 | 99久久综合精品免费_日本免费A级毛一片_欧美日韩亚洲国产综合_97色伦图片97综合影院_中文字幕免费视频观看_中文字幕a∨在线乱码免费看_亚洲福利_99热蜜臀 | 红杏国产成人精品视频_欧美超碰在线观看_免费日韩一区_国产一二三精品无码不卡日本_www.亚洲精品.com_国产精品久久久久久久岛一牛影视_国产精品人妻一区夜夜爱_人人人人爱 | 日本久久黄色片_开心婷婷丁香五月综合中文日韩_免费观看在线A毛片_色综合久久久久综合体桃花网_99国产精品一区_久久在线精品视频_gogogo免费高清在线_国产老妇伦国产熟女老妇视频 | 精品综合久久久久久88_国产啊啊啊视频在线观看_未满十八18禁止免费网站_日韩人妻无码一区二区三区久久99_国产xxxx69真实实拍_中国激情网_yiren22亚洲综合伊人22_少妇激三级做爰在线观看 | 激情伊人五月天久久综合_放荡少妇张开双腿任人玩_国产一区二区久久久_99国产在线精品_国产在线视频一区二区_成人一区二_成人一级视频在线观看_a成人毛片 | 国语做受对白XXXXX在线_国产资源精品在线观看_日韩免费毛片_国产日韩欧美一区二区宅男_九九99精品_免费a级午夜绝情美女图片_日本欧美黄色大片_国产美女一级在线观看 | 日日干夜夜爱_欧美交换配乱吟粗大免费看_三级免费黄_最新中文字幕第一页_把腿张开老子cao烂你_国产系列精品av_国产中文字幕免费_韩国av网站在线观看 | 超碰在线久_中文字幕けのぁ一般男女_91福利在线观看_7777日本精品一区二区三区_四虎永久地址www成人_在线天堂中文在线资源网_成人午夜天堂_旧里番高h无码无修在线观看 国产乱子伦精品免费女_AV人摸人人人澡人人超碰妓女_亚洲高清中文字幕免费_我爱我爱色成人网_亚洲一区不卡在线_夜夜未满十八勿进的爽爽影院_J97久久国产亚洲精品超碰热_日本高清久久久 | 色接久久_欧亚乱熟女一区二区三区在线_激情综合色五月六月婷婷_18无码粉嫩小泬无套在线观看_h视频免费_成·人免费午夜视频_天堂网在线最新版www_79年熟女大胆露脸啪啪对白P | 国精日本亚洲欧州国产中文久久_亚洲国产精华_一级久久久久_97在线观视频免费观看_久久久国产精品伦理一区二区三区_日韩一区二区三区免费观看_日本成人a网站_免费在线观看毛片 | 亚洲色图在线免费观看_久亚洲一线产区二线产区三线产_国产免费久久久久久无码_龙珠z中文版普通话_国产又色又爽又黄又免费_japanese日本护士高潮_午夜久久视频_精灵宝可梦旅途中文版免费观看 | 亚洲第一成年人视频_麻豆网站在线_狠狠鲁视频_亚洲人成人影院在线观看_萍萍的性荡生活2_欧美一级日韩一级无毒不卡_国产精品久久精品99国产百盛_蜜臀av性久久久久蜜臀aⅴ四虎 | 精品国产一区在线观看_欧美日韩网址_亚洲天堂首页_精品免费一区二区_亚洲欧美日本精品_97影院手机版_夜夜爱夜夜做夜夜爽_黄色网页在线播放 | 免费成年人_亚洲熟妇中文字幕五十中出_精品一区二区三区免费在线观看_四虎永久影院_国产普通话尤物吞精视频_精精国产xxxx视频在线动漫_亚洲综人网_国产一区二区欧美 | 99ri精品国产亚洲_精品国产乱码久久久久久蜜臀_制服在线无码专区_中文字幕无线乱码人妻_国产精品毛片一区二区在线_丁香婷婷六月综合网_亚洲永久av_久久久亚洲欧美 | 9191精品_色琪琪一区二区三区亚洲区_微拍福利88_精品国产黄_久久国产成人亚洲精品影院_天天操天天干天天操_九色蝌蚪少妇_vvv.成人观看视频 | 俺也来俺也去俺也射_午夜精品久久久久久久久_国产高清一级毛片_日本线视频www_少妇粉嫩小泬白浆流出_99久久精品毛片免费_亚洲AV无码专区日韩乱码不卡_久久夜夜躁天天躁背后的原因 | 国内精品免费一区二区三区_国产日韩欧美综合色视频在线_韩国精品无码午夜福利视预_韩国裸体美女_国产一级黄视频_日韩免费福利_久久久久久久久99精品大_一级黄色片国产 | 欧美成人精品一区_国产人妻熟女在线观看_天天干天天干天天干天天干天天干_av综合久久_一本之道伊人_日韩爽妇网_免费日韩_亚洲国产成人高清在线播放 | 91专区在线观看_yellow中文字幕国产资源_国产嫩草影院久久久久_激情天堂网_久草网站在线观看_强奷表妺好紧2_免费观看又黄又爽的视频_免费在线国产视频 | 别插我b嗯啊视频免费_色婷婷av一本二本三本浪潮_182午夜免费_青青青草伊人_久久久免费国产_综合色91_最近中文mv字幕免费高清在线7_色噜噜狠狠色综合成人网 |