时武三思率蕃夷酋长，请造天枢于端门外，刻字纪功，以颂周德，璹为督作使。证圣初，璹加秋官尚书、同平章事。是岁，明堂灾，则天欲责躬避正殿，璹奏曰：“此实人火，非曰天灾。至如成周宣榭，卜代愈隆；汉武建章，盛德弥永。臣又见《弥勒下生经》云，当弥勒成佛之时，七宝台须臾散坏。睹此无常之相，便成正觉之因。故知圣人之道，随缘示化，方便之利，博济良多。可使由之，义存于此。况今明堂，乃是布政之所，非宗庙之地，陛下若避正殿，于礼未为得也。”左拾遗刘承庆廷奏云：“明堂宗祀之所，今既被焚，陛下宜辍朝思过。”璹又持前议以争之，则天乃依璹奏。先令璹监造天枢，至是以功当赐爵一等。璹表请回赠父一官，乃追赠其父豫州司户参军处平为博州刺史。天后将封嵩岳，命璹总知撰仪注，并充封禅副使。及重造明堂，又令璹充使督作，以功加银青光禄大夫。
时有大石国使请献狮子，璹上疏谏曰：“狮子猛兽，唯止食肉，远从碎叶，以至神都，肉既难得，检为劳费。陛下以百姓为心，虑一物有失，鹰犬不蓄，渔猎总停。运不杀以阐大慈，垂好生以敷至德，凡在翾飞蠢动，莫不感荷仁恩。岂容自菲薄于身，而厚资给于兽，求之至理，必不然乎”。疏奏，遽停来使。又九鼎初成，制令黄金千两涂之。璹进谏曰：“夫鼎者神器，贵在质朴自然，无假别为浮饰。臣观其状，先有五彩辉焕，错杂其间，岂待金色，方为炫耀？”则天又从之。
寻属契丹犯塞，命梁王武三思为榆关道安抚大使、璹为副使以备之。及还，坐事，神功初左授益州大都督府长史。蜀中官吏多贪暴，璹屡有发扌适，奸无所容。则天嘉之，降玺书劳之曰：“夫严霜之下，识贞松之擅奇，疾风之前，知劲草之为贵。物既有此，人亦宜哉。卿早荷朝恩，委任斯重。居中作相，弘益已多，防边训兵，心力俱尽。岁寒无改，终始不渝。乃眷蜀中，氓俗殷杂，久缺良守，弊于侵渔，政以贿成，人无措足。是用命卿出镇，寄兹存养。果能揽辔澄清，下车整肃。吏不敢犯，奸无所容，前后纠扌适，盖非一绪。贪残之伍，屏迹于列城；剽夺之俦，遁形于外境。讵劳期月，康此黎元，言念德声，良深嘉尚。宜布琅邪之化，当以豫州为法。”则天又尝谓侍臣曰：“凡为长官，能清自身者甚易，清得僚吏者甚难。至于姚璹，可谓兼之矣。”
时新都丞硃待辟坐赃至死，逮捕系狱。待辟素善沙门理中，阴结诸不逞，因待辟以杀璹为名，拟据巴蜀为乱。人密表告之者，制令璹按其狱。璹深持之，事涉疑似引而诛死者，仅以千数。则天又令洛州长史宋元爽、御史中丞霍献可等重加详覆，亦无所发明。逮系狱数百人，不胜酷毒，递相附会，以就反状。因此籍没者复五十余家，其余称知反配流者亦十八九，道路冤之。监察御史袁恕己劾奏其事。则天初令璹与恕己对定，又寻令罢推。俄拜地官尚书。岁余，转冬官尚书，仍西京留守。长安中，累表乞骸骨，制听致仕，进爵为伯。遇官名复旧，为工部尚书。神龙元年卒，遗令薄葬，赠越州都督，谥曰成。
弟班，少好学，以勤苦自立。举明经，累除定、汴、沧、虢、豳等五州刺史，加银青光禄大夫，转秦州刺史。以善政有闻，玺书褒美，赐绢百匹。神龙元年，累封宣城郡公，三迁太子詹事，仍兼左庶子。时节愍太子举事不法，班前后上书进谏。今载四事：
其一曰：臣闻贾谊曰：“选天下之端士，孝悌博闻有道术者，使与太子居处出入。故太子见正事，闻正言，行正道，左右前后皆正人也。夫习与正人居之，不能无正；习与不正人居之，不能无不正。太子既冠成人，免于保傅之严，则有记过之史。彻膳之宰，进善之旌，诽谤之木，敢谏之鼓，瞽史诵箴，大夫进谋，故习与智长，化与心成。夫教得而左右正，则太子正矣；太子正而天下定矣。”臣又闻之，木从绳则正，后从谏则圣。善言古者，所以验于今。伏惟殿下睿德洪深，天姿聪敏，近代成败，前古安危，莫不悬鉴在心，动合典礼。臣以庸朽，滥居辅弼，虚备耳目，叨预股肱，辄荐尘露，庶裨山海。伏以内置作坊，工巧得入宫闱之内、禁卫之所，或言语内出，或事状外通，小人无知，不识轻重，因为诈伪，有玷徽猷。臣望并付所司，以停宫内造作。如或要须役造，犹望宫外安置，庶得工匠不于宫禁出入。
其二曰：臣闻汉文帝身衣弋绨，足履革舄；齐高帝栏槛用铜者，皆易以铁。经侯带玉具剑环珮以过魏，太子不视，经侯曰：“魏国亦有宝乎？”太子曰：“主信臣忠，魏之宝也。”经侯委剑珮而去。太子使追还之，谓曰：“珠玉珍玩，寒不可衣，饥不可食，无遗我贼。”经侯杜门不出。臣观圣贤经籍，务以简素为贵；皇王政化，皆以菲薄为德。伏惟殿下留心恭俭，靡尚浮奢。臣愚犹望损之又损之，居简以行简，减省造作，节量用度。
其三曰：臣闻银牖铜楼，宫闱严秘，门閤来往，皆有簿历。殿下时有所须，唯门司宣令，或恐奸伪之辈，因此妄为增减，脱有文状舛错，事理便即差违。且近日吕升之便乃代署宣敕，伏赖殿下睿敏，当即觉其奸伪，自余臣下庸浅，岂能深辨真虚？望墨令及覆事行下，并用内印印画署之后，冀得免有诈假，乃是长久规模。臣又闻之，忠臣事君，有犯而无隐；明主驭下，纳谏以进德。故《书》云：“有言逆于志，必求诸道；有言顺于心，必求诸非道。”伏惟殿下仁明昭著，圣敬日跻，探幽洞微，穷神索隐。事之善恶，毫厘靡差；理有危疑，锱铢无爽。臣以庸谬，叨侍春闱，职居献替，岂敢缄默！
其四曰：臣闻圣人不专其德，贤智必有所师。故曰：与善人言，如入芝兰之室，久自芬芳；与不善人言，如火销膏，不觉而尽。今司经见无学士，供奉未有侍读，伏望时因视膳，奏请置人。所冀讲席谈筵，务尽忠规之道；披文扌适句，方资审谕之勤。臣又闻臣之事主，必尽乃诚；君之进贤，务求忠谠。伏惟殿下养德储闱，以端静为务；恭膺守器，以学业为先。经所以立行修身，史所以谙识成败。雅诰既习，忠孝乃成，传记方通，安危斯辨。知父子君臣之道，识古今鉴戒之规，经史为先，斯乃急务。至于工巧造作，僚吏直司，实为末事，无足劳虑。臣以庸浅，献替是司，臣而不言，负谴圣日，言而获罪，是所甘心。伏愿留意经书，简略细事，一蒙采纳，万殒无辞。乞降储明，俯矜狂瞽。
疏奏，太子虽称善，竟不悛革。太子败，诏遣索其宫中，得班谏书，中宗嘉其切直。时宫臣皆贬黜，唯班擢拜右散骑常侍。岁余，迁秘书监。
睿宗即位，累授户部尚书，转太子宾客。先天二年，加金紫光禄大夫，复拜户部尚书。班与兄弟璹，数年间俱为定州刺史、户部尚书，时人荣之。开元二年卒，年七十四。班尝以其曾祖察所撰《汉书训纂》，多为后之注《汉书》者隐没名氏，将为己说；班乃撰《汉书绍训》四十卷，以发明旧义，行于代。
史臣曰：天子有诤臣七人，虽无道不失其天下。致庐陵复位，唐祚中兴，诤由狄公，一人以蔽。或曰：许之太甚。答曰：当革命之时，朋邪甚众，非推诚竭力，致身忘家者，孰能与于此乎！仁杰流死不避，骨鲠有彰，虽逢好杀无辜，能使终畏大义。竟存天下，岂不然乎！王方庆干城南海，羽冀东宫，台阁枢机，无不功济，所谓君子不器者也。苟非文学，斯焉取斯。璹成都布政，始卒不侔；相国上章，或否或中。且焚明堂而避正殿，固诤何多；黜唐颂而立天枢，一言非措。矧乃妄求符瑞，已失忠贞；精择楚茅，难裨过咎。不常其德，罔畏承羞。班规谏有才，牧守多善，储幄之任，可谓得人。
赞曰：犯颜忤旨，返政扶危。是人杂事，狄能有之。终替武氏，克复唐基。功之莫大，人无以师。方庆之才，周旋特立。璹也无常，班能操执。“)